Applebot是什么

Fanly问答2020-03-17 10:08:40阅读(...)

Applebot 是 Apple 推出的网络爬虫工具。“Siri 建议”和“聚焦建议”等产品均使用 Applebot。这个工具遵循惯用的 robots.txt 规则和 robots 元标签,并且源自 17.0.0.0 网络块。

Applebot 是 Apple 推出的网络爬虫工具。“Siri 建议”和“聚焦建议”等产品均使用 Applebot。这个工具遵循惯用的 robots.txt 规则和 robots 元标签,并且源自 17.0.0.0 网络块。

Apple logo

识别 Applebot

用户代理字符串包含“Applebot”和其他代理信息。示例如下:

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/600.2.5 (KHTML, like Gecko) Version/8.0.2 Safari/600.2.5 (Applebot/0.1)

Applebot 还支持以下指令:

  1. noindex:Applebot 不会针对相关页面创建索引,并且相关页面不会出现在“聚焦建议”或“Siri 建议”中。
  2. nosnippet:Applebot 不会生成页面描述或网页答案。所有示意访问相关 URL 的建议都仅包含页面的标题。
  3. nofollow:Applebot 不会追踪页面上所示的任何链接。
  4. none:如上所述,Applebot 不会针对页面创建索引、生成片段或追踪页面上所示的链接。
  5. all:Applebot 会针对建议提供文稿并生成内容片段,以便在具有代表性的图片旁边显示有关页面的简短描述。Applebot 可能会追踪页面上所示的链接,以提供更多建议。
收藏0个人收藏
走进科技生活方式

评论交流

泪雪默认头像请「登录」后参与评论
  1. 加载中..