海外多家主流媒体网站对苹果 AI 内容抓取机器人 Applebot 说不
2024-08-30 15:23:52 - 网易新闻
IT之家8月30日消息，《连线》（Wired）昨日（8月29日）发布博文，报道多家主流媒体向苹果的数据抓取机器人Applebot说不。
报道称多家主流媒体都选择屏蔽苹果的Applebot抓取机器人，其中包括：
苹果Applebot最早于2014年11月被曝光，于2015年5月正式披露。
而苹果Applebot-Extended是Applebot的增强版，过去十年来苹果一直在抓取网站内容，用于改进Siri和Spotlight搜索等。
IT之家援引《连线》报道，大部分主流出版商都使用robots.txt文本来阻止苹果抓取，在上周展开的两项研究中，约有6%至7%的高流量网站屏蔽了苹果公司的搜索工具Applebot-Extended。
BenWelsh上周展开的后续研究显示，在测试的网站中，有25%屏蔽了苹果的Applebot-Extended。
Welsh的研究发现，OpenAI的机器人被53%的新闻网站拦截，而谷歌的Google-Extended机器人被43%的网站拦截。
《连线》的结论是，虽然网站可能并不关心苹果智能是否在搜索它们，但拦截率低的主要原因是，苹果的人工智能机器人相对知名度不高，没有引起公司的重视。