苹果官方已经证实传闻已久的“AppleBot”网络爬虫存在。这种苹果官方推出的网络爬虫,去年十一月被外界发现。现在,苹果在最近更新的支持文档当中给出了一些细节。据苹果表示,“AppleBot”网络爬虫主要用于苹果 Siri 和 Spotlight。这两种服务均提供网络搜索功能,但到现在为止,人们通常认为苹果通过现有的搜索引擎如谷歌或必应进行搜索查询。
“AppleBot”网络爬虫操作类似于谷歌的谷歌机器人,苹果建议开发者,如果没有发现 AppleBot 特定的指令,它会按照 Googlebot 的指令进行运作。如果网站经营者对“AppleBot”网络爬虫有问题或疑虑,可以尽快与苹果网络运营中心联系。
目前还不清楚“AppleBot”网络爬虫已经运行了多长时间。苹果是在今年 2 月份推出了揭示“AppleBot”网络爬虫的支持文档。一个 web 开发人员去年的 11 月份发现了“AppleBot”网络爬虫,它来自于 17.0.0.0/8 的 IP 地址,这些地址只分配给了苹果公司使用。