什么是Bingbot?
Bingbot 是 Microsoft 用来收集信息以构建可搜索的网络索引的网络爬虫。它为 Bing 搜索引擎提供支持。
它与Googlebot为 Google 所做的工作相同。
Bingbot于2010年10月推出。
根据Cloudflare Radar 的数据,Bingbot 是全球第三大最活跃的爬虫(AhrefsBot 排名第四)
Bingbot 的用户代理字符串是:
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
与任何其他优秀的搜索机器人一样,Bingbot 尊重robots.txt文件中的规则以及链接和页面上的“nofollow”指令。
除了 Bingbot 之外,Bing 还运行 AdIdxBot(用于 Bing Ads)和 BingPreview(用于生成页面快照)。