国内外搜索引擎的爬虫汇总_国搜爬虫

作者：菜鸟追梦旅行 | 2024-06-01 20:05:15

踩

国搜爬虫

我们常用的搜索引擎类型有：　　

google蜘蛛：Googlebot 　　

百度蜘蛛：Baiduspider 　　

360蜘蛛：360Spider 　　

yahoo蜘蛛：Yahoo!slurp 　　

alexa蜘蛛：ia_archiver 　　

bing蜘蛛：MSNbot 　　

altavista蜘蛛：scooter 　　

lycos蜘蛛：lycos_spider_(t-rex) 　　

alltheweb蜘蛛：fast-webcrawler 　　

inktomi蜘蛛：slurp 　　

Soso蜘蛛：Sosospider 　　

Google Adsense蜘蛛：Mediapartners-Google 　　

有道蜘蛛：YoudaoBot 　　

泽许蜘蛛: Zexuwhte

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/菜鸟追梦旅行/article/detail/659219