菜鸡源码,专注精品下载!
当前位置:首页 > 建站教程 > 建站知识

搜索引擎蜘蛛爬虫UA标识大全分享

发布时间:2024-01-04  栏目:建站知识   浏览:   分类:搜索引擎

搜索引擎蜘蛛爬虫UA标识大全分享:User-Agent是浏览器向服务器发送请求时,附带的一段信息,用于告诉服务器客户端使用的操作系统、浏览器类型等信息。不同的搜索引擎蜘蛛爬虫有不同的User-Agent标识,例如谷歌蜘蛛的User-Agent为“Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)”,百度蜘蛛的User-Agent为“Baiduspider/2.0”。了解这些标识可以帮助我们更好地优化网站,提高网站的排名和流量。

搜索引擎蜘蛛UA标识

蜘蛛名称搜索引擎名称UA标识Googlebot谷歌

compatible;Googlebot/2.1;+http://www.google.com/bot.html

Baiduspider百度compatible;Baiduspider/2.0;+http://www.baidu.com/search/spider.htmlBingbot微软bingcompatible;bingbot/2.0;+http://www.bing.com/bingbot.htm360Spider360搜索Mozilla/5.0(Windows NT 10.0;Win64;x64)AppleWebKit/537.36(KHTML,like Gecko)Chrome/71.0.3578.98 Safari/5 37.36;360SpiderSogou web spider搜狗搜索Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07YisouSpider神马搜索Mozilla/5.0(Windows NT 6.1;Win64;x64)AppleWebKit/537.36(KHTML,like Gecko)Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36yandexBotYandexcompatible;YandexBot/3.0;+http://yandex.com/botsDuckDuckGoDuckDuckGoMozilla/5.0(Linux;Android 10)AppleWebK it/537.36(KHTML,like Gecko)Version/4.0 Chrome/81.0.4044.138 Mobile Safari/537.36 DuckDuckGo/5YoudaoBot有道

Mozilla/5.0 (compatible; YoudaoBot/1.0; http://www.youdao.com/help/webmaster/spider/; )

msnbotMSN

*msnbot/1.0 (+http://search.msn.com/msnbot.htm”)

Yahoo雅虎

Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)

Bytespider头条

Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)

评论
建站知识
建站知识
使用技巧
调试安装
运营推广