武汉网站优化分享国内几个干流搜索引擎蜘蛛的称号
武汉网站优化分享国内几个干流搜索引擎蜘蛛的称号
国内几个干流搜索引擎蜘蛛的称号
搜索引擎蜘蛛(又名爬虫、Crawler、Spider等)是搜索引擎的一个主动程序。它的作用是拜访互联网上的页面,树立索引数据库,运用户能在搜索引擎中搜索到你网站的页面。
每个搜索引擎的蜘蛛姓名都是不一样的,接下来为你介绍国内几个干流搜索引擎蜘蛛的称号。
1. Google蜘蛛称号
1) Googlebot:从Google的网站索引和新闻索引中抓取页面
2) Googlebot-Mobile对于Google的移动索引抓取页面
3) Googlebot-Image:对于Google的图像索引抓取页面
4) Mediapartners-Google:抓取页面断定 AdSense 的内容。只要在你的网站上展现 AdSense 广告的情况下,Google才会运用此周游器来抓取您的网站。
5) Adsbot-Google:抓取页面来衡量 AdWords 方针页面的质量。只要在你运用 Google AdWords 为你的网站做广告的情况下,Google才会运用此周游器。武汉网站优化
2. baidu蜘蛛称号:Baiduspider 首字母B大写,其他为小写
3. yahoo(Yahoo!)蜘蛛称号:
1)Yahoo!搜索蜘蛛称号:Yahoo! Slurp。
2)Yahoo!搜索引擎广告蜘蛛:Yahoo!-AdCrawler。 用来抓取Yahoo!搜索引擎广告登入页页面
4. 有道蜘蛛称号:YodaoBot
5. 腾讯搜搜soso蜘蛛称号:Sosospider 首字母S大写,其他为小写
6. 搜狗(sogou)蜘蛛称号:sogou spider
7. Live蜘蛛称号
1)MSNBot:Main web crawler (www.live.com)
2)MSNBot-Media:Images & all other media (images.live.com)
3)MSNBot-NewsBlogs:News and blogs (search.live.com/news)
4)MSNBot-Products:Products & shopping (products.live.com)
5)MSNBot-Academic:Academic search (academic.live.com)
武汉网站优化