一、搜索搜索主流搜索引擎蜘蛛名称

主要蜘蛛:Baiduspider(普通网页)、引擎引擎Baiduspider-image(图片)、包括Baiduspider-video(视频)、全部Baiduspider-news(新闻)、蜘蛛Baiduspider-mobile(WAP页面)

其他名称:曾用BaiduSpider,搜索搜索但自2019年后官方统一使用上述名称

谷歌
主要蜘蛛:Googlebot(普通网页)、引擎引擎Googlebot-Mobile(WAP页面)
特殊说明:官方名称包含"compatible"标识,包括最新版本为"Googlebot/2.1"
必应
蜘蛛名称:bingbot(普通网页)、全部BingPreview(图片预览)
雅虎
蜘蛛名称:Yahoo! Spider(旧称)
360浏览器
蜘蛛名称:360Spider(高频抓取)
搜狗
蜘蛛名称:SogouSpider、蜘蛛Sogou web spider
有道
蜘蛛名称:YoudaoBot、搜索搜索YodaoBot
其他
MSN:msnbot、引擎引擎msnbot-media
雅虎:Yahoo!5.0(旧版标识)
二、包括其他常见信息补充
移动端专用蜘蛛: 如Googlebot-Mobile(抓取WAP页面)、全部Baiduspider-mobile(百度移动版) 特殊场景蜘蛛
用户建议:若需阻止特定蜘蛛,可通过`robots.txt`文件设置规则
以上信息综合了多个权威来源,覆盖了2019年至今的主要搜索引擎爬虫名称及功能说明。