一、搜索述有索引主流搜索引擎蜘蛛名称
百度 
主要蜘蛛：Baiduspider（普通网页）、引擎Baiduspider-image（图片）、蜘蛛蜘蛛Baiduspider-video（视频）、名搜名Baiduspider-news（新闻）、搜索述有索引Baiduspider-mobile（WAP页面）
其他名称：曾用BaiduSpider，引擎但自2019年后官方统一使用上述名称
谷歌
主要蜘蛛：Googlebot（普通网页）、蜘蛛蜘蛛Googlebot-Mobile（WAP页面）
特殊说明：官方名称包含"compatible"标识，名搜名最新版本为"Googlebot/2.1"
必应
蜘蛛名称：bingbot（普通网页）、搜索述有索引BingPreview（图片预览）
雅虎
蜘蛛名称：Yahoo! Spider（旧称）
360浏览器
蜘蛛名称：360Spider（高频抓取）
搜狗
蜘蛛名称：SogouSpider、引擎Sogou web spider
有道
蜘蛛名称：YoudaoBot、蜘蛛蜘蛛YodaoBot
其他
MSN：msnbot、名搜名msnbot-media
雅虎：Yahoo!5.0（旧版标识）
二、搜索述有索引其他常见信息补充
移动端专用蜘蛛： 如Googlebot-Mobile（抓取WAP页面）、引擎Baiduspider-mobile（百度移动版） 特殊场景蜘蛛
用户建议：若需阻止特定蜘蛛，可通过`robots.txt`文件设置规则
以上信息综合了多个权威来源，覆盖了2019年至今的主要搜索引擎爬虫名称及功能说明。
