百度搜索资源平台的「抓取诊断」怎么用：三步看出问题在哪

这个工具被低估了。它能模拟百度蜘蛛抓一次你的页面，把返回的 HTML、状态码、耗时都摆给你看。

相比看服务器日志，它的优势是即时和可读——日志要等蜘蛛来、要会看懂、还容易被各种爬虫淹掉；抓取诊断是你主动发起，几秒钟出结果。

第一步：诊断首页

看状态码是不是 200，耗时多少。如果首页都要超过 1 秒，其他页面只会更慢。

耗时这一项容易被忽略。有人觉得「能打开就行」，但百度对抓取耗时是敏感的——响应慢的站，抓取频次会被压低，因为它在单位时间里能抓的页面少。我见过一个站其他指标都正常，就是首页响应 3 秒，抓取频次一直上不去，换成更快的服务器后两周就有改善。

第二步：诊断文章页

重点看两件事：

返回的 HTML 里正文在不在。有些 JS 渲染的站，蜘蛛拿到的是空壳。判断方法很直接：把返回的 HTML 复制出来，搜一下正文里的某个独特短语，搜不到就说明正文没被渲染。

有没有意外出现 noindex。这个更隐蔽。可能是主题模板的某处条件判断写错了，可能是某个插件在特定 UA 下加了标签。诊断结果里搜一下 noindex，有就一定要找出来源。

第三步：对比手机和电脑

平台支持切换 UA。移动端返回的内容如果和桌面端差太多，或者移动端直接报错，都会影响移动收录。

这一步现在比前两步更重要——百度早已是移动优先，移动端的抓取结果决定收录。我遇到过一个站桌面端完美，移动端因为一个 JS 报错导致页面白屏，收录掉了大半才发现。

常见发现

• 主题开了 lazyload，图片地址全是占位符——蜘蛛不看 JS，看到的是 data-src 而不是 src，图片等于不存在
• 伪静态规则把某类 URL 重写到了 404——特别是带分页的列表页，/page/2/ 这种经常漏配
• 安全插件拦截了蜘蛛 UA——某些防火墙把非常规 UA 当攻击，结果蜘蛛也被挡
• CDN 缓存了错误页面——某次源站故障时缓存了 500 页面，恢复后缓存还在

这几类问题，光看前台完全看不出，只有从蜘蛛的视角看才能发现。

一个使用习惯

我建议在每次改完主题、插件或服务器配置后，都用抓取诊断跑一遍首页和一篇文章页。当成一次简单的回归测试，花不了两分钟，能省掉很多「改完就出问题但不知道哪里出问题」的时间。

这个工具的好处是即时反馈，不用等日志。