您现在的位置是:首页 > 站长新闻站长新闻

百度站长抓取诊断显示失败 状态码200 无法抓取到具体内容

2021-06-12【站长新闻】人已围观

简介尝试的解决方案:使用了几乎国内所有CDN都测试了一遍,最后只有百度的云加速生效后可以正常抓取。但最近百度云加速会自动把百度爬虫的抓取回源地址,导致百度无法抓取。模拟抓取是正常的,用百度云加速的CDN后百度可以正常抓取,说明是网页源码和设置都没



尝试的解决方案:使用了几乎国内所有CDN都测试了一遍,最后只有百度的云加速生效后可以正常抓取。但最近百度云加速会自动把百度爬虫的抓取回源地址,导致百度无法抓取。


模拟抓取是正常的,用百度云加速的CDN后百度可以正常抓取,说明是网页源码和设置都没有问题。现在个别页面也可以正常抓取,说明也没有屏蔽百度蜘蛛。所以现在感觉这个问题很奇怪,很长时间了,后台反馈给百度也是一直在处理中,没有结果。

200反馈是百度反馈的,你要看网站日志对于文件的反馈。

Tags:抓取   具体内容   诊断   失败   状态

很赞哦! ()

随机图文

文章评论

站点信息

  • 建站时间:2020-2-22
  • 网站程序:帝国CMS7.5
  • 文章统计9933篇文章
  • 标签管理标签云
  • 统计数据百度统计
  • 微信号:扫描二维码,联系我