360fans_uid30474366 发表于 2022-12-10 15:44

几个网址都没办法抓取诊断


9652301 发表于 2022-12-10 21:33

你好，建议网站方核查站点是否拦截了我们的蜘蛛，并建议将我们的蜘蛛放入可访问的白名单当中，避免造成错误的拦截，我们的蜘蛛ip可参考：http://www.so.com/help/spider_ip.html

另外，也请正确设置robots文件，确保相关的诊断不会出现异常
页: [1]
查看完整版本: 几个网址都没办法抓取诊断