版块 › 360站长平台 › 360搜索蜘蛛IP段及蜘蛛ip被拦截的问题解决方法

360fans_uid25444838 发表于 2016-6-21 14:13

360搜索蜘蛛IP段及蜘蛛ip被拦截的问题解决方法

本帖最后由 紫夜ミ月 于 2020-6-23 17:32 编辑

360Spider的ip，我们已经公开在这里辣~：
http://www.so.com/help/spider_ip.html

360Spider的UA（UA是蜘蛛访问的时候，在服务器中留下的访问签名信息，凡是下面这个UA，就代表是360Spider来过了）：
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36; 360Spider

360robots协议支持FAQ：
http://www.haosou.com/help/help_3_2.html


关于蜘蛛被拦截：
蜘蛛被拦截一般是网站服务器或防火墙在做设置时，不小心将搜索引擎的蜘蛛做了拦截，导致蜘蛛无法访问，获取不到网站信息。这种问题会导致网站不收录或收录出现异常的问题


蜘蛛被拦截的常见现象有：
1、360Spider 无访问记录
2、360Spider 有访问页面的记录，但是访问的http状态为非200的状态，主要状态码有：404、403、0、503、504、521等
3、部分优质内容不收录或者收录出现异常（如优质内容的收录数量剧烈下降等，注意：关于内容收录的维度，也请参考我们之前发布的各类算法和白皮书，不清楚的小伙伴可以看这里）

如下面这个站点，就是典型的蜘蛛被拦截，我们没有办法收录到，其表现为http抓取状态为0


如何解决？
1、将我们的蜘蛛ip、UA加入到可访问的白名单
2、加白之后，尽快通过网站收录提交入口，提交网站的收录，并通过站长平台，提交网站的sitemap，观察一段时间（一般建议观察15-30天）看是否开始有收录
3、向您的空间服务商进行反馈，告知其加白我们的蜘蛛ip以及ua

以上就是我们解决蜘蛛被拦截的一个基本思路，各位小伙伴清楚了波~
如果仍然有疑问或者需要我们协助，可以向我们发邮件进行反馈，我们的反馈邮箱是：service-so@360.cn








感谢大家对360搜索的支持

360fans_u31519549 发表于 2016-6-26 11:06

顶一下支持支持大力支持

兮羽 发表于 2016-6-27 09:33

182.118.22.*

good2day 发表于 2016-6-27 09:50

支持ip段

770398127 发表于 2017-3-10 15:07

我的网站怎么今天查询收录，只有20了，158资源整合网

360fans_u17647801 发表于 2016-6-26 12:38

{:3_41:}好

360fans71536483 发表于 2016-6-28 00:45

顶一个

360fans_uid16126229 发表于 2016-6-29 12:13

学习了，nb

360fans299859260 发表于 2016-6-29 17:50

很有用，360蜘蛛牛叉

360fans_u31517693 发表于 2016-7-1 17:10

{:2_25:}{:2_25:}

360fans2713632637 发表于 2016-7-1 22:57

顶一下支持支持大力支持

winstonjsb 发表于 2016-7-2 09:25

大力支持，并感谢

兮羽 发表于 2016-7-2 16:42

182.118.22.*

360fans_uid17177805 发表于 2016-7-4 10:44

管理员，问一下这几个IP段是360的蜘蛛吗？

42.236.48.*
42.236.49.*

360fans_uid25444838 发表于 2016-7-6 17:24

360fans_uid17177805 发表于 2016-7-4 10:44
管理员，问一下这几个IP段是360的蜘蛛吗？

42.236.48.*

不是

360fans_uid14524196 发表于 2016-7-6 17:30

支持一下

360fans2722699417 发表于 2016-7-7 09:39

蓝色夜空 发表于 2016-7-8 01:29

你在干嘛呢？

es_king 发表于 2016-7-8 01:39

{:2_26:}

360fans_uid4541580 发表于 2016-7-8 03:47

{:2_25:}

360fanswoZXU2 发表于 2016-7-13 11:55

老大，这些如何运用，请指点下！

兮羽 发表于 2016-7-14 07:58

182.118.22.*

360fans_uid852976 发表于 2016-7-14 08:23

{:4_109:}{:4_108:}{:4_107:}{:4_106:}

360fans_uid428246 发表于 2016-7-17 13:02

119.57.158.*
119.57.159.*
42.156.254.*

这三个ip段有人知道吗？

360fans168707476 发表于 2016-7-17 20:14

表面上没有我，但是实际上我中奖了...

360fans_uid31651625 发表于 2016-7-17 22:21

老司机带带我可好

360fans_uid31651625 发表于 2016-7-17 22:21

老司机带带我

360fans_uid31651625 发表于 2016-7-17 22:21

老司机单独

360fans_uid26068681 发表于 2016-7-18 10:31

前来支持一个

360fans_uid96577 发表于 2016-7-18 10:53

顶顶顶！

360fans156361684 发表于 2016-7-19 10:54

以后可以认识360蜘蛛了，了解具体抓取情况了

查看完整版本: 360搜索蜘蛛IP段及蜘蛛ip被拦截的问题解决方法