东华帝君 发表于 2022-1-17 17:09

网站被42.236.17.* 360蜘蛛爬瘫痪了

最近网站更换了服务器，发现经常打开速度比较慢，查询服务器发现大量的42.236.开头的蜘蛛（经查询对比全部都是360蜘蛛）给服务器都弄瘫痪了，我是16核32线程 32G内存 50MB带宽
我现在没办法 用防火墙封了一部分蜘蛛的IP

东华帝君 发表于 2022-1-17 17:11

在哪可以设置蜘蛛抓取上线，今日头条来的蜘蛛也很多，但是不会出现网站打不开，网站打开超级慢的现象，只有360的蜘蛛是这样。该怎么破

小葱豆腐 发表于 2022-1-17 17:38

您好，如有需要可以根据您网站的实际运营需求，手工调整蜘蛛抓取频率：http://zhanzhang.so.com/sitetool/spider_report

那一瞬间我和你 发表于 2022-1-17 20:18

我不怕瘫，360来爬我的站，谷歌一天都来爬26万多次，360才来不到一百次，还只爬一下网站地图就撤了，快来爬我
www.910w.net

360fans_OSWysy 发表于 2022-2-17 20:14

我的网站就没见到过360蜘蛛，是怎么回事啊？之前是有的，最近很长时间没见过了

a302356009 发表于 2022-2-18 11:01

是ip还是蜘蛛，要带360spider的UA才是蜘蛛，光是ip不算蜘蛛

360fans_uid21929888 发表于 2022-2-19 22:19

我都没有蜘蛛来了，我希望360蜘蛛来把我爬死，http://www.kuguatv.com   http://www.lajiaody.com

360fans_uid21929888 发表于 2022-2-19 22:21

我的站都没有360蜘蛛来爬，热烈欢迎360蜘蛛来爬，来者不拒http://www.kuguatv.com    http://www.lajiaody.com

360fans_ErcjmK 发表于 2022-2-21 09:07

尼玛，真的是旱的旱死，涝的涝死，淦{:15_457:}

哒哒啊啊 发表于 2022-8-24 21:36

我今天也被大量的42.236.开头的蜘蛛给干瘫痪了，草

360fans_kzSQPr 发表于 2022-8-26 16:28

我的站不怕摊，欢迎360蜘蛛天天来爬，快来快来zhoroo.com

d南_327 发表于 2022-9-6 08:50

我都都不来 请求抓取啊 https://www.2484.cn

涵涵涛涛 发表于 2022-9-7 09:55

我也喜欢大量的360蜘蛛来爬 www.jiansheku.com

360fans298527212 发表于 2022-12-27 15:34

现在你怎么解决的？继续屏蔽吗？

360fans30163462 发表于 2023-1-13 16:08

42.236.17. 我也是今天抓了30万页面，360是要把网站搞死
页: [1]
查看完整版本: 网站被42.236.17.* 360蜘蛛爬瘫痪了