全球主机交流论坛

标题: 最近看了看网站监控报表发现出现大量502错误 [打印本页]

作者: wwt654 时间: 2022-8-11 17:47
标题: 最近看了看网站监控报表发现出现大量502错误
仔细分析了下,发现是一个爬虫不定时大量爬我的网站导致的,间歇性的502导致网站有时候访问不了

爬虫访问一次就换一次ip,幸好ua没有变动,还能屏蔽,我发出来看mjj有没有遇到过

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.4951.41 Safari/537.36 Edg/101.0.1210.32

作者: wwt654 时间: 2022-8-12 17:07
百度了下Chrome/101.0.4951.41 Safari/537.36 Edg/101.0.1210.32，发现很多爬虫教程用的这个ua - -，我去，

作者: mjjok 时间: 2022-8-12 17:21
这样屏蔽这个UA没有任何意义啊。
随便更换

作者: kng 时间: 2022-8-12 17:33
啥网站被采集发来看看

作者: 四叶草 时间: 2022-8-12 20:17
什么监控？

PS上杜甫。。。

欢迎光临全球主机交流论坛 (https://91ai.net/)