全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 778|回复: 4
打印 上一主题 下一主题

[疑问] 最近看了看网站监控报表发现出现大量502错误

[复制链接]
跳转到指定楼层
1#
发表于 2022-8-11 17:47:23 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
仔细分析了下,发现是一个爬虫不定时大量爬我的网站导致的,间歇性的502导致网站有时候访问不了


爬虫访问一次就换一次ip,幸好ua没有变动,还能屏蔽,我发出来看mjj有没有遇到过

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.4951.41 Safari/537.36 Edg/101.0.1210.32

2#
 楼主| 发表于 2022-8-12 17:07:59 | 只看该作者
百度了下Chrome/101.0.4951.41 Safari/537.36 Edg/101.0.1210.32,发现很多爬虫教程用的这个ua - -,我去,
3#
发表于 2022-8-12 17:21:14 | 只看该作者
这样屏蔽这个UA没有任何意义啊。
随便更换
4#
发表于 2022-8-12 17:33:42 | 只看该作者
啥网站被采集发来看看
5#
发表于 2022-8-12 20:17:03 | 只看该作者
什么监控?

PS上杜甫。。。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-4-26 00:02 , Processed in 0.063350 second(s), 9 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表