刚刚建了一个工具站(本身也是抓取三方数据),但是就有人直接构造 URL,用代理不断访问搜索页面,导致站点不断啊抓取第三方数据,直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢?
1
serical 2018-05-19 11:07:14 +08:00 via Android
你抓了先缓存起来,解决了被限制的问题,再来斗智斗勇😏
|
2
m939594960 2018-05-19 12:33:33 +08:00
限制同 IP 的搜索频率
|
3
golmic 2018-05-19 12:52:37 +08:00 via Android
人家能用代理你也用
|
4
m939594960 2018-05-19 12:56:00 +08:00
限制同 IP 的搜索频率,或者注册后才能搜索,或者到达某个数量后开启验证码
|
5
jssyxzy 2018-05-20 16:10:00 +08:00
百度下"范爬虫"
|