刚刚建了一个工具站(本身也是抓取三方数据),但是就有人直接构造 URL,用代理不断访问搜索页面,导致站点不断啊抓取第三方数据,直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢?

刚刚建了一个工具站(本身也是抓取三方数据),但是就有人直接构造 URL,用代理不断访问搜索页面,导致站点不断啊抓取第三方数据,直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢?

|
sericalMay 19, 2018 via Android
1
你抓了先缓存起来,解决了被限制的问题,再来斗智斗勇😏
|
|
m939594960May 19, 2018
2
限制同 IP 的搜索频率
|
|
golmicMay 19, 2018 via Android
3
人家能用代理你也用
|
|
m939594960May 19, 2018
4
限制同 IP 的搜索频率,或者注册后才能搜索,或者到达某个数量后开启验证码
|
|
jssyxzyMay 20, 2018
5
百度下"范爬虫"
|