zqjilove
V2EX  ›  站长

如何屏蔽网站被恶意搜索请求?

  •  
  •   zqjilove · May 19, 2018 · 4816 views
    This topic created in 3100 days ago, the information mentioned may be changed or developed.

    刚刚建了一个工具站(本身也是抓取三方数据),但是就有人直接构造 URL,用代理不断访问搜索页面,导致站点不断啊抓取第三方数据,直接被限制了。有什么办法可以比较方便的解决这种恶意搜索请求呢?

    img

    5 replies  •  2018-05-20 16:10:00 +08:00
    serical
    serical
    May 19, 2018 via Android
    1
    你抓了先缓存起来,解决了被限制的问题,再来斗智斗勇😏
    m939594960
    m939594960
    May 19, 2018
    2
    限制同 IP 的搜索频率
    golmic
    golmic
    May 19, 2018 via Android
    3
    人家能用代理你也用
    m939594960
    m939594960
    May 19, 2018
    4
    限制同 IP 的搜索频率,或者注册后才能搜索,或者到达某个数量后开启验证码
    jssyxzy
    jssyxzy
    May 20, 2018
    5
    百度下"范爬虫"
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   933 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 21:35 · PVG 05:35 · LAX 13:35 · JFK 16:35
    ♥ Do have faith in what you're doing.