如果您的站点遇到了这个爬虫，不要惊慌。将您的域名解析到一个被 ban 的 ip 上，2 天后再解析正常到 ip。从此风平浪静！
This topic created in 2536 days ago, the information mentioned may be changed or developed.
4 replies • 2019-12-06 22:16:59 +08:00
 |
killervNov 28, 2019
1
肯定不行，自己的业务不也异常了吗？直接对这个 UA 拒绝访问就行了。
|
 |
VegetableNov 28, 2019
2
是字节跳动的爬虫吗?貌似 robots.txt 不行?可太秀了
|
 |
dorothyRENNov 28, 2019
3
直接给他返回 404 不就行了
|
 |
BillowSkyDec 6, 2019
4
谢谢老哥，真的可以，好棒棒！
|
Select Language