如果您的站点遇到了这个爬虫，不要惊慌。将您的域名解析到一个被 ban 的 ip 上，2 天后再解析正常到 ip。从此风平浪静！
This topic created in 2382 days ago, the information mentioned may be changed or developed.
4 replies • 2019-12-06 22:16:59 +08:00
 |
1
killerv Nov 28, 2019
肯定不行，自己的业务不也异常了吗？直接对这个 UA 拒绝访问就行了。
|
 |
2
Vegetable Nov 28, 2019
是字节跳动的爬虫吗?貌似 robots.txt 不行?可太秀了
|
 |
3
dorothyREN Nov 28, 2019
直接给他返回 404 不就行了
|
 |
4
BillowSky Dec 6, 2019
谢谢老哥，真的可以，好棒棒！
|
Select Language