**王小美** @[email protected] · Dec 12, 2020, 06:12

**王小美** @[email protected] · Dec 12, 2020, 06:12

王小美 @[email protected]

其实，如果是爬虫抓取的话，好像封IP也没有什么意义吧。。在Nginx上针对IP 的reject 看起来只是个形式罢了～

@[email protected] · Dec 12, 2020, 09:20

@[email protected] · Dec 12, 2020, 09:20

@mashiro 要不减速器上面封ip段
要不写个禁止所有爬虫的robots.txt

**王小美** @[email protected] · Dec 12, 2020, 09:22

**王小美** @[email protected] · Dec 12, 2020, 09:22

王小美 @[email protected]

@EndlessDaydreams 遵守robot.txt的爬虫都是好爬虫，大部分搬家爬虫都不看的

@[email protected] · Dec 12, 2020, 09:24

@[email protected] · Dec 12, 2020, 09:24

@mashiro 如果从UserAgent来判断可以吗
（不过好像也不行）

**王小美** @[email protected] · 2020-12-12T09:30:21Z

王小美 @[email protected]

@EndlessDaydreams 效果不明显的。最好的方法是设置白名单，然后给白名单外的请求加上JS challenger

@[email protected] · Dec 12, 2020, 09:36

@[email protected] · Dec 12, 2020, 09:36

@mashiro 啊对，，减速器全站UAM就可以了

**王小美** @[email protected] · Dec 12, 2020, 09:39

**王小美** @[email protected] · Dec 12, 2020, 09:39

王小美 @[email protected]

@EndlessDaydreams 但这样会严重降低用户体验