nginx 如何禁止国外 ip 访问，但是放过国外的 google、bing 爬虫 ip 该如何做？

[herozzm]

看到用 ngx_http_geoip2 模块来禁止所有国外 ip ，如何再放过 google 、bing 爬虫国外 ip 该如何做？

[Rache1]

之前看到过一种较为灵活的方法， 建一个 Redis Set ，由后端去把需要禁止掉的 IP 丢进去。然后在 nginx 里面调 lua 查 Redis 进行处理。

[herozzm]

@Rache1 我想到一个策略，就是将爬虫的 ip 全部找到弄成白名单

[Rache1]

@herozzm 也可以，各家都是有公布 IP 段的

[abccccabc]

https://v2ex.com/t/927189#reply12


楼主，你看下这贴，有你要的答案。