干掉了一些爬虫


        if ($http_user_agent ~* "python|curl|java|wget|httpclient|okhttp") {
            return 503;
        }

其实Nginx可以非常容易地根据User-Agent过滤请求,我们只需要在需要URL入口位置通过一个简单的正则表达式就可以过滤不符合要求的爬虫请求

发表评论

电子邮件地址不会被公开。 必填项已用*标注