温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Apache 禁止指定user_agent(防止爬虫扒取)

发布时间:2020-07-15 03:56:45 来源:网络 阅读:915 作者:lin790292154 栏目:网络安全

该功能可以禁止部分我们不需要的访问名单(),通过改写rewrite模块来实现。


tail /tmp/

tail  /usr/local/apache2/logs/test.com-access_20150121_log

 

在rewrite模块中添加如下信息:

RewriteCond %{HTTP_USER_AGENT} ^.*curl.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*chrome* [NC]

RewriteRule .* - [F]

保存退出


测试

apachectl -t

apachectl restart

curl -x127.0.0.1:80 www.test.com/data/forum.php(默认403错误)

curl -x192.168.11.160:80 www.test.com/data/forum.php(默认403错误)

vi  /usr/local/apache2/conf/extra/httpd-vhosts.conf(注释掉)

# RewriteCond %{HTTP_USER_AGENT} ^.*curl.* [NC,OR]

apachectl -t

apachectl restart

curl -x192.168.11.160:80 www.test.com/adsjkf(404)

curl -x192.168.11.160:80 www.test.com/forum.php -I(200)

浏览器 www.test.com

curl -A "sdfsadsdfa"  -x192.168.11.160:80 www.test.com/forum.php -I

curl -A "sdfsadchrome  sdfa"  -x192.168.11.160:80 www.test.com/forum.php -I


向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI