1、编辑httpd.conf配置
# vi /etc/httpd/conf/httpd.conf
2、添加下面的到配置文件中
#user-agent
BrowserMatch "360JK qiyunce" bad_bot
BrowserMatch "Python-urllib" bad_bot
BrowserMatch "WinHttp" bad_bot
BrowserMatch "MJ12bot" bad_bot
BrowserMatch "AhrefsBot" bad_bot
BrowserMatch "HttpClient" bad_bot
<Location />
Order Allow,Deny
#Deny from env=bad_bot
Allow from all
Deny from env=bad_bot
</Location>
3、重启apache服务
# service httpd restart
附网上搜集到的部分恶意user-agent
BOT/0.1 (BOT for JCE) sql注入
CrawlDaddy sql注入
Java 内容采集
Jullo 内容采集
Feedly 内容采集
UniversalFeedParser 内容采集
ApacheBench cc攻击器
Swiftbot 无用爬虫
YandexBot 无用爬虫
AhrefsBot 无用爬虫
YisouSpider 无用爬虫
jikeSpider 无用爬虫
MJ12bot 无用爬虫
ZmEu phpmyadmin 漏洞扫描
WinHttp 采集cc攻击
EasouSpider 无用爬虫
HttpClient tcp攻击
Microsoft URL Control 扫描
YYSpider 无用爬虫
jaunty wordpress爆破扫描器
oBot 无用爬虫
Python-urllib 内容采集
Indy Library 扫描
FlightDeckReports Bot 无用爬虫
Linguee Bot 无用爬虫
