经发现，虽然wget遵循 robots.txt 规则，但是那个还是可以绕过去，现在56云小编把我自己使用的屏蔽方法分享给大家：

创新互联主营察布查尔锡伯网站建设的网络公司,主营网站建设方案,重庆App定制开发,察布查尔锡伯h5成都微信小程序搭建,察布查尔锡伯网站营销推广欢迎察布查尔锡伯等地区企业咨询

1. 屏蔽下载任何文件

.htaccess

SetEnvIfNoCase User-Agent "^wget" bad_bot

Order Allow,Deny

Allow from all

Deny from env=bad_bot

2. 屏蔽下载部分文件

.htaccess

SetEnvIfNoCase User-Agent "^Wget" bad_bot

SetEnvIfNoCase User-Agent "^Wget/1.5.3" bad_bot

SetEnvIfNoCase User-Agent "^Wget/1.6" bad_bot

Order Allow,Deny

Allow from all

Deny from env=bad_bot

另外有需要云服务器可以了解下创新互联scvps.cn，海内外云服务器15元起步，三天无理由+7*72小时售后在线，公司持有idc许可证，提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案，具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势，专为企业上云打造定制，能够满足用户丰富、多元化的应用场景需求。

分享题目：apache使用.htaccess文件实现屏蔽wget下载网-创新互联
网页链接：http://azwzsj.com/article/ppggh.html