Linux apache有没有办法把yahoo msn等垃圾蜘蛛屏蔽？ [复制链接]
查看:47 | 回复:3

yim · 发表于 2011-10-10 20:24:18

Linux apache有没有办法把yahoo msn等垃圾蜘蛛屏蔽？
百度看到.htaccess可以屏蔽，但是vps的站比较多，能不能简单些设置，整个vps都把这些蜘蛛都屏蔽？

求解！！

cdm · 发表于 2011-10-10 20:26:19

没来流量就差不多很垃圾了，对于网站而言，哈哈。
robots.txt要写太多次了。而且也不是强制！

cdm · 发表于 2011-10-10 20:27:07

http头

yim · 发表于 2011-10-10 20:31:33

怎么写？求解