AMH 社区首页
AMH社区 - 开放自由有价值的社区
[求助帖] 请教如何禁止360Spider蜘蛛 |
|
---|---|
孤星泪 |
孤星泪 发表于 2015-05-14 15:50:51
试过robots.txt写如下内容无效
User-agent: 360Spider 无耻的360无视robots.txtDisallow: / 蜘蛛统计有蜘蛛IP,想通过禁止IP来屏蔽360Spider不知道行不行的通? AMH4.2好像也没找到哪里有IP访问限制,请问如何禁止某个IP访问网站?
点赞,加油! (0分)
2015-05-14 15:50:51 1
|
iCharlesC |
简单的说 因为“360违背了业内通行爬虫协议” ,另外,你可以加上 HaoSouSpider 到disallow 里面试试。
如果ip的话,安装amh 自己的firwall, 在里面的iptable 加上要拦截的ip 设置
回复
2015-05-15 16:01:45 2
|