360搜索违反robots协议收录www.zhuseo.com动态链接

- 编辑:慢熊科技 -

珠海SEO,这个网站由于全部是干货内容,很快就被360搜索引擎收录了,但是今天site:www.zhuseo.com的时候的结果着实令人震惊
大家直接看图片吧!
360收录结果
这份收录结果着实令人震惊,根据收录的情况发现珠海SEO本站被360搜索引擎收录了12条,而且每条的网址都不一样:除开主网址www.zhuseo.com以外,其他都是类似这样的:
XXXX?mod=search&query=%25E8%25B4%25BA%25E5%25B7%259E%25E6%2591%2587%25E6%25BB%259A&type=tags
或这样的:
XXXX/?aid=113&mod=artinfo
XXX代表本站网址。
遇到这种问题,我还是先从自身找原因。
由于本站是基于dedecms做出来的,我怕出现一些收录上的冗长问题,也未了保证收录,于是在robots.txt文件里面申明了,所有搜索引擎不要抓取含有“?”的网址,也就是说禁止搜索引擎收录动态链接。而且我还在百度站长平台里面测试了我的robos.txt是完全生效的。
如图:
 robots.txt生效
robots.txt申明禁止搜索引擎抓取动态链接:
禁止抓取动态链接
下面这个图已经证明了百度搜索引擎遵守网站的robots.txt的规则,没有抓取动态链接。

现在我可以坚实的认定我的网站没有问题,而360搜索引擎违法robots协议收录了我的网站的 动态链接。