帮忙看下这个如何处理，规则要怎么写才能让蜘蛛不访问这些链接，每天各大搜索引擎的蜘蛛就关爬这些链接都上千条。


我感觉这爬的让我各项搜索引擎被降权了，收录，牵引 都停止了。。大佬帮帮忙，这个问题还是挺严重的。



我知道答案 回答被采纳将会获得1 贡献 已有0人回答