我找了一早上的原因，BA昨天下来如果按正常提交今天就应该有蜘蛛了，今天测了一早上蜘蛛抓取，一直返回500内部抓取错误，找了半天，什么都测试过了，一开始以为是Robots文件设置错了导致蜘蛛进不来，后面我把这个文件删了，结果还是一样，后面又陆续吧所有可能造成这个原因的东西都撤了，又测了一遍，问题还是如此，后面想想是不是防火墙的原因，因为我想着我用的是“明国三年一场雨”老哥开发的那个版本不是系统默认的那个版本会不是造成这个的原因，后面我去试了一下，把那个关了，结果还真是如此，现在我把这关了，把系统自带的开启就不见这个原因了，具体我看了一下，因该是里面（GET-URL过滤、GET-参数过滤、User-Agent过滤）这些设置开启的原因，发此贴的原因，一是为大家提个醒，蜘蛛不来或许这个可能是原因之一；二是想问下各位具体的一个设置方案，因为我对防护这一块了解比较少！感谢！