去评论
dz插件网

robots要禁用uploads目录吗

xiao9469
2022/11/22 10:41:45
手上的一个百科站,蜘蛛只爬取uploads目录图片,文章详情页爬取极少,有必要在robots里禁用uploads目录吗