去评论
dz插件网

robots限制抓取速度用Crawl-delay,对百度有效吗

左右不逢缘
2022/11/04 14:28:53
robots限制抓取速度用Crawl-delay,对百度有效吗

我看网上说这个命令百度好像不认

有没有新的限制百度或其它蜘蛛抓取速度的命令