各位18cm帮忙看下我robots.txt是写错了吗 逝水年华2022/08/21 16:32:43 要禁止抓取 /search/ 目录下的所有链接,写了 Disallow: /search/ ,但为啥百度检测还是可以抓取呢? 进入原文参与互动