去评论
dz插件网

robots只抓取html行不行?

镖师
2022/09/04 20:44:14
只抓取网站html行不行?          将含?的页面,模板、图片、css、js目录这些都不抓取行不行?  会不会影响网站优化的呢 有没有副作用??

Allow:*.html
Disallow: /某个目录/
Disallow: /*?*
Disallow: /*.jpg