如题

爬虫太大了

一些没用的都可以屏蔽

比如 dataforseobot。gptbot。semrush。ahrefs。。。。

不做英文的，好多都直接屏蔽了。。。