不给搜索引擎回源是否可行?
服务器的配置比较低,现在每天蜘蛛爬行四五万,每次都给vps搞得半死不活。
所以我上了一个cdn,我在想,不让搜索引擎回源,抓取的时候让它去cdn缓存去取,以减少vps压力。
现在有一个问题,那就是不给回源会不会影响搜索引擎爬取呢?
比如,众多网站都在使用的cdn ip ,权重会不会有影响?
所以我上了一个cdn,我在想,不让搜索引擎回源,抓取的时候让它去cdn缓存去取,以减少vps压力。
现在有一个问题,那就是不给回源会不会影响搜索引擎爬取呢?
比如,众多网站都在使用的cdn ip ,权重会不会有影响?