网站用了一个老域名，百度蜘蛛抓取到了很多以前别人做的网站的地址，现在都是404页面。这个需要在robots.txt 屏蔽这些页面吗？