我注意到我的网站不再被 web.archive.org 存档。当我查看http://web.archive.org/web/*/http://www.cnn.com很明显，它在 2008 年 7 月就停止工作了。web.archive.org 有一个 6 个月的延迟政策。这意味着抓取运行 6 个月后它应该对最终用户可见。因此它应该从 2009 年底开始抓取运行，而不仅仅是从 2008 年中期开始。
我该怎么做才能让它再次工作，是否有官方声明？
答案1
上次更新常见问题解答时，可见性延迟为“6-14个月“因此，延迟可能已经延长，而您看到的是正常行为。
检查您的网站没有 robots.txt 文件告诉爬虫程序不要对其进行索引。
该常见问题解答还列出了另外两种让您的网站被索引的方法：在您的浏览器中安装 Alexa 工具栏并访问您的网站；或者访问http://www.dmoz.org/并使用“建议 URL”表格。