通过 wget 下载网站仅产生索引页

通过 wget 下载网站仅产生索引页

一位朋友要求我为他对网站进行一些小修改。我熟悉 HTML 和 CSS,但转而使用 wget 作为加速该过程的初始方法。

目前,仅下载索引页(对于本网站:http://www.controlreps.com/)。

这也是脚本:

wget --wait=2 --level=inf --limit-rate=20K --recursive --page-requisites --user-agent=Mozilla --no-parent --convert-links --adjust-extension --no-clobber -e robots=off https://examples.com

另外,应该指出的是,我能够在不同的站点上成功实现该脚本。那么这个网站上有什么东西阻止了它吗?我将不胜感激任何帮助,谢谢!

相关内容