使用帐户和密码从网络递归下载

使用帐户和密码从网络递归下载

是否可以使用登录帐户和密码从网站下载 zip 文件?

我试过

wget --recursive --no-parent -nd https://*edu/pages/access/search.jsp

但是,无法下载所有 zip 文件。下面有一条版权信息。

!DOCTYPE html, COPYRIGHT NOTICE
Copyright (c) 2016  Scott C. Neu and Arthur W. Toga

接下来应该做什么?这些文件非常大,无法下载到我的本地计算机。

答案1

你应该尝试渲染就像人类浏览器一样:

wget --user-agent='Mozilla/5.0 (X11; Linux x86_64; rv:68.0) Gecko/20100101 Firefox/68.0' --recursive --no-parent -nd https://*edu/pages/access/search.jsp

相关内容