是否可以使用登录帐户和密码从网站下载 zip 文件?
我试过
wget --recursive --no-parent -nd https://*edu/pages/access/search.jsp
但是,无法下载所有 zip 文件。下面有一条版权信息。
!DOCTYPE html, COPYRIGHT NOTICE
Copyright (c) 2016 Scott C. Neu and Arthur W. Toga
接下来应该做什么?这些文件非常大,无法下载到我的本地计算机。
答案1
你应该尝试渲染获取就像人类浏览器一样:
wget --user-agent='Mozilla/5.0 (X11; Linux x86_64; rv:68.0) Gecko/20100101 Firefox/68.0' --recursive --no-parent -nd https://*edu/pages/access/search.jsp