Wget - 从 URL 列表中检索递归 URL

Wget - 从 URL 列表中检索递归 URL

我有一个 txt 文件中的 url 列表。这些 url 中的每一个都指向具有另一个 url 列表的页面。我可以使用什么 WGET 命令从 txt 文件中的 url 链接的页面中检索 url?

注意:我不想下载文件,只是将 url 列表输出到 txt 文件。

答案1

(未经测试):

wget -r -l 1 -i file

wget命令有很多选项...在这种情况下:

  • -r代表递归
  • -l 1表示只有一级递归(如果一级还不够,请尝试 2​​ 级)
  • -i file表示该文件包含起始点 url 列表

相关内容