Как создать список страниц, на которые ссылаются из списка, который распределен по многим страницам
У меня есть веб-страница, которая в основном состоит из списка ссылок на другие страницы. Используя wget, я хотел бы скачать все перечисленные страницы.
Используя "wget -r -l1 URL", я в основном получаю то, что хочу.
Но как сделать то же самое, если список разделен на несколько страниц (URL-адреса заканчиваются на "? Page=3", "? Page=4"....).
1 ответ
Решение
Если вы знаете количество страниц, вы можете использовать цикл for:
for i in {1..5}; do wget -r -l1 URL?page=$i; done