Как скачать несколько сотен файлов за один раз?

Данную операцию можно проделать в терминале (консоль) убунту.

С помощью wget можно скачивать файлы, допустим у вас есть несколько сотен урлов и вам надо их все скачать себе в локальный доступ, это вы можете сделать при помощи данной утилиты.

Функции WGET гораздо шире, нежели простое скачивание файлов, с помощью ее вы можете скачивать сайты, включая картинки, всего лишь указав адрес сайта и определенные параметры, wget будет автоматически переходить по ссылкам на сайте и скачивать страницу за страницей.

Для скачивания используем утилиту «wget» способ простой:

wget -i —

После данной команды надо указать урлы файлов по одному в строке прямо в командной строке, в моем случае, я скопировал 580 урлов из файла exel и просто вставил их прямо в консоль, после чего нажмите Ctrl+d.
Все файлы будут скачаны в домашнюю директорию.

Т.е. выполняем: wget -i — затем вводим URL по одному на строку и нажимает Ctrl+d.

Скачать сайт полностью:

wget -r -k -l 7 -p -E -nc http://site.com/

После выполнения данной команды в директорию site.com будет загружена локальная копия сайта http://site.com. Чтобы открыть главную страницу сайта нужно открыть файл index.html