wget_manual

anonymous@undisclosed.example.com (Anonymous) — Sat, 05 Apr 2025 05:17:29 +0000

Wget 1.25.0

В этом файле описывается утилита GNU Wget для загрузки сетевых данных.

Разрешается копировать, распространять и/или изменять этот документ в соответствии с условиями GNU Free Documentation License, версии 1.3 или любой более поздней версии, опубликованной Free Software Foundation; без неизменяемых разделов, без текстов на передней обложке и без текстов на задней обложке. Копия лицензии включена в раздел под названием «GNU Free Documentation License».

Обзор

GNU Wget — бесплатная утилита для неинтерактивной загрузки файлов из Интернета. Поддерживает протоколы HTTP , HTTPS и FTP , а также извлечение через HTTP- прокси.

В этой главе представлен частичный обзор возможностей Wget.

Wget неинтерактивен, то есть он может работать в фоновом режиме, пока пользователь не вошел в систему. Это позволяет вам начать извлечение и отключиться от системы, дав Wget завершить работу. Напротив, большинство веб-браузеров требуют постоянного присутствия пользователя, что может стать большой помехой при передаче большого объема данных.
Wget может следовать ссылкам на страницах HTML , XHTML и CSS , чтобы создавать локальные версии удаленных веб-сайтов, полностью воссоздавая структуру каталогов исходного сайта. Иногда это называют «рекурсивной загрузкой». При этом Wget соблюдает стандарт исключения роботов (/robots.txt). Wget можно настроить на преобразование ссылок в загруженных файлах так, чтобы они указывали на локальные файлы для просмотра в автономном режиме.
При извлечении через FTP доступны подстановочные знаки имен файлов и рекурсивное зеркалирование каталогов . Wget может считывать информацию о временных метках, предоставленную как HTTP , так и FTP- серверами, и сохранять ее локально. Таким образом, Wget может видеть, изменился ли удаленный файл с момента последнего извлечения, и автоматически извлекать новую версию, если это произошло. Это делает Wget подходящим для зеркалирования FTP- сайтов, а также домашних страниц.
Wget был разработан для обеспечения надежности при медленных или нестабильных сетевых соединениях; если загрузка не удалась из-за проблем с сетью, он будет повторять попытки, пока не будет извлечен весь файл. Если сервер поддерживает повторную загрузку, он даст указание серверу продолжить загрузку с того места, где она была прервана.
Wget поддерживает прокси-серверы, которые могут облегчить нагрузку на сеть, ускорить извлечение и обеспечить доступ за брандмауэрами. Wget использует пассивную загрузку FTP по умолчанию, активный FTP является опцией.
Wget поддерживает IP версии 6, следующее поколение IP. IPv6 автоматически определяется во время компиляции и может быть отключен как во время сборки, так и во время выполнения. Бинарные файлы, созданные с поддержкой IPv6, хорошо работают как в среде IPv4, так и в среде с двумя семействами.
Встроенные функции предлагают механизмы для настройки ссылок, по которым вы хотите переходить (см. Переход по ссылкам ).
Ход выполнения отдельных загрузок отслеживается с помощью индикатора прогресса. Интерактивные загрузки отслеживаются с помощью индикатора в стиле «термометра», тогда как неинтерактивные отслеживаются точками, каждая из которых представляет фиксированный объем полученных данных (по умолчанию 1 КБ). Любой индикатор можно настроить в соответствии с вашими предпочтениями.
Большинство функций полностью настраиваются либо через параметры командной строки, либо через файл инициализации..wgetrc(см. Файл запуска ). Wget позволяет вам определять глобальные файлы запуска (/usr/local/etc/wgetrcпо умолчанию) для настроек сайта. Вы также можете указать местоположение файла запуска с помощью параметра –config. Чтобы отключить чтение файлов конфигурации, используйте –no-config. Если указаны оба параметра –config и –no-config, –no-config игнорируется.
Наконец, GNU Wget — это свободное программное обеспечение. Это означает, что каждый может использовать его, распространять и/или изменять его в соответствии с условиями GNU General Public License, опубликованными Free Software Foundation.

Вызов

По умолчанию Wget очень прост в вызове. Основной синтаксис:

wget [option]... [URL]...

Wget просто загрузит все URL , указанные в командной строке. URL — это унифицированный указатель ресурса , как определено ниже.

Однако, вы можете захотеть изменить некоторые параметры Wget по умолчанию. Вы можете сделать это двумя способами: навсегда, добавив соответствующую команду в.wgetrc(см. Файл запуска ) или указав его в командной строке.

Формат URL-адреса

Дополнения и Файлы

Ссылка на оригинальную статью

wget

anonymous@undisclosed.example.com (Anonymous) — Sat, 05 Apr 2025 05:06:04 +0000

GNU Wget

GNU Wget — это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS, FTP и FTPS, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его можно легко вызывать из скриптов, cronзаданий, терминалов без поддержки X-Windows и т. д.

GNU Wget имеет множество функций, упрощающих извлечение больших файлов или зеркалирование целых веб-сайтов или FTP-сайтов, в том числе:

Можно возобновить прерванные загрузки, используя RESTиRANGE
Можно использовать подстановочные знаки в именах файлов и рекурсивно зеркалировать каталоги
Файлы сообщений на основе NLS для многих языков
При желании можно преобразовать абсолютные ссылки в загруженных документах в относительные, чтобы загруженные документы могли ссылаться друг на друга локально.
Работает на большинстве UNIX-подобных операционных системах, а также на Microsoft Windows.
Поддерживает HTTP-прокси
Поддерживает HTTP-куки
Поддерживает постоянные HTTP-соединения
Автоматическая/фоновая работа
Использует локальные временные метки файлов для определения необходимости повторной загрузки документов при зеркалировании.
GNU Wget распространяется под лицензией GNU General Public License.

Загрузка GNU Wget

Исходный код GNU Wget можно найти на главном сервере загрузки GNU или (лучше) на зеркале GNU рядом с вами. Для получения дополнительных вариантов загрузки см. FAQ .

Документация

Документация GNU Wget, как и руководства по другим пакетам GNU, доступна в Интернете.

Дополнительная информация

В настоящее время разрабатывается GNU Wget2. Пожалуйста, помогите нам, если можете, с тестированием, документацией, организацией, разработкой и т. д. Увидимся на сайте сотрудничества Wget2.

Сопровождающий

GNU Wget в настоящее время поддерживается Тимом Рюсеном, Даршитом Шахом и Джузеппе Скривано . Первоначальным автором GNU Wget является Хрвое Никшич. Пожалуйста , не обращайтесь напрямую ни к одному из этих лиц с сообщениями об ошибках или просьбами о помощи с Wget: для этого и существует список рассылки; пожалуйста, используйте его.

worldwide open-source software - software:linux_server:gnu