Рейтинг:0

wget не удалось: время ожидания соединения истекло

флаг mt
bal

У меня есть следующая команда для копирования веб-сайта,

когда он пытался попасть на sun.com, время ожидания соединения истекло.

Я хотел бы, чтобы wget исключил sun.com, чтобы wget перешел к следующему.

Существующая проблема

$ wget --recursive --page-requisites --adjust-extension --span-hosts --convert-links --restrict-file-names=windows http://pt.jikos.cz/garfield/
.
.
09.08.2021, 03:28:28 (19,1 МБ/с) — «packages.debian.org/robots.txt» сохранено [24/24]

09.08.2021, 03:28:30 (19,1 МБ/с) — «packages.debian.org/robots.txt» сохранено [24/24]
.


Расположение: https://packages. дебиан. org /robots.txt [далее]
--2021-08-09 03:28:33-- https : //packages. дебиан. орг /robots.txt
Подключение к packages.debian.org (packages.debian.org)|128.0.10.50|:443... установлено.
HTTP-запрос отправлен, ожидается ответ... 200 OK
Длина: 24 [текст/обычный]
Сохранение в: «packages.debian.org/robots.txt».

packages.debian.org 100%[===================>] 24 --.-КБ/с в 0 с

09.08.2021, 03:28:34 (19,1 МБ/с) — «packages.debian.org/robots.txt» сохранено [24/24]

Загрузка robots.txt; пожалуйста, игнорируйте ошибки.
--2021-08-09 03:28:34-- http://wwws. солнце. ком/ robots.txt
Разрешение wwws.sun.com (wwws.sun.com)... 137.254.16.75
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:28:56-- (попробуйте: 2) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:29:19-- (попытка: 3) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:29:43-- (попытка: 4) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:30:08-- (попытка: 5) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:30:34-- (попытка: 6) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

--2021-08-09 03:31:01-- (попытка: 7) http://wwws. солнце. ком/ robots.txt
Подключение к wwws.sun.com (wwws.sun.com)|137.254.16.75|:80... не удалось: время ожидания подключения истекло.
Повторная попытка.

Ожидается, что $wget сохранит весь веб-сайт без тайм-аутов, если есть тайм-ауты, тогда wget пропустит соединения с тайм-аутом.

Рейтинг:2
флаг ar
bob

Пожалуйста, прочитайте прекрасное руководство о «рисках» использования --span-hosts (-ЧАС) и как ограничить их, добавив ограничения:
https://www.gnu.org/software/wget/manual/wget.html#Spanning-Hosts

--span-hosts или же -ЧАС Параметр включает охват хоста, что позволяет рекурсивному запуску Wget посещать любой хост, на который ссылается ссылка. Если не применяются достаточные критерии ограничения рекурсии, эти внешние хосты обычно будут ссылаться на еще большее количество хостов и т. д. пока Wget не соберет гораздо больше данных, чем вы планировали.

...

Ограничить охват определенными доменами
Опция позволяет указать домены, которые будут сопровождаться, тем самым ограничивая рекурсию только хостами, принадлежащими этим доменам.

...

Сохранять загрузку с определенных доменов --exclude-домены
Если есть домены, которые вы хотите специально исключить, вы можете сделать это с помощью --exclude-домены, который принимает аргументы того же типа, что и , но исключит все перечисленные домены.

Ответить или комментировать

Большинство людей не понимают, что склонность к познанию нового открывает путь к обучению и улучшает межличностные связи. В исследованиях Элисон, например, хотя люди могли точно вспомнить, сколько вопросов было задано в их разговорах, они не чувствовали интуитивно связи между вопросами и симпатиями. В четырех исследованиях, в которых участники сами участвовали в разговорах или читали стенограммы чужих разговоров, люди, как правило, не осознавали, что задаваемый вопрос повлияет — или повлиял — на уровень дружбы между собеседниками.