2
ответа

Как определить значение символического пути

Когда я использую «lynx» через терминал, я полагаю, что он использует символическую ссылку, но мои поиски в Google не смогли показать мне, как определить значение символического пути. То есть я бы хотел определить ...
вопрос задан: 14 June 2009 02:23
2
ответа

Загрузка веб-страницы и всех ее файлов ресурсов в Python

Я хочу быть в состоянии загрузить страницу и все ее связанные ресурсы (изображения, таблицы стилей, файлы сценария, и т.д.) использование Python. Я (несколько) знаком с urllib2 и знаю, как загрузить...
вопрос задан: 9 May 2009 10:28
2
ответа

Почему wget не является принятием моего имени пользователя/пароля?

Я попробовал и wget - user=myuser - password=mypassword myfile и wget - ftp-user=myuser - ftp-password=mypassword myfile, но я продолжаю получать ошибочный отправленный Запрос HTTP, ожидая ответа......
вопрос задан: 5 February 2009 23:54
1
ответ

Команды wget и spider CRON на виртуальном хостинге

У меня старый скрипт php, который работает на виртуальном хостинге. Чтобы использовать все функциональные возможности, я должен использовать команду CRON: wget --spider -O - http://web.com/cron > / dev / null 4 > & amp; 8 Но ...
вопрос задан: 18 January 2019 11:10
1
ответ

Wget переименовать с оригинальным именем

Я использую скрипт bash для запуска чего-то подобного ниже для i в {1..50}; do wget --content-disposition `http://example.com/getfile.php?id= {$ i}` готово, тогда я могу получить файлы abc.mp3 abc.jpg ...
вопрос задан: 18 January 2019 09:22
1
ответ

Команда wget для загрузки файла и сохранения его под другим именем

Я загружаю файл с помощью команды wget. Но когда он загружается на мой локальный компьютер, я хочу сохранить его под другим именем. Например: я загружаю файл с www.examplesite.com / ...
вопрос задан: 31 March 2016 12:04
1
ответ

Крон работает создающий пустой файл каждый раз, когда он работает

У меня есть сценарий PHP, который я хочу выполнить каждую минуту, чтобы видеть, существуют ли черновые сообщения новостей, которые должны быть отправлены. Я использовал "wget" для команды крона в cPanel, но я заметил (после пары дней) это...
вопрос задан: 19 August 2015 15:36
1
ответ

wget: имя загруженного файла

Я пишу сценарий для bash, и мне нужно получить имя загруженного файла с помощью wget и поместить его в строку $, например, если я загружаю этот файл ниже, я хочу поставить это имя ...
вопрос задан: 20 December 2011 10:31
1
ответ

использование wget против защищенного сайта с NTLM

Попытка зеркально отразить локальный интранет-сайт и нашла предыдущие вопросы с помощью 'wget'. Это работает отлично с сайтами, которые являются анонимными, но я не смог использовать его против сайта, который является...
вопрос задан: 1 January 2011 22:14
1
ответ

Почему WGET возвращает 2 сообщения об ошибках перед следованием?

Я использую сценарий для выпадающего, некоторые данные XML на аутентификации потребовали URL с WGET. При этом мой сценарий производит следующий вывод для каждого URL, к которому получают доступ (дюйм/с и имена хостов, измененные на...
вопрос задан: 11 January 2010 18:11
1
ответ

wget WIKI, не добирайтесь, различные страницы (исключите regex?)

Я пытаюсь загрузить статическое зеркало Wiki с помощью wget. Я только хочу последнюю версию каждой статьи (не полная история или diffs между версиями). Было бы легко просто загрузить...
вопрос задан: 1 June 2009 18:02
1
ответ

Только создайте файл если http состояние 200 с wget?

Я пытался выяснить способ заставить wget только создать файл, если фактический ответ загрузки допустим, означая код статуса № 404 или 500, только 200. Однако при использовании-O опции (к...
вопрос задан: 16 March 2009 08:44
1
ответ

“wget - домены” не помощь.. что я делаю неправильно? [закрытый]

Я пытаюсь использовать wget для рекурсивного захвата только .jpg файлов с конкретного веб-сайта, в целях создания забавной экранной заставки для меня. Не такая высокая цель действительно. Проблема...
вопрос задан: 16 December 2008 14:57
0
ответов

Что означает «wget -O»?

В моем сценарии оболочки есть такая команда wget: reponse="`wget -O- http:localhost:8080/app/index.html`" Я не понимаю параметр -O-. Мне объяснили, что -O куда-то выводится и - ...
вопрос задан: 19 November 2019 23:49
0
ответов

Как установить прокси для wget?

Я хочу загрузить что-то с помощью wget через прокси: HTTP-прокси: 127.0.0.1 Порт: 8080 Прокси не требует имени пользователя и пароля. Как я могу это сделать?
вопрос задан: 12 September 2019 01:28
0
ответов

Загрузить рабочую локальную копию веб-страницы [закрыто]

Я хочу загрузить локальную копию веб-сайта страницу и получите все CSS, изображения, javascript и т. д. В предыдущих обсуждениях (например, здесь и здесь, обоим более двух лет), два ...
вопрос задан: 3 September 2019 06:07
0
ответов

Несколько одновременных загрузок с использованием Wget?

Я использую wget для загрузки содержимого сайта, но wget загружает файлы один за другим. Как я могу загрузить wget, используя 4 одновременных соединения?
вопрос задан: 12 July 2019 14:33
0
ответов

Wget для Windows игнорирует параметры при вызове с createprocess ()

Я пытаюсь использовать wget для Windows из программы на C ++ для загрузки 6 файлов с веб-сайта и объединения результатов в один файл. Это не проблема из командного файла. Команда будет просто: ...
вопрос задан: 23 March 2019 06:09
0
ответов

Скорость загрузки резко замедляется после загрузки нескольких файлов в Java

Я пытаюсь загрузить данные из SEC. Я загружаю их локально, загружаю их в Amazon S3, а затем удаляю файлы локально. Размер файла составляет около 10-100 МБ. После загрузки нескольких файлов ...
вопрос задан: 7 March 2019 00:54
0
ответов

Команда wget очень долго генерирует ссылки на карту сайта.

цель - вытащить все ссылки html с веб-сайта, чтобы создать поддерживаемую Google карту сайта XML мой soln- используя нижеприведенную команду для извлечения ссылок
вопрос задан: 5 March 2019 17:00
0
ответов

Homebrew не будет запускать команду wget (библиотека не загружена)

Я получил следующее сообщение при попытке использовать команду wget после установки на Homebrew (на Mac Mac Sierra 10.13). dyld: библиотека не загружена: /usr/local/opt/gettext/lib/libintl.8.dylib ...
вопрос задан: 31 May 2018 19:06
0
ответов

Как использовать Wget для загрузки всех изображений в одну папку с URL-адреса?

Я использую wget для загрузки всех изображений с веб-сайта, и он работает нормально, но в нем сохраняется исходная иерархия сайта со всеми подпапками, поэтому изображения разбросаны по сторонам. Есть ли способ так ...
вопрос задан: 4 March 2018 13:17
0
ответов

Wget распознает некоторую часть моего URL-адреса как синтаксическую ошибку

Я новичок в wget, и я провел исследование в Google, но не нашел подсказки. Мне нужно сохранить один HTML-файл веб-страницы: wget yahoo.com -O test.html, и он работает, но когда я пытаюсь быть ...
вопрос задан: 21 August 2017 10:05
0
ответов

Cronjob с защищенным паролем сайтом (.htaccess)

Я хочу создать cronjob, который каждый X раз уходит на открытие веб-страницы. Эта веб-страница защищена паролем.htaccess (user=admin, password=pass ). Я даю следующую инструкцию: :wget --user=...
вопрос задан: 30 May 2017 14:09
0
ответов

Эквивалент wget в Python для загрузки веб-сайта и ресурсов

То же самое, о чем просили 2,5 года назад при загрузке веб-страницы и всех ее файлов ресурсов в Python, но не приводит к ответу и «см. соответствующую тему» ​​на самом деле не спрашивают об одном и том же. Я ...
вопрос задан: 23 May 2017 11:44
0
ответов

wget или curl из stdin

Я хочу загрузить веб-страницы, предоставляя URL-адреса из stdin. По сути, один процесс постоянно создает URL-адреса для stdout / file, и я хочу направить их в wget или curl. (Подумайте об этом как о простом ...
вопрос задан: 30 November 2016 13:56
0
ответов

Получение списка каталогов по http

Есть каталог, который обслуживается сеть, которую я м заинтересован в мониторинге. Его содержимое - это различные версии программного обеспечения, которое я использую, и я хотел бы написать сценарий, который я мог бы запустить ...
вопрос задан: 29 October 2016 20:44
0
ответов

Является ли команда cron wget -q создать файл на сервере?

В настоящее время у меня есть одна функция php, которая работает с cron. Это функция для проверки метки времени и закрытия темы. Чтобы проверить временную метку и выполнить обновление в реальном времени, мне нужно использовать cron. Я запускаю cron ...
вопрос задан: 3 September 2016 16:23
0
ответов

Как отразить только раздел веб-сайта?

Я не могу заставить wget зеркалировать раздел веб-сайта (путь к папке ниже корня) - кажется, что это работает только с веб-сайта домашняя страница. Я перепробовал много вариантов - вот один пример wget -rkp -l3 -np http: ...
вопрос задан: 3 June 2016 21:01
0
ответов

Задержки между запросами в wget

Я хочу скачать веб с помощью wget, но чтобы сделать его более похожим на реального пользователя, я бы хотел делать небольшие случайные задержки между запросами. Я выполняю wget через cmd.
вопрос задан: 3 March 2016 11:44