Вопросы с тегом «wget»

GNU Wget - это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS и FTP, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его легко вызывать из сценариев, заданий Cron, терминалов без поддержки X Window System (X11) и т. Д.

2
Как я могу использовать wget для отправки данных POST?
Я хочу сделать следующий запрос POST на мой сервер с помощью wget: email=abc@abc.com&file1=@FILE_HERE&file2=@FILE_HERE В приведенном выше запросе, есть три параметра POST называется email, file1и file2где emailсодержит электронную почту пользователя и file1, file2содержит файл. Как я могу отправить его с помощью wget? Я не хочу использовать curl.
10 linux  bash  http  wget 


1
Зеркально отразить блог с помощью wget
Я пытаюсь отразить блог, например www.example.com, с wget. Я использую wget со следующими параметрами (переменные оболочки подставляются правильно): wget -m -p -H -k -E -np \ -w 1 \ --random-wait \ --restrict-file-names=windows \ -P $folder \ -Q${quota}m \ -t 3 \ --referer=$url \ -U 'Mozilla/5.0 (X11; U; Linux i686; en-US; …
9 wget  mirroring 

2
Как я могу загрузить частный репозиторий с GitHub без доступа к «git» на моем локальном компьютере?
Я хочу скачать приватный архив репозитория с GitHub, распаковать его, удалить архивный файл и скопировать некоторые каталоги, которые находятся внутри загруженного проекта. Я пытался использовать, wgetно я не могу авторизоваться: wget --header='Authorization: token MY_TOKEN_CREATED_ON_GITHUB' https://github.com/MY_USER/MY_REPO/archive/master.tar.gz -O - | tar xz Я также попробовал с cURL: curl -i -H 'Authorization: token …

1
как возобновить процесс wget?
Я случайно закрыл терминал во время запуска wgetпроцесса загрузки веб-сайта. Прошло 2 дня с тех пор, как я запустил процесс wget, поэтому я не знаю его статуса. Вчера трафик был высоким, а сегодня низким. Похоже, что процесс wget завершен, но topон по-прежнему показывает, что wget работает. Это смущает. 19133 root …
9 wget 

3
Почему изображения с некоторых страниц Tumblr не загружаются, а использование wget на них работает?
Помогая другу с подключением к Интернету, потому что «некоторые страницы не загружаются», я заметил, что проблема заключалась в том, что изображения некоторых постов в блогах не загружались в браузер. Я нашел это странным по следующим причинам: Только изображения, которые являются частью поста, не будут загружаться. Пользовательские аватары, баннеры, заголовки, различные …

2
Использование wget для загрузки файлов PDF с сайта, для которого необходимо установить файлы cookie
Я хочу зайти на сайт газеты, а затем загрузить их электронные копии (в формате PDF). Сайт требует, чтобы я вошел в систему, используя свой адрес электронной почты и пароль, а затем разрешил мне доступ к этим URL-адресам PDF. У меня проблемы с «настройкой моей сессии» в Wget . Когда я …
8 pdf  wget 

2
Xargs и Wget перестают работать через час
Запуск сценария с Cygwin на Windows XP с двухъядерным процессором и 4 ГБ оперативной памяти cat url_list.txt | xargs -P50 wget -i Я пытаюсь трал через 4 Гб в URL для скачивания (около 43 миллионов) Работает нормально примерно в течение первого часа, затем оболочка Bash и загрузка останавливаются, хотя ее …
8 wget  url  xargs  cat 


4
Комментирование в списке wget?
Мне нужно скачать около 100 пакетов, поэтому я использую wget-list, чтобы упростить его. Мой вопрос, однако, является ли я после того, как я составил список (я предполагаю, что он в формате .txt), есть ли способ вставить комментарии, которые wget будет игнорировать? Что-то вроде этого: #This is a comment http://someurl.com http://anotherurl.com
4 linux  wget 

2
Избегайте создания нескольких файлов с помощью wget
я использую wget вызывать ссылку каждые 10 секунд следующим образом: #/bin/sh while true; do wget http://www.some.random.link/to/some/PHP/script sleep 10 done Это производит пустые файлы с именем script_name.# где # увеличивается при каждом запуске. Почему это происходит?

1
конфликты имени файла и имени каталога
Мы используем WGET 1.12 для окон на сайте (с параметрами follow_tags = a, reclevel = 8, recursive = on и timestamping = on в настройках wgetrc) и наблюдаем две проблемы: а. Файл удаляется и создается каталог с таким же именем. Исходный файл потерян. Например, URL: http://some_site/abc сохраняется как файл: some_dir …
2 wget  filenames 

1
Не могу заставить wget отклонять / исключать файлы из списка
Проблема в том, что у меня есть файл со списком URL, скажем links.txt: http://www.tipsfor.us/wp-content/uploads/2009/01/vim-editor-icon.png http://wp.psyx.us/wp-content/uploads/2011/01/vi-vim-tutorial-1.gif http://proft.me/static/img/vim/vi-vim-cheat-sheet.gif Я пытаюсь дать wgetпонять, что не хочу, чтобы это выглядело pngтак: $ wget -R png -i links.txt Но это не имеет никакого эффекта и wgetвсе равно получает pngфайлы вместе с другими. Передача links.txtпо конвейеру …
2 wget  exclude 

1
Команда Wget не работает в Cygwin для Windows
Сейчас я использую Wget и загружаю Cygwin в качестве терминала. Кроме того, я использую http://djangoproject.com/download/1.3.1/tarball/ в качестве тестовой ссылки для загрузки файлов. Процесс установки проходит гладко, но когда я пытаюсь загрузить файл по приведенной выше ссылке, возникает ошибка, так как я не могу найти файл на своем компьютере, я могу …
2 cygwin  wget 

1
Использование wget не дает такой же вывод, как браузер
Я использую wgetдля Windows (gnuwin32 wget-1.11.4-1) в Windows 8 и использую его для инструмента справочной службы под названием Kayako, который сообщает о необходимости опроса из очереди электронной почты. Командная строка выглядит так: wget.exe -O null --timeout 25 http://xxx.kayako.com/cron/index.php?/Parser/ParserMinute/POP3IMAP Я знаю, что получение ответа от сервера в моем конкретном случае занимает …

Используя наш сайт, вы подтверждаете, что прочитали и поняли нашу Политику в отношении файлов cookie и Политику конфиденциальности.
Licensed under cc by-sa 3.0 with attribution required.