Вопросы с тегом «wget»

Я использую wget для зеркалирования файлового архива ftp. Это моя команда: wget -m $mirror (удалены все ненужные параметры) Пока все в порядке, все отличия от онлайн-архива будут синхронизированы. Но теперь есть скрипт, который удаляет файлы из моей копии, так как они не нужны. Так что, если я запустлю wget снова, …

2 cygwin  wget 

На этот вопрос уже есть ответ здесь: Родная альтернатива wget в Windows PowerShell? 9 ответов Что такое Powershell-эквивалент этой команды wget? wget -nc -i downloadList.txt куда -i downloadList.txt загружает список URL-адресов в указанном файле. -nc пропускает уже загруженные файлы.

1 powershell  wget 

у меня есть wget команда: wget -r --no-parent -nH -nd -q --show-progress --progress=bar:force ftp://ftp.ncdc.noaa.gov/pub/data/swdi/database-csv/v2/ Но это работает только в новых версиях wget, К сожалению, у меня есть более старая версия wget (GNU Wget 1.15 построен на darwin14.3.0) и не может его обновить. В частности, это wget --show-progress вариант, который не …

1 wget  curl 

Я хочу скачивать файлы используя Wget , Максимальная глубина до 3. Теперь я знаю, что существует большая вероятность того, что файлы в URL будут обновлены. Есть ли способ, что эти обновленные / модифицированные файлы будут единственными для загрузки? Например, день 1: я запустю скрипт Python, который загрузит все файлы с …

1 wget 

Поэтому я загружаю ISO-образ с веб-сайта Uberstudent, используя команду wget, отображаемую на их веб-сайте. Но скорость загрузки постоянно колеблется, и мне интересно, что может быть причиной этого? Я имею в виду, что это происходит от 2,5 Мбит / с до 150 Кбит / с в считанные секунды. Как сделать так, …

1 linux  download  iso-image  wget 

В скрипте bash (в Ubuntu 14.04) я запускаю команду: WP055="$(wget -qO - http://alerts.weather.gov/cap/wwaatmget.php?x=CAZ055&y=1)" В строке переменной WP055 будет неизвестное число пар «<title>» и «</ title>». Мне нужно искать в каждой из этих пар строку «по NWS», что означает, что эта конкретная строка содержит время начала и окончания конкретной информации о …

1 bash  wget  ubuntu-14.04  bash-scripting  string-manipulation 

Как я могу сделать, что-то вроде этого: wget http://website.com/page.html каждые x секунд и нумеруйте их. Я хотел бы, чтобы мой вывод был таким: page1.html page2.html и т. Д. Я уже знаю, как сделать цикл Wget с while true sleep 10; do wget http://website.com/page.html; done Однако я не уверен в нумерации. …

1 bash  wget 

Я хотел бы отразить сайт с помощью wget. Проблема в том, что на сайте есть несколько языковых мутаций, которые переключаются с помощью параметра строки запроса, и когда wget начинает загружать версию на другом языке, она забивает предыдущую. Например, он начинается с index.html, захватывает часть сайта, затем обнаруживает ссылку на index.html? …

1 wget 

Я хочу загрузить все государственные расходы свыше 500 фунтов стерлингов Министерством энергетики и изменения климата. Это файлы .xls и .xlsx, генерируемые один раз в месяц. Они хранятся в таких местах, как это: https: // www.gov.uk/government/uploads/system/uploads/attachment_data/file/209425/20130627_April_2013_PUS_.xls где число после файла является уникальным числом, а имя файла не имеет согласованности именования. Эти …

1 wget  recursive  exclude 

Я просто хочу скачать все файлы по этой ссылке: http://www.vision.caltech.edu/pmoreels/Datasets/TurntableObjects/ImageSet070504/ Я пробовал wgetс разными вариантами, все они возвращают "ОШИБКА 404: Не найдено". Например, я попробовал эту команду, которая не работает: wget -nH --cut-dirs=3 --mirror --no-parent http://www.vision.caltech.edu/pmoreels/Datasets/TurntableObjects/ImageSet070504/ Моя версия wget 1.17.1 Предложения?

1 http  wget 

Иногда wget выбирает дополнительные параметры при загрузке файла, например Aev264-yale_econ2521120.m4v?bri=40.1&brs=689. Очевидно, все, что я хочу, это Aev264-yale_econ2521120.m4v. Я пролистал справочные страницы и не вижу ничего, что могло бы это исправить. Есть идеи?

1 download  wget 

Я ищу ftp клиент командной строки для Windows, способный ускорить загрузку, используя несколько процессов / потоков. (Filezilla делает это AFAIK, но это не работает из командной строки). Или, может быть, есть способ сделать это wget(который я сейчас использую)?

1 windows  command-line  ftp  wget  multi-threaded 

Многие люди публикуют файлы захвата в отчетах об ошибках Wireshark ( https://bugs.wireshark.org/bugzilla/ ), и эти файлы захвата очень полезны для тестирования. К сожалению, казалось бы, нет простого способа загрузить все эти файлы захвата обычными пользователями. Есть конечно несколько вариантов: Просмотрите каждый отчет об ошибке, независимо от того, закрыт он или …

download  wget  wireshark  curl  bulk 

Я использую wget для получения файла с FTP-сервера: wget ftp://username:password@10.10.1.124//path/file.csv Но ошибка такая: ftp://username:*password*@10.10.1.124//path/file.csv (try: 3) => ‘file.csv’ Connecting to 10.10.1.124:21... connected. Logging in as username ... Logged in! ==> SYST ... done. ==> PWD ... done. ==> TYPE I ... done. ==> CWD (1) /QDLS/MM770QUA/68001 ... done. ==> SIZE …

ftp  wget 

Я хотел бы загружать файл из Dropbox каждый час и регистрировать его для тестирования. Какой лучший способ для этого? Я новичок в wget и пока что мне удается скачать файл. вот что у меня так далеко: wget -o download.txt --no-check-cert ССЫЛКА Кто-нибудь может дать мне какой-нибудь совет, как это сделать? …

logging  dropbox  wget