Запитання з тегом «wget»

Якщо у мене є список розділених URL-адрес \n, чи можна перейти до будь-яких варіантів, wgetщоб завантажити всі URL-адреси та зберегти їх у поточному каталозі, але лише якщо файлів уже немає?

11 wget  download  options 

wget має таку опцію, -npяка забороняє отримувати файли з будь-якого батьківського каталогу. Мені потрібно щось подібне, але трохи гнучкіше. Поміркуйте: www.foo.com/bar1/bar2/bar3/index.html Я хотів би отримати все, але не «вище» (в ієрархії дерев), ніж bar2(!). Так що bar2також слід отримати, але ні bar1. Чи є спосіб зробити wget більш вибірковим? Передумови: …

11 wget  mirror  tree 

У нас є сценарій, який завантажує модульну безпеку з github, який нещодавно почав виходити з ладу. Сервери працюють під управлінням CentOS 6, але RHEL 6, ймовірно, має таку ж проблему. Вихід: # wget https://github.com/downloads/SpiderLabs/ModSecurity/modsecurity-apache_2.7.1.tar.gz --2014-07-22 18:49:46-- https://github.com/downloads/SpiderLabs/ModSecurity/modsecurity-apache_2.7.1.tar.gz Resolving github.com... 192.30.252.129 Connecting to github.com|192.30.252.129|:443... connected. HTTP request sent, awaiting response... 302 …

10 centos  wget  github 

Я хотів би застосувати цей патч, тому я скопіював код, починаючи з "Index: src / options.h" і закінчуючи "+ @ item", і помістив його в новий файл, створений у wgetпапці вихідного коду. Тоді я зробив: $ patch -p0 < name_of_patch (Patch is indented 1 space.) patching file src/options.h patch: **** …

10 wget  patch 

Я маю wgetвеличезні файли (понад 100 Гб), а потім порівнюю свій md5sum із сумою, розміщеною у сховищі. Вірите чи ні, md5sumдля запуску файлу такого розміру потрібен нетривіальний час, тому я хотів би отримати суму паралельно із завантаженням. Який найкращий спосіб зробити це? Я не бачу wgetможливості розрахувати MD5 під час …

10 wget  checksum 

Я досить новий wget. Мені просто потрібно знати, як я можу встановити папку призначення, куди зберігаються завантаження. Я вважаю, що так --directory-prefix. Дякую,

10 wget 

Я пишу bash-сценарій, який широко використовує wget. Для визначення всіх загальних параметрів в одному місці я зберігаю їх на змінних. Ось фрагмент коду: useragent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"' cookies_file="/tmp/wget-cookies.txt" save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies" load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies" function mywget { log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd $@" …

10 bash  wget  variable-substitution 

Я намагаюся завантажити файл через HTTP з веб-сайту за допомогою wget. Коли я використовую: wget http://abc/geo/download/?acc=GSE48191&format=file Я отримую лише файл, який називається index.html?acc=GSE48191. Коли я використовую: wget http://abc/geo/download/?acc=GSE48191&format=file -o asd.rpm Я отримую asd.rpm, але я хочу завантажити фактичне ім'я, і ​​не хочу вручну змінювати назву завантаженого файлу.

9 filenames  wget 

Я завантажую HTML-сторінку джерела веб-сайту за допомогою cURLкоманди. Проблема в тому, що я не хочу більшості вмісту сторінки. Мені просто потрібні перші 100 рядків сторінки джерела. Чи є спосіб зупинити завантаження сторінки через перші кілька рядків? Наразі у мене працює нижченаведена команда, але, здається, це не ефективно. curl -r[0-1] "http://www.freebase.com/m/045c7b" …

9 wget  curl 

Уявіть щось подібне: $ curlsh http://www.example.org > GET /foo/bar/bam ...output here... > POST /thing/pool ... ... result here.... чи є інструмент, який дозволяє мені це робити?

9 wget  curl 

У мене є RaspberryPi. Я хочу завантажити великий файл, wgetале проблема полягає в тому, що коли я ввійду в Pi і використовую wgetдля завантаження файлу, він припинить завантаження, коли я закриваю сесію. Як змусити wget продовжувати завантаження після закінчення сеансу?

5 ssh  wget