Как передать аргумент, хранящийся в переменной, в WGET?

10

Я пишу сценарий bash, который широко использует wget. Чтобы определить все общие параметры в одном месте, я храню их в переменных. Вот кусок кода:

useragent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"'
cookies_file="/tmp/wget-cookies.txt"
save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies"
load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies"

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd $@"  
    wget $useragent $load_cookies_cmd "$@"
}

К сожалению, не работает. Почему-то мне не хватает правильного способа хранения параметров для переменных $ useragent, $ save_cookies_cmd, $ load_cookies_cmd и вызова wget, передавая эти переменные в качестве параметров.

Я хочу, чтобы результат командной строки как это:

wget --user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0" --load-cookies /tmp/wget-cookies.txt --keep-session-cookies http://mysite.local/myfile.php

РЕДАКТИРОВАТЬ: мое окончательное решение:

В конце концов мой скрипт правильно работает с этим:

useragent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"
useragent_cmd="--user-agent=$useragent"
cookies_file="/tmp/wget-cookies.txt"
save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies"
load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies"

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $load_cookies_cmd $useragent_cmd $@"  
    wget $load_cookies_cmd "$useragent_cmd" "$@"
}

Спасибо за все ваши ответы.

bash wget variable-substitution

— Филипе
источник

4

http://mywiki.wooledge.org/BashFAQ/050

user_agent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"'
cookies_file="/tmp/wget-cookies.txt"
save_cookies_opts=( --save-cookies "$cookies_file" --keep-session-cookies )
load_cookies_opts=( --load-cookies "$cookies_file" --keep-session-cookies )

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd $@"
    wget "$user_agent" "${load_cookies_opts[@]}" "$@"
}

Обратите внимание, что в вызове wget "$user_agent"указывается. Это очень важно.

— Гленн Джекман
источник

Умно используя массив. Спасибо за ваш ответ. Это, безусловно, поможет мне лучше понять скрипт bash.

— Филипе

3

Проблема заключается в порядке расширений (подробности см. В разделе РАСШИРЕНИЕ man bash). Двойные кавычки внутри переменной не работают как двойные кавычки при раскрытии переменной:

$ a='1 "2 3" 4' ; for b in $a ; do echo $b ; done
1
"2
3"
4

Обратите внимание, что использование «$ b» вам не поможет.

Используйте массивы, чтобы вы могли позволить bash выполнять тяжелую работу и забыть про цитирование и экранирование:

$ a=(1 '2 3' 4) ; for b in "${a[@]}" ; do echo $b ; done
1
2 3
4

— choroba
источник

Спасибо за ваше время. Я новичок в bash-скрипте, и теперь эти приемы всегда будут помогать мне.

— Филипе

3

    mywget() ( echo log "wget $quiet \
                         userstring=${userstring:-unset} \
                         cookies=${cookies:-no} $@"
            echo wget ${userstring:+--useragent="$userstring"} \
                    ${cookies:+--${cookies}-cookies \
                    "$cookies_file" --keep-session-cookies} "$@"
    ) <<-PARAMS
            ${DQ=$(printf \\042)}
            ${NL=
}
            ${userstring="${DQ}Mozilla/5.0 \
                (Windows NT 6.1; WOW64; rv:27.0) \
                Gecko/20100101 Firefox/27.0${DQ}"}
            ${cookies_file="/tmp/wget-cookies.txt"}
            ${cookies=save}
    PARAMS

Пожалуйста, прости меня, но я взял на себя смелость parameterizingтвоей функции. Поскольку значения в PARAMSбудут устанавливать только ненастроенную переменную, вы можете очень легко переопределить их значения - это позволит вам установить разумные значения по умолчанию и, тем не менее, изменять значения для каждого вызова функции, как вам нравится. Например, в приведенной выше функции я установил все значения, echoи вот вывод, когда он работает как есть:

log wget  userstring="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    cookies=save
wget --useragent="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    --save-cookies /tmp/wget-cookies.txt \
    --keep-session-cookies

Но если установить "$userstring"на NULL:

    userstring= mywget
log wget  userstring=unset cookies=save
wget --save-cookies /tmp/wget-cookies.txt --keep-session-cookies

Или:

    cookies=load cookies_file=/some/other/cookie.file mywget
log wget  userstring="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    cookies=load
wget --useragent="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    --load-cookies /some/other/cookie.file \
    --keep-session-cookies

Или:

    cookies= userstring= mywget
log wget  userstring=unset cookies=no
wget

Я написал больше здесь и здесь .parameter expansion

— mikeserv
источник