Come posso passare l'argomento memorizzato su una variabile a WGET

10

Sto scrivendo uno script bash che usa ampiamente wget. Per definire tutti i parametri comuni in un unico posto, li memorizzo su variabili. Ecco un pezzo di codice:

useragent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"'
cookies_file="/tmp/wget-cookies.txt"
save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies"
load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies"

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd $@"  
    wget $useragent $load_cookies_cmd "$@"
}

Purtroppo non funziona. In qualche modo mi manca il modo giusto di memorizzare i parametri sulle variabili $ useragent, $ save_cookies_cmd, $ load_cookies_cmd e caling wget passando questi parametri come parametri.

Voglio la riga di comando del risultato in questo modo:

wget --user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0" --load-cookies /tmp/wget-cookies.txt --keep-session-cookies http://mysite.local/myfile.php

EDIT: la mia soluzione finale:

Alla fine il mio script funziona correttamente con questo:

useragent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"
useragent_cmd="--user-agent=$useragent"
cookies_file="/tmp/wget-cookies.txt"
save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies"
load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies"

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $load_cookies_cmd $useragent_cmd $@"  
    wget $load_cookies_cmd "$useragent_cmd" "$@"
}

Grazie per tutte le tue risposte.

bash wget variable-substitution

— Filipe
fonte

4

http://mywiki.wooledge.org/BashFAQ/050

user_agent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"'
cookies_file="/tmp/wget-cookies.txt"
save_cookies_opts=( --save-cookies "$cookies_file" --keep-session-cookies )
load_cookies_opts=( --load-cookies "$cookies_file" --keep-session-cookies )

function mywget {
    log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd $@"
    wget "$user_agent" "${load_cookies_opts[@]}" "$@"
}

Si noti che nella chiamata di wget "$user_agent"è citato. Questo è cruciale.

— Glenn Jackman
fonte

Intelligente usando l'array. Grazie per la risposta. Mi aiuterà sicuramente a capire meglio lo script bash.

— Filipe,

3

Il problema risiede nell'ordine delle espansioni (vedere ESPANSIONE in man bashper i dettagli). Le virgolette doppie all'interno di una variabile non funzionano come virgolette doppie quando la variabile viene espansa:

$ a='1 "2 3" 4' ; for b in $a ; do echo $b ; done
1
"2
3"
4

Nota che l'uso di "$ b" non ti aiuta.

Usa le matrici, così puoi lasciare che bash faccia il duro lavoro e puoi dimenticare di citare e scappare:

$ a=(1 '2 3' 4) ; for b in "${a[@]}" ; do echo $b ; done
1
2 3
4

— choroba
fonte

Grazie per il tuo tempo. Sono un po 'alle prime armi in script bash e questi trucchi mi aiuteranno sempre da ora in poi.

— Filipe,

3

    mywget() ( echo log "wget $quiet \
                         userstring=${userstring:-unset} \
                         cookies=${cookies:-no} $@"
            echo wget ${userstring:+--useragent="$userstring"} \
                    ${cookies:+--${cookies}-cookies \
                    "$cookies_file" --keep-session-cookies} "$@"
    ) <<-PARAMS
            ${DQ=$(printf \\042)}
            ${NL=
}
            ${userstring="${DQ}Mozilla/5.0 \
                (Windows NT 6.1; WOW64; rv:27.0) \
                Gecko/20100101 Firefox/27.0${DQ}"}
            ${cookies_file="/tmp/wget-cookies.txt"}
            ${cookies=save}
    PARAMS

Per favore, perdonami, ma mi sono preso la libertà della parameterizingtua funzione. Poiché i valori in PARAMSsarà solo impostare una variabile non impostata, è possibile ignorare i loro valori molto facilmente - ti permette di impostare dei default sensati e tuttavia ancora modificare i valori per chiamata di funzione come ti piace. Ad esempio, nella funzione sopra, ho impostato tutti i valori su echoed ecco l'output quando eseguito così com'è:

log wget  userstring="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    cookies=save
wget --useragent="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    --save-cookies /tmp/wget-cookies.txt \
    --keep-session-cookies

Ma se ho impostato "$userstring"su NULL:

    userstring= mywget
log wget  userstring=unset cookies=save
wget --save-cookies /tmp/wget-cookies.txt --keep-session-cookies

O:

    cookies=load cookies_file=/some/other/cookie.file mywget
log wget  userstring="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    cookies=load
wget --useragent="Mozilla/5.0 \
    (Windows NT 6.1; WOW64; rv:27.0) \
    Gecko/20100101 Firefox/27.0" \
    --load-cookies /some/other/cookie.file \
    --keep-session-cookies

O:

    cookies= userstring= mywget
log wget  userstring=unset cookies=no
wget

Ho scritto di più su qui e qui .parameter expansion

— mikeserv
fonte