Oggi vi parlo della possibilità di wget di usare la “bash brace expansion” per scaricare una serie di immagini dove nel nome c’è un numero progressivo. Ad esempio dobbiamo scaricare da: http://www.org/1.pngfino a:http://www.org/20.png Con wget basta una riga di codice:…
Effettuare il load/stress test di un web server con Siege e Sproxy
Il load/stress test di un server web è una verifica molto importante, per capire se e come un sito web funziona al crescere delle richieste. Praticamente viene simulata la navigazione da parte di molti utenti contemporanei, e si verificano i…
Mirror di un sito web con wget
La comoda utility wget che permette di scaricare files da riga di comando, può essere utilizzata anche per creare una versione mirror, navigabile in locale, di un sito web. Ad esempio: wget –convert-links -p –adjust-extension -m http://www.google.com/ creerà il mirror…
Recuperare con wget più file presenti in un elenco
La bash permette di fare cose magnifiche che fanno risparmiare un mucchio di tempo. Ipotizziamo di avere un file chiamato file.txt che contiene un elenco di url relativi a pdf, es:
|
1 2 3 4 |
.... http://xxxxxx/1.pdf http:/xxxxxxx/321.pdf .... |
e di volerli scaricare tutti. Farlo a mano…
Installare wget su OSX Lion
L’installazione di wget su OSX Lion, a differenza di Snow Leopard, richiede di definire un parametro aggiuntivo durante la configurazione. Bisogna recuperare l’ultima versione di wget da http://ftp.gnu.org/gnu/wget/ (ora è http://ftp.gnu.org/gnu/wget/wget-1.13.4.tar.gz). Ora la procedura da seguire, ovviamente da terminale, è:…
Utilizzare wget per scaricare una galleria fotografica
Come indicato nel precedente post, wget è un potentissimo tool che consente il download di file tramite i protocolli HTTP, HTTPS e FTP. E’ possibile scaricare in modo semplice dei file, ad esempio immagini, con una sequenza numerica nel nome.…
Utilizzare Wget per controllare link non funzionanti del sito
Wget è un potentissimo tool che consente il download di file tramite i protocolli HTTP, HTTPS e FTP. Oltre a questo è possibile usarlo anche per altre cose; ad esempio per controllare i links non funzionanti del sito, basterà eseguire…