Web spider per Ubuntu


11

Sto cercando un web spider per Ubuntu come questo Webripper - Calluna Software . Puoi scaricare un intero sito come puoi

wget -r -m example.com

ma la funzione che sto cercando è che puoi inserire un termine di ricerca come "Linux" e cerca sul Web e li scarica. Ci sono programmi su Ubuntu come questo?

Risposte:


4

Puoi utilizzare Google Alert per creare una sorta di pagina di ricerca consegnata a un feed e quindi utilizzare un lettore RSS o Thunderbird per leggerli.

Uso Thunderbird per RSS. Non so se ci sono lettori RSS che potrebbero esportare il feed in HTML semplice.



3

Puoi provare http ripper .

Ecco alcune funzionalità pubblicate sul sito Web:

Free Software (GPL 3)
Generic (works with almost every website)
Runs on GNU/Linux and Windows
Nearly undetectable / blockable by servers
Built with python and pygtk

http://29a.ch/httpripper/screenshots/2.png Immagine dello schermo

Guarda un tutorial, dallo stesso sviluppatore di httpripper:

Link per scaricare:

Ha funzionato per me con Ubuntu 11.10 x64


Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.