Web crawling

Cerca tra migliaia
di articoli, foto e blog

Christina (given name)
In rilievo

Christina (given name)

La scheda: Web robot

Un crawler (detto anche web crawler, spider o robot), è un software che analizza i contenuti di una rete (o di un database) in un modo metodico e automatizzato, in genere per conto di un motore di ricerca. Nello specifico, un crawler è un tipo di bot (programma o script che automatizza delle operazioni), che solitamente acquisisce una copia testuale di tutti i documenti presenti in una o più pagine web creando un indice che ne permetta, successivamente, la ricerca e la visualizzazione.
Un uso estremamente comune dei crawler viene effettuato sul Web, esso si basa su una lista di URL da visitare fornita dal motore di ricerca (il quale, inizialmente, si basa a sua volta sugli indirizzi suggeriti dagli utenti o su una lista precompilata dai programmatori stessi). Durante l'analisi di una URL, identifica tutti i collegamenti ipertestuali presenti nel documento e li aggiunge alla lista di URL da visitare. Il processo può essere concluso manualmente o dopo che un determinato numero di collegamenti è stato seguito.
Inoltre i crawler attivi su Internet hanno la facoltà di essere indirizzati da quanto indicato nel file "robots.txt" posto nella root del sito. All'interno di questo file, è possibile indicare quali pagine non dovrebbero essere analizzate. Il crawler ha la facoltà di seguire i consigli, ma non l'obbligo.


Acquista Mingzheng 2.4Ghz RC Auto Car Radiocomandata,4WD Alta Velocita Truck Crawler Telecomando Prezzo

Acquista Mingzheng 2.4Ghz RC Auto Car Radiocomandata,4WD Alta Velocita Truck Crawler Telecomando Prezzo

Garanzia di rimborso al 100%: se non completamente soddisfatto dell'articolo, non esitate a contattarci. L'auto a 4 ruote motrici è più stabile e più veloce rispetto a quella a 2 ruote motrici. L'auto può correre sulla sabbia, sull'erba e sulla terra paludosa, finire facilmente molti movimenti difficili. La frequenza 2.4GHz garantisce la potente capacità anti-jamming. Il prodotto è un sistema di trasmissione posteriore a controllo remoto su larga scala e la [...]

deleted

deleted

ciao!conoscete i trucchi di spider-man 3 per playstation 3?

ciao!conoscete i trucchi di spider-man 3 per playstation 3? "bo"

Rispondi

Robot animatore e custode per amici pelosi

Robot animatore e custode per amici pelosi

Pet sitter a distanza Questo simpatico robottino alieno potrebbe diventare il migliore amico dei vostri pelosi preferiti, cari umani. E un compagno di giochi, molto utile e intelligente. Si chiama Petcare robot ed è in grado di tenervi sempre in contatto con i vostri quattro zampe, tutte le volte che sarete fuori di casa, lontani da loro. Petcare...

&id=HPN_Web+crawling_http{{{}}}it*dbpedia*org{}resource{}Web{{}}spider" alt="" style="display:none;"/> ?>