crawling

crawling

<kròoliṅ> s. ingl., usato in it. al masch. – Operazione di visita sistematica del web, propedeutica all'estrazione e all’indicizzazione dei contenuti testuali delle pagine visitate da un motore di ricerca. Solitamente è condotta da opportuni programmi, detti o spider, che partendo da una lista di indirizzi preselezionati a mano eseguono i collegamenti ipertestuali presenti in modo ricorsivo, iterando questo procedimento fino a quando sono raggiunte le condizioni di terminazione, facendo attenzione a eliminare gli indirizzi già visitati. Questa procedura, concettualmente semplice, è molto complessa da un punto di vista operativo a causa delle dimensioni del web, della duplicazione dei contenuti e del fatto che molte pagine sono generate dinamicamente.