Barrapunto

En castellano, Araña,
en inglés Crawler / Spider / robot

// inicio de la parrafada gorda..ahora vas y lo lees

Básicamente, es un programa que se dedica a recorrer páginas de internet, almacenando sus contenidos y determinando otras webs a las que visitar a través de los enlaces de las páginas.

Aplicado a los buscadores, es un programita que visita las páginas, recoge su contenido, las indexa (almacena en un fichero-base de datos según un criterio), determina los enlaces que tiene, y sigue buscando en otras páginas (a través de los enlaces que va recorriendo).
Los buscadores dan a las páginas indexadas una puntuación (según criterios de contenidos, páginas a las que apuntan, páginas que enlazan esta página, ..). La indexación + puntuación de las páginas permite que cuando buscamos unos térmimos (palabras), nos muestren las páginas que contienen o estan relacionados con esos términos ordenados según la puntuación.

// fin de la parrafada gorda..