Barrapunto

Antiguamente si que era importante tener un gran crawler que indexara el mayor número de páginas posibles. Pero desde hace un tiempo se acabó la guerra de "a ver quien indexa más"

Hasta google quitó lo de "Searching 8,058,044,651 web pages". Ya no interesa quién indexa más, sino mejor.

Si google ha tenido tanto éxito no es por indexar muchas webs, sino por ordenar mejor que nadie los resultados de las búsquedas.

Resumiendo, que creo que esta gente de grub se equivocan al centrarse en la potencia del crawler. Le veo más futuro al buscador semántico de la UE, Theseus, que a este y eso que tampoco le veo mucho futuro al Theseus.