Crawler
Programa que inspecciona los enlaces dentro de las webs de manera automática, ordenada y periódica. También denominadas “arañas” de los buscadores, únicamente leen el código de la página web: no son capaces de leer imágenes ni animaciones ni ningún otro elemento visual.
El más conocido es el Google Bot, un programa diseñado por Google para indexar contenido a su buscador. Es un elemento crucial para el posicionamiento en buscadores, o SEO, de una página.
Por tanto, lo fundamental para que una página esté bien posicionada y localizada por el crawler de Google es que se encuentre correctamente indexada.