Spider

Un software usado por un buscador para recabar información de las páginas web. Los spider son configurados de manera diferente, pero todos ellos capturan información específica de una página web. Algunos buscadores capturan el título y la etiqueta Meta (Meta Tag). Otros capturan el título y los primeros 1,000 caractéres del contenido de la página web. Algunos otros sólo capturan las palabras claves o keywords dentro de la etiqueta Meta «keywords». Otros utilizan la combinación de todos éstos métodos.

Fuente: (E-book) Secretos de los buscadores / Mercadotecnia en internet.