serweeeeeert

Robots

Son programas que buscan continuamente por todos los servidores de WWW (también en los de News , Gopher y FTP), construyendo un índice de lo hallado. También son conocidos como arañas porsu contínuo desplazamiento sobre la red o telaraña.

¿Cómo decide un robot qué visitar?

Depende del robot, cada uno usa su propia estrategia. En general comienzan por un listado histórico deURLs, especialmente de documentos que tienen enlaces a muchos Webs, listas de servidores, páginas de novedades y los webs más populares de lnternet.

La mayoría de los servicios de indexación obuscadores te permiten mandar URLs manualmente que entran a formar parte de una cola para que el robot las visite.

Base de datos

Una vez que tiene constancia de la existencia de un documento, lo indexay lo añade a su base de datos.
Contiene todos los URL encontrados, y asociados a ellos, la información relativa sobre sus contenidos:

• su título HTML o los primeros párrafo
• todaslas palabras del código HTML
• hiperenlaces
• descriptores (palabras claves) en Metatags u otras etiquetas.

Está actualizada continuamente por los robots que añaden nuevas páginas oreferencias, actualizan las que han cambiado y borran las que ya no existen.

Motor de búsqueda

Programas que buscan en una base de datos de documentos HTML indexados por un robot.

Es la parte quevemos cuando realizamos la búsqueda. Después de introducirle una petición de búsqueda, el motor de búsqueda la coteja con la base de datos y devuelve una lista ordenada de las coincidencias. Lalista está ordenada según la relevancia de la consulta colocándose primero las más coincidentes.

¿Cómo funcionan?

Al conectar con algún buscador nos encontraremos con una página que contiene unformulario para definir nuestra búsqueda y las opciones de la misma; tras rellenarla, enviarla y esperar unos segundos, el buscador nos devolverá una lista de lugares donde figura nuestra búsqueda. Así...