Ia y los buscadores web

IA Y LOS BUSCADORES WEB
Inteligencia Artificial para la Internet y la Web Máster Universitario en Informática Escuela Técnica Superior de Ingeniería Informática

ÍNDICE
● ●

INTRODUCCIÓN MOTORES DE BÚSQUEDA
– –

Historia. Avances en los algoritmos de búsqueda. Clasificación
● ● ● ● ●

Arañas Directorios Metabuscadores FFA Otros: Temáticos, ficheros, sociales...

ÍNDICE
●ALGORITMOS DE RELEVANCIA
– –

Pagerank Hits Directrices de diseño Directrices técnicas Uso de Tags Herramientas de ayuda a robots. Análisis.

●

SEO (Search Engine Optimization)
– – – – –

INTRODUCCIÓN
●

OBJETIVOS.
–

Recuperación, Clasificación y Valoración de la información. “Ordenar” Internet. Responder eficientemente a la búsqueda de un usuario La cantidad de información crecerápidamente.

– –

●

RETOS
–

INTRODUCCIÓN
–

El número de usuarios también crece rápidamente.
● ● ● ●

1990 → 1 millón 2002 → 605 millones Actualidad → supera los 1000 millones España → Supera los 17 millones

– –

Heterogeneidad de los usuarios. Adaptar las soluciones a la heterogeneidad de los usuarios. Los propios generadores de contenidos intentan engañar a los buscadores.–

INTRODUCCIÓN

PRETENDE SER EL NEXO DE COMUNICACIÓN ENTRE USUARIOS E INFORMACIÓN

HISTORIA
●

La web se comenzó a idear en 1980 A partir de 1990 aparecen los primeros sitios web. 1993
–

●

●

Primer buscador: Wandex (MIT)
● ●

Índice. Robot de búsqueda desarrollado en Perl.

HISTORIA
–

Aliweb apareció meses más tarde.
●

● ●

Indexaba MetaTags de las páginasdadas de alta en su índice. No era un robot Todavía en funcionamiento.

●

1994
–

Comienzan a desarrollarse las primeras arañas que indexan:
● ● ●

URL Título Descripción

HISTORIA
–

El problema de los motores que utilizan estas arañas se produce al mostrar los resultados ya que lo hacía sin utilizar algoritmos de relavancia. Paralelamente aparecía nuevos directorios (no robots)como Yahoo que posteriormente evolucionaría incorporando robots de búsqueda

–

HISTORIA
●

Webcrawler
–

Produce la primera revolución en los buscadores
●

● ● ●

Indexaba las páginas de forma completa al contrario que sus antecesores que sólo buscaban en dirección web título y metagags . Mejores resultados En 7 meses llegó a un millón de consultas en 1995 fue comprado por AOL, en1997 por Excite y que en 2001 pasó a ser parte de InfoSpace.

HISTORIA
●

Lycos (Carnegie Mellon University)
● ●

●

Al principio , sólo indexaba una parte de las páginas. Algoritmo interesante que incluía el concepto de proximidad entre palabras – Near para indicar la proximidad entre dos términos de búsqueda, separados por hasta X palabras, garantizando así que estén relacionados entresí y, por tanto, en el contexto que interese. – Far, opuesto a Near, para indicar que los términos habrán de estar separados como mínimo, X palabras entre sí en el documento recuperado, al menos en un caso. Llego a ser una de los motores con más éxito.

HISTORIA
●

1995
–

Excite
Introduce un concepto base para los buscadores de la actualidad. – Su algoritmo intentaba crear un sistemaparecido a los sinónimos mediante estadísticas entre las relaciones de palabras, de forma que se podía realizar una búsqueda obteniendo resultados aunque la misma no existiera en la página. Aparecen los metabuscadores
● ●

–

Metacrawler

HISTORIA
–

Altavista
●

●

●

permitía consultas en lenguaje natural consultas avanzadas mediante operadores lógicos (AND, OR…) permitía hacerbúsquedas en los nombres de imágenes y algunos ficheros multimedia

HISTORIA
–

Ozu:
● ●

Primer desarrollo en España Actualmente utiliza la tecnología de google.

–

Aparecen nuevos directorios y motores

HISTORIA
●

1996
– – – –

Comienza a desarrollarse google. 2 años más tarde se crea google Inc Interfaz clara y sencilla Algoritmo de relevancia innovador
●

Las...