Web invisible

Web Invisible
¿A qué se le llama web invisible?
La "web invisible" es lo que no se puede recuperar ("ver") en los resultados de búsqueda y otros links contenidos en estos tipos de herramientas.
Base de datos con opción de búsqueda
Páginas excluídas
La 'Deep Web' es conocida como la “Internet profunda o invisible” aquellas páginas que no vemos a simple vista, pero que están ahí, indexadas yque pueden ser peligrosas.

Se trata de contenido en Internet que no forma parte de la superficie, es decir, sitios que no son indexados por los motores de búsqueda como Google y no aparecen en las primeras paginas cuando usted busca una palabra.

Parte de la 'Deep Web' la componen los páginas que aparente son reales pero que vienen siendo ilegales. Estas son utilizadas con el objetivo defacilitar el acceso anónimo a páginas que abarcan diferentes temas como: abusos, venta de estupefacientes, foros de delincuentes y otros contenidos ilegales.
http://www.semana.com/tecnologia/tips/articulo/que-web-invisible-cuales-peligros-representa/374967-3
Se denomina web invisible o profunda a la información que no puede recuperarse con los mecanismos de búsqueda comunes. Estos mecanismostratan de abarcar toda la web, pero se calcula que los mayores motores de búsqueda alcanzan a indizar sólo entre un tercio y la mitad de los documentos disponibles. La web invisible no sólo es de mayor tamaño que la web visible o superficial sino que crece a mayor velocidad. Asimismo, mucha información disponible en la web profunda, como la que se encuentra en bases de datos, tiene un alto valorpotencial para el usuario.
La multiplicidad de mecanismos de rastreo, indización, recuperación y organización de documentos en la web puede causar confusión al usuario común. Además, el número de motores de búsqueda, así como los híbridos resultado de la combinación de diferentes mecanismos, ha aumentado. Esto hace necesario clasificar y diferenciar los tipos de herramientas disponibles.http://biblio.colmex.mx/bib_dig/web_invisible.htm
¿Qué se entiende por mecanismos de búsqueda?
Mecanismos de búsqueda en la web
La multiplicidad de términos con que se alude a los mecanismos de rastreo, indización, recuperación y organización de documentos en la web puede causar confusión al usuario común. Lo cierto es que cada herramienta de búsqueda funciona y tiene un propósito y alcance diferentes,pero cada vez más las diferentes herramientas se combinan dando lugar a híbridos, que pueden dificultar la comprensión del funcionamiento interno de estos mecanismos. Una dificultad adicional es el número creciente de mecanismos disponibles, lo que hace aún más necesario clasificarlos y diferenciarlos.
Buscadores
A los softwares que usan los llamados buscadores, motores o maquinarias debúsqueda (search engines) para localizar páginas agregables a sus bases de datos también se les denomina indistintamente “arañas” (spiders), “rastreadores” (crawlers) o robots (en el contexto web). Estos rastrean e indizan de forma automática páginas web, así como todos los documentos referenciados en ellas. Los buscadores también añaden a sus bases de datos las páginas de cuya existencia son informadosdirectamente por sus autores, así como los documentos referenciados en las mismas. Los buscadores presentan interfaces para el público, que consisten en cuadros donde realizar búsquedas de forma sencilla. Altavista, Ask Jeeves y Google, entre otros, son buscadores.
Los buscadores arrojan resultados sobre las búsquedas realizadas en sus propios índices y no sobre la web directamente. Esto últimosería imposible debido al volumen de información y al tiempo requerido para realizar la búsqueda. El rastreo de páginas web que efectúan los robots se realiza con periodicidad variable y, por economía, tiende a no ser muy frecuente. Por ello, siempre existe una diferencia entre lo que pueden recuperar los buscadores y lo que realmente se encuentra en la web.
Aparte del volumen y frecuencia de...