Doctor

Deep Web


2014






















Introducción:
¿Alguna vez pensaste por qué navegamos la web y no la, por ejemplo, buceamos?
La respuesta es más sencilla de lo que te imaginas, pero también es una respuesta que está oculta a la mayoría de los pobladores efímeros de la Internet superficial. La Deep Web o la Red Profunda, es toda aquella información en sitios weby otros formatos que no está indexada por los motores de búsquedas convencionales y en ella se esconde el 90% del contenido real de internet, donde habita información clasificada, páginas olvidadas y hasta actividades delictivas, ya que la mayoría de los internautas tienen necesidades que resuelven en la red a la manera de investigación, comunicación, consumo y entretenimiento. Es así que labúsqueda de información en general, el correo, la compraventa de productos y el acceso a cualquier tipo de entretenimiento se constituyen como los motivadores principales del acceso a internet y, en consecuencia, del trabajo de los motores de búsqueda ofrecen millones de resultados inmediatos y, en general, muy útiles. Pero, los resultados que se consiguen, ¿son todos los que existen? Y además, ¿sonlos de mayor calidad? La respuesta es un rotundo NO. Esto es así porque lo que vemos de internet gracias a los motores de búsquedas es apenas el azulino tono de la superficie de un océano profundo del que sólo vemos algunos metros hacia dentro. Un porcentaje irrisorio que esconde más de lo que muestra.


CAPÍTULO l

¿Qué es la Deep Web?

El concepto de deep web es sencillo. Es aquella partede la red que contiene material, información y páginas web que no están indexadas en ninguno de los buscadores existentes como pueden ser bing, google, yahoo, etc. Así en el hipotético caso que los buscadores pudieran indexar la totalidad de contenido en la web significaría que desaparecería la deep web.
No obstante esto es imposible ya que muchas de las páginas y documentos están hechas de talforma que no puedan ser indexables, ya sea porque están protegidos con contraseña, porqué están realizados en formatos no indexables como por ejemplo páginas realizadas completamente en flash, sin contenido html, etc.
Si hacemos una analogía con la película matrix podríamos decir que la totalidad de personas que toman la pastilla azul serían las personas que solo navegan y conocen lo quedenominamos red superficial mientras que la totalidad de personas que tomarían la pastilla roja son las personas que conocerían la existencia de la deep web.

1.0. La Deep Web (Red profunda), antes (1994) denominada Invisible Web (no hace falta traducción), ha sido bautizada de esta manera en 2001 debido a que no es accesible directamente a través del uso del principal medio de navegación superficialen estos tiempos: los motores de búsquedas tradicionales o estándar. El motivo de esto se divide generalmente en tres factores.

1.1. El primero es el técnico o involuntario, y es debido a una falta de actualización a nuevos estándares en cuanto a indexación o por el carácter dinámico de un sitio web (cambian de contenido constantemente, se renuevan a través de interacción del visitante, etc.1.2. El segundo caso es el de los sitios privados y protegidos o aquellos que contienen documentos en formatos que no pueden ser indexados. En estos dos casos, el motor de búsqueda no encontrará en el código que leen sus robots un contenido asociable al cuál hacer referencia estática o directamente no podrá acceder a las bases de datos protegidas (bibliotecas, diccionarios, etc.), con lo que“pasará de largo” ante ese sitio.



1.3. El otro caso es el de la decisión deliberada, pues el mismo desarrollador puede indicarle al motor de búsqueda que no revise periódicamente su código en busca de cambios a través de una variable como Follow / No Follow en el caso de Google. Si elige No Follow, los robots ignorarán el sitio y éste se mantendrá escondido, invisible, en la profundidad a...