La Web Invisible es la parte de la World Wide Web, que no es indexable por los motores de búsqueda y, por lo tanto, es invisible. A diferencia de la Web de Superficie, la Web Invisible consiste en datos e información que no se pueden buscar con los motores de búsqueda por varias razones. Los usuarios no pueden acceder a esta información utilizando motores de búsqueda tradicionales. Los sitios web, aplicaciones y recursos no indexados incluyen información protegida en las áreas de correo electrónico, banca en línea, bases de datos especializadas y otros servicios de pago, por ejemplo, a través de un muro de pago. Además, hay sitios web no vinculados y protegidos por contraseña, así como tipos de medios y archivos que no se pueden rastrear con la tecnología de motores de búsqueda actual.
Información general
Los diferentes nombres de la World Wide Web a menudo se confunden. Términos como Web Oscura, Web Profunda, Web Invisible / Visible o la llamada Red Oscura están sujetos a demarcaciones y definiciones poco claras. El estudio empírico más importante sobre este tema data de 2001 y probablemente ya no esté actualizado. Aunque se examinó el tamaño de los diversos tipos de Internet, también se crearon definiciones en un estudio posterior del mismo año que se explica en el artículo Deep Web. Hablar de una Web invisible solo tiene sentido si también se menciona el motor de búsqueda utilizado. Porque los motores de búsqueda también hacen visibles los recursos en la Web Invisible y todo lo que aún no ha sido indexado por los motores de búsqueda es, en principio, invisible para la mayoría de los usuarios de Internet.
Cómo funciona
La Web Invisible se puede ver como un área de Internet que (todavía) no ha sido indexada o ha estado sujeta a varias restricciones de acceso. Una metáfora que se utiliza a menudo en este contexto es la del océano. En una sección transversal, la información que compone la World Wide Web se puede representar como las diversas profundidades y capas del océano. Un motor de búsqueda como Google sería entonces un barco de pesca pescando en aguas poco profundas. Sin embargo, hay mucha otra información que es inalcanzable para el barco de pesca, porque las redes no llegan tan lejos. En consecuencia, los siguientes términos son comunes entre los expertos en TI:
- Web de superficie: Los recursos de información están vinculados por hipervínculos. Los motores de búsqueda pueden rastrear e indexar esta información. La mayoría de los usuarios conocen este tipo de web como Internet, que utilizan, por ejemplo, en una búsqueda.
- Web superficial: La Web superficial es el fondo de tecnología de la información de muchas páginas. Esto incluye bases de datos, servidores e instrucciones de programación, que se almacenan en las bases de datos. Por ejemplo, los sitios web se generan directamente a partir de estas bases de datos cuando los usuarios acceden a ellos. Esto incluye, en particular, sitios web con scripts y dinámicos que están vinculados a hipervínculos y creados utilizando PHP y otros lenguajes de programación. Los enlaces atraen a los motores de búsqueda a estos sitios web, pero generalmente solo indexan las versiones estáticas de estos sitios web.
- Web profunda o Web oculta: Esta información y recursos generalmente están ocultos y no hay enlaces a ellos. Para buscar esta información, se necesitan motores de búsqueda y tecnologías específicas para obtener acceso. El navegador Tor es un ejemplo de tal tecnología. Los directorios Web profundos actúan como motores de búsqueda específicos que se pueden usar para acceder a la información, a menos que esté sujeta a otras restricciones de acceso (como contraseñas, cifrado, cortafuegos).
En la terminología anterior, la Web Invisible es una combinación de la Web Superficial y la Web Profunda. Para lograr el contenido y la información de la Web Invisible, se requieren consultas individuales basadas en los lenguajes de programación utilizados o motores de búsqueda específicos que proporcionen un índice. Debido a que una variedad de bases de datos temáticas y recursos de servidor están organizados temáticamente y escritos en un lenguaje de programación en particular, una búsqueda de esta información es casi imposible para motores de búsqueda generales como Google, Yahoo o Bing. En este sentido, el contenido allí es invisible, pero en principio se puede alcanzar utilizando motores de búsqueda verticales, tecnologías específicas y las instrucciones de programación correctas.
Ejemplos
Algunos ejemplos de la Web Invisible:
- Bases de datos a partir de las cuales se generan los sitios web (sitios web dinámicos).
- Bases de datos con fines académicos que requieren inscripción.
- Sitios web no vinculados y protegidos por contraseña.
- Redes de acceso restringido que requieren tecnologías específicas.
Relevancia para el marketing en línea
Aunque los enlaces de redes académicas (enlaces. edu) y sitios web gubernamentales son bastante populares en el marketing en línea, se recomienda precaución con el contenido de la Web Invisible. Cada recurso debe evaluarse individualmente y el perfil de enlaces de un sitio web debe revisarse periódicamente. Al igual que la Web Oscura, ciertos enlaces pueden parecer a Google como si fueran un Mal Vecindario. Los sitios enlazados no cuentan con la confianza de los motores de búsqueda y, en consecuencia, dichos enlaces pueden afectar negativamente al recurso enlazado.
Sin embargo, un primer enlace a un sitio web es una prueba de confianza para los motores de búsqueda tradicionales. A través de este enlace, a menudo adquieren conocimiento de un nuevo recurso. También es aconsejable comprobar si el sitio web que se va a comercializar es accesible para los motores de búsqueda convencionales. Por ejemplo, el archivo htaccess, las etiquetas meta y los robots.txt debe ser examinado en cuanto a si otorgan acceso al motor de búsqueda o si el contenido está oculto o invisible. La rastreabilidad y la indexabilidad son requisitos previos centrales para el éxito en Internet si se va a hacer marketing en línea para un sitio web.
- White Paper: La Web profunda: Valor oculto de la superficie quod.lib.umich.edu. Consultado el 24 de octubre de 2016
- The Invisible Web: Uncovering Sources Los motores de búsqueda no pueden Ver ideals.illinois.edu. Consultado el 24 de octubre de 2016
- The Ultimate Guide to the Invisible Web oedb.org. Recuperado en octubre 24, 2016
Enlaces web
- Descripción general de los Motores de Búsqueda Verticales para Explorar la Web Invisible