보이지 않는 웹은 월드와이드 웹의 일부이며,검색엔진에서는 색인을 생성할 수 없으므로 보이지 않는다. 표면 웹과는 달리 보이지 않는 웹은 여러 가지 이유로 검색 엔진으로 검색 할 수없는 데이터와 정보로 구성됩니다. 사용자는 기존 검색 엔진을 사용하여이 정보에 액세스 할 수 없습니다. 인덱싱되지 않은 웹 사이트,앱 및 리소스에는 이메일,온라인 뱅킹,특수 데이터베이스 및 기타 유료 서비스 영역(예:페이 월)의 보호 된 정보가 포함됩니다. 또한 현재 검색 엔진 기술로 크롤링 할 수없는 미디어 유형 및 아카이브뿐만 아니라 비 링크 및 암호로 보호 된 웹 사이트가 있습니다.
일반 정보
월드 와이드 웹의 다른 이름은 종종 혼동된다. 다크 웹,딥 웹,보이지 않는/보이는 웹 또는 소위 다크 넷과 같은 용어는 불분명 한 경계 및 정의의 적용을받습니다. 이 주제에 대한 가장 중요한 경험적 연구는 2001 년부터 시작되었으며 현재 구식입니다. 인터넷의 다양한 유형의 크기가 조사되었지만,정의는 또한 문서 깊은 웹에 설명되어 같은 해의 추가 연구에서 만들어졌습니다. 보이지 않는 웹의 말하는 것은 단지 사용된 검색 엔진이 또한 언급되는 경우에 이해된다. 검색 엔진 뿐만 아니라 보이지 않는 웹에서 볼 수 있는 리소스를 확인 하 고 아직 검색 엔진에 의해 색인이 생성 되지 않은 모든 것은,원칙적으로,대부분의 인터넷 사용자에 게 보이지 않는 때문에.
작동 원리
보이지 않는 웹은(아직)색인을 생성하지 않았거나 다양한 액세스 제한을 받은 인터넷의 영역으로 볼 수 있다. 이 문맥에서 자주 사용되는 은유는 바다의 은유입니다. 단면에서 월드 와이드 웹을 구성하는 정보는 바다의 다양한 깊이와 층으로 표현 될 수 있습니다. 구글과 같은 검색 엔진은 얕은 물 속에서 낚시 보트 낚시 될 것입니다. 그러나,거기에 낚시 보트에 대 한 연결할 수 있는 다른 정보를 많이 그물을 멀리 아래로 도달 하지 않습니다 때문에. 따라서 다음 용어는 전문가들 사이에서 일반적입니다:
- 표면 웹:정보 자원은 하이퍼 링크로 연결되어 있습니다. 검색 엔진은이 정보를 크롤링하고 색인을 생성 할 수 있습니다. 대부분의 사용자는 검색에서 예를 들어 사용하는 인터넷으로 이러한 종류의 웹을 알고 있습니다.
- 얕은 웹:얕은 웹은 많은 페이지의 정보 기술 배경입니다. 여기에는 데이터베이스에 저장된 데이터베이스,서버 및 프로그래밍 지침이 포함됩니다. 예를 들어 웹 사이트는 사용자가 액세스 할 때 이러한 데이터베이스에서 직접 생성됩니다. 여기에는 특히 하이퍼링크에 연결되어 있고 다른 프로그래밍 언어를 사용하여 만들어진 스크립팅된 동적 웹 사이트가 포함됩니다. 링크는 이러한 웹 사이트에 검색 엔진을 유치하지만 일반적으로 이러한 웹 사이트의 정적 버전 만 색인화합니다.
- 딥 웹 또는 숨겨진 웹:이러한 정보와 리소스는 일반적으로 숨겨져 있으며 링크도 없습니다. 이 정보를 검색하려면 액세스 권한을 얻기 위해 특정 검색 엔진 및 기술이 필요합니다. 토르 브라우저는 이러한 기술의 예입니다. 딥 웹 디렉토리는 다른 액세스 제한(예:암호,암호화,방화벽)이 적용되지 않는 한 정보에 액세스하는 데 사용할 수있는 특정 검색 엔진 역할을합니다.
위의 용어에서 보이지 않는 웹은 얕은 웹과 깊은 웹의 조합입니다. 보이지 않는 웹의 내용과 정보를 얻으려면 사용되는 프로그래밍 언어를 기반으로 하는 개별 쿼리 또는 인덱스를 제공하는 특정 검색 엔진이 필요합니다. 주제 데이터베이스 및 서버 자원의 다양한 주제별로 구성하고 특정 프로그래밍 언어로 작성되기 때문에,이 정보의 검색은 구글,야후 나 빙 같은 일반 검색 엔진에 대한 거의 불가능하다. 이러한 의미에서 콘텐츠는 보이지 않지만 원칙적으로 수직 검색 엔진,특정 기술 및 올바른 프로그래밍 지침을 사용하여 도달 할 수 있습니다.
예
보이지 않는 웹의 일부 예:
- 웹 사이트가 생성되는 데이터베이스(동적 웹 사이트).
- 등록이 필요한 학술 목적 데이터베이스.
- 비연결 및 암호로 보호된 웹사이트.
- 특정 기술이 필요한 액세스 제한 네트워크.
온라인 마케팅과의 관련성
학술 네트워크(에듀 링크)및 정부 웹 사이트의 링크는 온라인 마케팅에서 매우 인기가 있지만 보이지 않는 웹의 콘텐츠에주의하는 것이 좋습니다. 각 자원은 개인적으로 평가되어야 하고 웹사이트의 연결 단면도는 일정하게 검토되어야 한다. 다크 웹과 마찬가지로 특정 링크는 마치 나쁜 이웃 인 것처럼 구글에 나타날 수 있습니다. 링크 된 사이트는 검색 엔진의 신뢰가 없으므로 이러한 링크는 링크 된 리소스에 부정적인 영향을 줄 수 있습니다.
그러나 웹 사이트에 대한 첫 번째 링크는 전통적인 검색 엔진에 대한 신뢰의 증거입니다. 이 링크를 통해 종종 새로운 리소스에 대한 지식을 얻습니다. 또한 판매 될 웹사이트는 기존의 검색 엔진에 대 한 액세스할 수 있는지 여부를 확인 하는 것이 좋습니다. 예를 들어,
- 백서:딥 웹:표면 숨겨진 값 quod.lib.umich.edu.2016 년 10 월 24 일에 확인함
- 보이지 않는 웹:검색 엔진이 볼 수없는 출처 발견 ideals.illinois.edu.2016 년 10 월 24 일 검색
- 보이지 않는 웹에 대한 궁극적 인 가이드 oedb.org.10 월 검색 24, 2016
웹 링크
- 보이지 않는 웹을 탐색하는 수직 검색 엔진 개요