ディープウェブとは何ですか？

ディープウェブは、標準検索方法の外側にあるインターネットの一部です。標準の検索エンジンは、単一のページを表示し、すべてのリンクをクリックすることにより、Webページを見つけます。これにより、巨大なスパイダーウェブのような単一ページから拡張でき、リンクでページの後にページを見つけることができます。このプロセスは、インターネット上に存在するページの一部のみをキャプチャします。多くの理由の1つで、膨大な量のデータが完全に分類されています。これらのページは標準の検索エンジンでは登場することはないため、ほとんどのWebユーザーには見えません。

Surface Webは、ほとんどのユーザーが馴染みのあるインターネットの一部です。この部分には、ほとんどのユーザーが知っている標準のWebページとWebサービスが含まれています。ディープウェブは、インターネットユーザーの特定の部分のみが認識している、またはアクセスできるという情報で構成されています。深いウェブは、Surface Webに比べて巨大です。 2000年には、Surface Webの50倍近く大きかった。

理由深いWebが存在するのは、主に検索エンジンの制限によるものです。検索エンジンがリンクを調べると、特定の種類のWebページにアクセスできません。これらのページはシステムに入ることはなく、したがって、インデックス化されません。ユーザーがこれらのページのいずれかを検索すると、検索エンジンがその存在やアクセスに失敗しないため、ユーザーはそれを見つけることはありません。

検索エンジンがインデックスを作成するのが困難または不可能なさまざまなページタイプがあります。動的およびデータベースベースのWebページは、特定の入力が存在する必要があるため、実際には不可能です。これらのWebページは、多くの場合、ユーザー入力を介してその場で構成されています。動的ページは必要になるまで存在しないため、検索エンジンは何を求めるべきかわからないためスキップします。

プライベートまたはゲートのウェブページは、ディープウェブの別の大部分を構成しています。これらのページには資格情報が必要なのでorログイン情報と検索エンジンには、ログインの反対側の情報にアクセスすることがブロックされていません。この問題があっても、一部のログインベースのサイトはSurface Webの一部です。ウェブサイトは、エンジンがページを検索できるようにするための特別な規定を設定しています。これは、オープンな登録があり、追加のトラフィックを生成したいページ間で一般的です。

ディープウェブの別の大部分は、リンクされていないまたは制限されたWebサイトで作られています。これらのページは、外部のリソースへのリンクを所有しておらず、既存のリンクを積極的にブロックしていません。これにより、検索エンジンがページにつまずくのを防ぐため、リストに追加されることはありません。これは以前は個人的なWebページ間で一般的でしたが、最新のWeb使用の変更により、ほとんどの個人ページがリンクおよびインデックスが作成されました。