最初の検索エンジンとは何ですか？
検索エンジンは、ユーザーが定義した特定の基準に基づいて、データベースから情報を取得する方法として機能するコンピュータープログラムです。 最新の検索エンジンは、World Wide Web、ニュースグループ、ディレクトリプロジェクトから収集された膨大な量のデータを含むデータベースを検索します。 検索エンジンの進化はかなり早く、1990年代初頭に最初期の真の検索エンジンが登場し、1995年には最初のモダンな検索エンジンが登場しました。
ワールドワイドウェブが存在する前に、インターネットの出現と大学のサーキットでのその人気の後、最初の検索エンジンが作成されました。 1980年代後半から1990年代初頭の歴史のこの時点で、インターネットで使用されている主なプロトコルの1つはファイル転送プロトコル（FTP）でした。 FTPサーバーは世界中に存在し、通常は大学のキャンパス、研究施設、または政府機関にありました。 モントリオールのマギル大学の一部の学生は、さまざまな一般的なFTPサーバーで利用可能なファイルの集中データベースが時間を節約し、他の人に優れたサービスを提供することを決定しました。 これがArchie検索エンジンの起源です。
Archieはアーカイブの略で、リスト内のFTPサーバーに定期的にログインし、サーバー上にあるファイルのインデックスを作成する検索エンジンでした。 プロセッサの時間と帯域幅は依然としてかなり価値のある商品であったため、Archieは毎月かそこらの更新のみをチェックしました。 最初は、Archieが作成したインデックスは、Unixコマンドgrepを使用してチェックすることを目的としていましたが、すぐにインデックスを簡単に検索できるように、より優れたユーザーインターフェイスが開発されました。 Archieに続いて、いくつかの検索エンジンが出現し、類似のGopherプロトコルを検索しました。最も有名なものの2つはJugheadおよびVeronica検索エンジンです。 ArchieはWorld Wide Webとそれに続く検索エンジンの出現により比較的時代遅れになりましたが、Archieサーバーはまだ存在しています。
1993年、World Wide Webの作成後まもなく、Matthew Grayは最初のWebロボットであるWorld Wide Web Wandererを開発しました。 World Wide Web Wandererは、インターネットに存在するすべてのWebサイトのURLをキャプチャしてインデックスを作成しましたが、Webサイトの実際のコンテンツは追跡しませんでした。 Wandererに関連付けられたインデックスは、初期の検索エンジンであり、Wandexと呼ばれていました。
他のいくつかの小さなプロジェクトは、現代の検索エンジンにアプローチし始めたワンダラーの後に成長しました。 これらには、World Wide Web Worm、Repository-Based Software Engineering（RBSE）スパイダー、およびJumpStationが含まれます。 これら3つの検索エンジンはすべて、Webロボットによって収集されたデータを使用して、その情報をユーザーに返しました。 それでも、RBSEはページの値をランク付けしようとしましたが、ほとんどの場合、情報はフィルタリングされずに返されました。
1993年、エキサイトという名のスタンフォード大学の学生によって設立された会社が、おそらくページコンテンツの分析を実際に組み込んだ最初の検索エンジンをリリースしました。 この最初のオファリングは、サイト全体を検索するためのものであり、Web全体を検索するためのものではありません。
しかし1994年には、検索エンジンの世界に大きなブレークスルーがありました。 WebCrawlerと呼ばれる会社は、インターネット上のページのタイトルとヘッダーをキャプチャするだけでなく、すべてのコンテンツも取得する検索エンジンを導入しました。 WebCrawlerは非常に成功しました。非常に成功したため、システムリソースがすべて使用されていたため、多くの時間を利用することさえできませんでした。
その年の少し後、Lycosがリリースされました。これにはWebCrawlerと同じ機能の多くが含まれており、その上に構築されています。 Lycosは、関連性に基づいて結果をランク付けし、ユーザーが多くの設定を微調整してより適切な結果を得ることができるようにしました。 Lycosも巨大でした。1年以内に100万を超えるWebサイトがアーカイブされ、2年以内に6,000万に達しました。
最初の検索エンジンは、最も正確にはArchieです。 ただし、ほとんどの人は、検索エンジンについて話すとき、Archieがやったこととはまったく異なることを意味します。 後のWWW検索エンジンでさえ、最新の検索エンジンであるWebCrawlerとLycosが登場するまで、現代の基準を満たしていません。