Wat was de eerste zoekmachine?

Een zoekmachine is een computerprogramma dat fungeert als een manier om informatie uit een database op te halen, op basis van bepaalde criteria die door de gebruiker zijn gedefinieerd. Moderne zoekmachines doorzoeken databases die enorme hoeveelheden gegevens bevatten, verzameld via het World Wide Web, nieuwsgroepen en directory-projecten. De evolutie van de zoekmachine was vrij snel, met de vroegste echte zoekmachine die aan het begin van de jaren negentig verscheen en de eerste moderne zoekmachine in 1995.

Voordat het World Wide Web bestond, maar na de komst van internet en de daaruit voortvloeiende populariteit in het universitaire circuit, werd de eerste zoekmachine gemaakt. Op dit punt in de geschiedenis - eind jaren tachtig en begin jaren negentig - was een van de belangrijkste protocollen op internet het FTP-protocol (File Transfer Protocol). FTP-servers bestonden over de hele wereld, meestal op universitaire campussen, onderzoeksfaciliteiten of overheidsinstellingen. Sommige studenten aan de McGill University in Montreal besloten dat een gecentraliseerde database met bestanden die beschikbaar zijn op de verschillende populaire FTP-servers tijd zou kunnen besparen en een geweldige service aan anderen zou bieden. Dit was de oorsprong van de Archie-zoekmachine.

Archie, kort voor archief, was een zoekmachine die zich regelmatig bij FTP-servers in zijn lijst aanmeldde en een index maakte van welke bestanden op de server stonden. Omdat processortijd en bandbreedte nog steeds een redelijk waardevolle grondstof was, controleerde Archie slechts ongeveer elke maand op updates. Aanvankelijk was de index die Archie bouwde bedoeld om te worden gecontroleerd met behulp van de Unix-opdracht grep , maar al snel werd een betere gebruikersinterface ontwikkeld om de index gemakkelijk te kunnen doorzoeken. Na Archie ontstond een handvol zoekmachines om het vergelijkbare Gopher-protocol te doorzoeken - twee van de meest bekende zijn de Jughead- en Veronica-zoekmachines. Archie werd relatief verouderd met de komst van het World Wide Web en de daaropvolgende zoekmachines, maar Archie-servers bestaan ​​nog steeds.

In 1993, niet lang na de oprichting van het World Wide Web, ontwikkelde Matthew Gray de World Wide Web Wanderer, de eerste webrobot. De World Wide Web Wanderer indexeerde alle websites die op internet bestonden door hun URL's vast te leggen, maar volgde geen enkele inhoud van de websites. De index geassocieerd met de Wanderer, wat een vroege soort zoekmachine was, heette Wandex.

Een paar andere kleine projecten groeiden op na de Wanderer, die de moderne zoekmachine begon te naderen. Deze omvatten de World Wide Web Worm, de Repository-Based Software Engineering (RBSE) -spin en JumpStation. Al deze drie zoekmachines gebruikten gegevens verzameld door webrobots om die informatie terug te sturen naar gebruikers. Toch werd informatie meestal grotendeels ongefilterd geretourneerd, hoewel RBSE wel probeerde de waarde van pagina's te rangschikken.

In 1993 bracht een bedrijf, opgericht door enkele Stanford-studenten, genaamd Excite, wat misschien wel de eerste zoekmachine is die de analyse van de pagina-inhoud daadwerkelijk bevat. Dit eerste aanbod was bedoeld voor het zoeken binnen een site, maar niet voor het zoeken op het web als geheel.

In 1994 kende de wereld van de zoekmachine echter een grote doorbraak. Een bedrijf genaamd WebCrawler ging live met een zoekmachine die niet alleen de titel en de koptekst van pagina's op internet vastlegde, maar ook alle inhoud pakte. WebCrawler was enorm succesvol - zo succesvol dat het meestal niet eens kon worden gebruikt omdat alle systeembronnen werden gebruikt.

Iets later dat jaar werd Lycos uitgebracht, inclusief veel van dezelfde functies als WebCrawler, en daarop voortbouwend. Lycos rangschikte de resultaten op basis van relevantie en liet de gebruiker een aantal instellingen aanpassen om resultaten te krijgen die beter pasten. Lycos was ook enorm - binnen het jaar had het ruim een ​​miljoen websites gearchiveerd en binnen twee jaar had het 60 miljoen bereikt.

De eerste zoekmachine zou het meest nauwkeurig Archie zijn. De meeste mensen bedoelen echter, wanneer ze over een zoekmachine praten, iets heel anders dan wat Archie deed. Zelfs de latere WWW-zoekmachines voldoen niet aan onze moderne criteria tot de komst van WebCrawler en Lycos, de eerste echt moderne zoekmachines.