Qual foi o primeiro mecanismo de pesquisa?

Um mecanismo de pesquisa é um programa de computador que atua como uma maneira de recuperar informações de um banco de dados, com base em certos critérios definidos pelo usuário. Os mecanismos de pesquisa modernos pesquisam bancos de dados que contêm grandes quantidades de dados, coletados da World Wide Web, grupos de notícias e projetos de diretórios. A evolução do mecanismo de busca foi bastante rápida, com o primeiro mecanismo de busca verdadeiro aparecendo no início dos anos 90 e o primeiro mecanismo de busca de estilo moderno aparecendo em 1995.

Antes da existência da World Wide Web, mas após o advento da Internet e sua popularidade no circuito universitário, foi criado o primeiro mecanismo de pesquisa. Neste ponto da história - no final dos anos 80 e no começo dos anos 90 - um dos principais protocolos usados ​​na Internet era o FTP (File Transfer Protocol). Servidores FTP existem em todo o mundo, geralmente em campus universitários, instalações de pesquisa ou agências governamentais. Alguns estudantes da Universidade McGill, em Montreal, decidiram que um banco de dados centralizado de arquivos disponíveis nos vários servidores FTP populares ajudaria a economizar tempo e oferecer um ótimo serviço a outros. Essa foi a origem do mecanismo de busca do Archie.

Archie, que era abreviação de archive, era um mecanismo de pesquisa que fazia logon regularmente em servidores FTP em sua lista e fazia um índice de quais arquivos estavam no servidor. Como o tempo e a largura de banda do processador ainda eram uma mercadoria bastante valiosa, o Archie só procurava atualizações a cada mês. Inicialmente, o índice que o Archie construiu deveria ser verificado usando o comando grep do Unix, mas logo uma interface de usuário melhor foi desenvolvida para permitir uma pesquisa fácil no índice. Depois de Archie, vários mecanismos de pesquisa surgiram para pesquisar o protocolo Gopher semelhante - dois dos mais famosos são os mecanismos de pesquisa Jughead e Veronica. Archie tornou-se relativamente obsoleto com o advento da World Wide Web e subsequentes mecanismos de pesquisa, mas os servidores Archie ainda existem.

Em 1993, pouco depois da criação da World Wide Web, Matthew Gray desenvolveu o World Wide Web Wanderer, que foi o primeiro robô da Web. O World Wide Web Wanderer indexou todos os sites existentes na internet capturando seus URLs, mas não rastreou nenhum conteúdo real dos sites. O índice associado ao Wanderer, que era um tipo inicial de mecanismo de pesquisa, era chamado Wandex.

Alguns outros pequenos projetos surgiram após o Wanderer, que começou a se aproximar do mecanismo de busca moderno. Isso incluía o World Wide Web Worm, a aranha RBSE (Repository-Software Software Engineering) e a JumpStation. Todos esses três mecanismos de pesquisa usaram dados coletados por robôs da Web para retornar essas informações aos usuários. Ainda assim, as informações foram retornadas na maioria das vezes sem filtro, embora o RBSE tenha tentado classificar o valor das páginas.

Em 1993, uma empresa fundada por alguns estudantes de Stanford, chamada Excite, lançou o que é indiscutivelmente o primeiro mecanismo de pesquisa a realmente incorporar a análise do conteúdo da página. Essa oferta inicial foi feita para pesquisar em um site, no entanto, não para pesquisar na web como um todo.

Em 1994, porém, o mundo do mecanismo de busca teve um grande avanço. Uma empresa chamada WebCrawler entrou no ar com um mecanismo de busca que não apenas capturava o título e o cabeçalho das páginas na Internet, mas também capturava todo o conteúdo. O WebCrawler obteve um enorme sucesso - tão bem que na maior parte do tempo nem sequer pôde ser utilizado porque todos os recursos do sistema estavam sendo utilizados.

Um pouco mais tarde naquele ano, o Lycos foi lançado, incluindo muitos dos mesmos recursos que o WebCrawler, e construindo sobre eles. O Lycos classificou seus resultados com base na relevância e permitiu ao usuário ajustar várias configurações para obter resultados que se ajustassem melhor. O Lycos também era enorme - nesse ano, tinha mais de um milhão de sites arquivados e, em dois anos, alcançou 60 milhões.

O primeiro mecanismo de pesquisa seria o Archie com mais precisão. No entanto, a maioria das pessoas, quando falam sobre um mecanismo de busca, significa algo bem diferente do que Archie fez. Até os mecanismos de busca da WWW posteriores não atendem aos nossos critérios modernos até o advento do WebCrawler e Lycos, os primeiros mecanismos de busca verdadeiramente modernos.