В период становления Интернет, количество пользователей было небольшим, а количество доступной информации очень маленьким. В основном доступ к глобальной сети Интернет имели работники университетов, лабораторий и немногочисленных фирм, в основном Сеть применялась в научных целях. В то время задача по поиску информации в Интернете была не актуальной, как сейчас.
Первопроходцами по организации доступа к нужно информации и контенту были каталоги сайтов, ссылки размещались на них согласно тематическим разделам. Самым первым таким большим интернет — проектом был сайт Yahoo, он открылся в апреле 1994 года. Поисковик информации в каталоге, был добавлен после того, когда количество сайтов стало неимоверно большим. Поисковик отдаленно напоминал нынешнюю поисковую систему. При этом он был ограничен границами портала и дальше не видел ничего.
Были еще каталоги ссылок. Такие каталоги часто применялись раньше, но при этом в основном утратили свою большую популярность в наше время. Произошло это из – за того, что каталоги, даже современные, не способны содержать в себе огромное количество требуемой информации, в них находится лишь доля всего имеющегося в Интернете. Сейчас самым большим каталогом является DMOZ (или Open Directory Project), он состоит из, более чем, из 5 миллионов ресурсов, а база поисковой системы Google включает в себя больше 8 миллиардов документов.
Самым первым настоящим поисковым ресурсом стал проект WebCrawler, он появивился в 1994 году.
В 1995 году образовались поисковики Lycos и AltaVista. AltaVista раньше постоянно была лидером среди прочих поисковых систем.
В 1997 году Сергей Брин и Ларри Пейдж образовали сайт Google в исследовательском проекте в Стэнфордском университете. Сейчас Google самая развитая и популярная поисковая система во всем мире.
23 сентября 1997 года была запущена поисковая система Yandex, в то время она являлась наиболее популярной в русскоязычной части Интернет.
Сейчас есть три главных международных поисковых систем – Google, Yahoo и MSN Search.Все три имеют свои базы и алгоритмы поисковых задач. В основном другие поисковики (а их сейчас очень много) применяют базы одного из этих трех гигантов. Поисковая система AOL (search.aol.com) и Mail применяют базу Google, а AltaVista, Lycos и некоторые другие – базу Yahoo.
На территории России и сопредельных государств главной поисковой системой стал Яндекс, после него идут Google.ru и Rambler,реж применяется Мail.