MCC в Університеті Техасу в Остіні. Galaxy була створена як алфавітний перелік, що поєднує елементи інтерфейсу пошукача Gopher і протоколу telnet на додаток до рядку веб-пошуку.
Джеррі Янг і Девід Філо створили Yahoo в 1994 році. Проект розпочався з складання каталогу їх улюблених веб-сайтів. Єдине, що відрізняло цей перелік від інших, був коментар до кожного посилання URL. Через рік розробники отримали фінансування і створили корпорацію Yahoo. На даний момент Yahoo втрорих затребувана пошукова система після Google.
У той же рік коли в онлайн з'явився Yahoo, був створена программаWebCrawler. На той момент це була перша пошукова машина, яка індексувала весь текст веб-сайтів.
У 1994 році Lycos представив пошукову машину, яка пропонує поряд з результатами пошуку посилання на теми, пов'язані з пошуковим запитом. У 1996 році це вже була велика пошукова система, що індексує більше 60 мільйонів документів, найбільша на той момент. Як і багато інші пошукові системи, Lycos був розроблений в університетському середовищі доктором Майклом Молдін в Університеті Карнегі Меллона.
Пошуковий сервіс Infoseek був запущений в 1995 році. Він не запровадив нового в систему пошуку. На даний момент він належить компанії Уолта Діснея і працює на доменному імені Goтакже почала працювати в 1995 році. Ця пошукова машина першою запропонувала розширену систему пошуку і брала мовні запити на так званому «природною мовою» - наприклад, могла обробити запит «Як пройти до бібліотеки?», Замість «бібліотека». Система також пропонує можливість пошуку зображень, музики і відеофайлів.
Система Inktomy виникла в 1996 році в Університеті Берклі. У червні 1999 року Inktomy ввела пошук по каталогу на основі «методу індукції». На думку компанії, «індуктивний метод бере до уваги аналітичний досвід людини і застосовує його, аналізуючи посилання, частоту відвідувань та інші параметри, щоб визна?? лити, які сайти найбільш відвідувані і продуктивні ». У підсумку Yahoo набуло пошукову систему Inktomy в 2003 році.
Пошукова система AskJeeves була запущена в 1997 году.бил запущений так само в 1997 році. Він був запущений Сергієм Бріном і Ларі Пейджем як частина проекту Стенфордського Університету.
У 1998 почали роботу MSN-Search і Open Directory (DMOZ). База Open Directory, якщо вірити інформації на ee головній сторінці, «це найбільший і всеосяжний каталог ресурсів Мережі. Його дані використовують багато пошукові системи, у тому числі і Google.
Сучасна пошукова система складається з наступних компонентів: server (веб-сервер) - сервер пошукової машини, який здійснює взаємодію між користувачем і іншими компонентами системи. (павук) - програма написана за принципом браузера, призначена для скачування веб-сторінок. Браузер призначений для візуального використання сторінок, а павук працює з HTML кодом безпосередньо. («Мандрівний» павук) - програма, яка автоматично йде по всіх зовнішніх посиланнях сторінки. Її завдання - пошук невідомих (або змінених) документів і в розстановці пріоритетів, куди далі повинен йти Spider. (Індексатор) - програма-аналізатор скачали павуками веб-сторінок. Вона розбирає на частини завантажену сторінку і аналізує її елементи, такі як текст, службові html-теги, заголовки, особливості стилістики та структурні форми (база даних) - сховище для викачаних і оброблених сторінок - загальна база даних пошукової машіни.engine results engine (система видачі результатів ) - витягує результати пошуку з бази даних пошукової системи. Саме вона вирішує, які сторінки більш відповідають запиту користувача, і відсортовує їх у потрібному порядку. Модуль працює згідно заданим пошуковою системою алгоритмам ранжирування.
Як діє пошукова система?
Етап 1. Пошук нових сторінок
Всупереч помилці багатьох, пошукові системи видають інформацію нема про сторінках, що знаходяться в інтернеті, а про сторінки, що знаходяться в базі даних пошукової машини. Тобто, якщо сайт невідомий Яндексу або Goоgle, то і у видачі він не з'явиться.
Завдання пошукача на цьому етапі полягає в пошуку всіх можливих адрес сторінок в інтернеті. Виконує цю роботу так званий робот «павук». Інтернет це посилання, посилання і ще раз посилання і цей «павук» просто переходить по всіляких посиланнях, записуючи в свою базу адреси всіх знайдених сторінок.
Завдання робота створити адресний довідник по типу - Місто, Вулиця, Будинок, Квартира.
Етап 2. Індексація
Наступна програма пошукача займається додаванням інформації в базу. Вона подорожує по всім відомим адресами сайтів і сторінок, копіюючи їх вміст на склади пошукової системи.
Називається цей процес індексація ...