обзор мировых и национальных интернет-поисковиков
Крупнейшей поисковой системой мира уже несколько лет считается Google. По последним данным, его применяют 70% пользователей. Но так было не всегда, и даже сейчас в некоторых странах есть собственные лидеры.
Они были первыми
Самой первой поисковой системой в интернете стала Archie. Она была разработана для индексации FTP-архивов в 1990 году, когда Всемирная паутина (WorldWideWeb) еще только развивалась. Первыми же сервисами, которые осуществляли поиск именно по веб-страницам, принято считать Wandex и ALIWEB, созданные в 1993 году.
Ранние системы фактически представляли собой каталог, по которому осуществлялся поиск. Так, при запросе слова сервис выдавал не наиболее релевантные ссылки, а все страницы, его содержащие, без анализа и ранжирования.
Образцом систем, к которым мы привыкли, стал WebCrawler, запущенный в 1994 году. Это был первый полнотекстовый, то есть индексирующий ресурсы при помощи робота, поисковик.
В отличие от своих предшественников он выдавал результаты по любым ключевым словам на любой веб-странице.
Также в период с 1994 по 1995 год появилось множество поисковиков, в числе которых Excite, Infoseek, Inktomi, Northern Light и AltaVista. Именно в последнем из них была представлена поддержка естественного языка: пользователи могли напечатать фразу или вопрос и получить интеллектуальный ответ.
AltaVista долгое время оставалась одной из самых популярных и мощных систем. Однако в 2003 году она была приобретена компанией Yahoo! и с мая 2011-го перешла на поисковую технологию этого интернет-портала. А в 2013 году руководство Yahoo! приняло решение закрыть проект. Отметим, что AltaVista стала первым поисковиком, который поддерживал русский язык.
Если же говорить про оригинальные отечественные сервисы, то в конце 90-х список поисковых систем не ограничивался одним лишь «Яндексом». Еще до создания нынешнего лидера Рунета, в 1996 году, на рынок пришли «Апорт» и Rambler.
«Апорт» долгое время оставался на главных позициях, однако с начала нулевых начал терять свою популярность.
В августе 2011-го он и вовсе перешел на поисковую технологию «Яндекса» и сейчас представляет собой каталог товаров.
Судьба Rambler сложилось по-другому. Проект с момента запуска стал первым на российском рынке поисковых систем и оставался таковым вплоть до 2001 года. Кроме того, Ramblerстал пионером и в других областях: запустил рейтинг-классификатор (Rambler Top100), интернет-портал, первым среди отечественных интернет-компаний вышел на биржу.
Но в 2011 году Rambler заключил соглашение с «Яндексом» об использовании его поисковой системы и подключении к рекламной сети. Несмотря на утрату собственного поиска, Rambler все равно остается одним из самых популярных порталов Рунета.
Нашедшие свой путь
Потеснив «Апорт» и Rambler в 2001 году, «Яндекс» стал лидером поиска в России. Сейчас его главным конкурентом на нашем рынке является Google. Стоит отметить, что отечественная компания уверенно занимает первое место в рейтинге поисковых систем Рунета. Так, по данным LiveInternet, в первом квартале 2014 года его доля составила 53 процента.
С 2011 года «Яндекс» входит в пятерку лучших поисковых систем мира. Однако компания отдает приоритет русскоязычным пользователям, которых понимает буквально с полуслова.
В феврале текущего года разработчики обновили функцию «Умные подсказки». При работе над ними учитывалась популярность тех или иных классов запросов. Согласно исследованию «Яндекса», пользователи часто спрашивают, куда ставить ударение в сложных словах. Теперь при вводе запроса можно узнать, как правильно произносить «мусоропровод» или «жалюзи».
Тогда же «Яндекс» научился распознавать напевы. Разработчики добавили новую функцию, которая умеет находить песни по имитирующим музыкальный мотив или их текст фразам. Теперь «Яндекс» сможет отыскать музыку из фильма «Звездные войны» по запросу «пам пам пам пам пабам пам пабам слушать».
Ко всему прочему, российская компания продолжает тестирование проекта «Острова», благодаря которому пользователь сможет эффективно взаимодействовать с целевыми ресурсами сети Интернет посредством интерактивных блоков.
Южная Корея также продемонстрировала свою самодостаточность на местном интернет-рынке. Там лидирующее положение в списке поисковых систем занимает Naver.com – ею пользуется 70% жителей. Сервис применяет три разных формата: пользовательский (вопрос-ответ), партнерский (поиск по базам данных) и обычный веб-поиск на основе Google.
В 2002 году Naver стала первой в истории поисковой системой, в которой был создан портал знаний Web 2.0, где пользователи могли публиковать свои вопросы и ответы. По этой модели в 2005 году Yahoo! создал портал Yahoo! Answers.
При осуществлении поиска Naver исключает индексирование страниц с низкокачественным контентом, спамом и рекламой. Система старается предоставлять такие результаты выдачи, которые содержат качественный контент.
Еще одной страной, где лидирующее положение в интернет-поиске занимает вовсе не Google, является Чехия. В 1996 году там была запущена поисковая система Seznam.cz. Несмотря на то, что ее доля каждый год снижается, она все равно остается лидером.
Seznam активно развивается, внедряет новые сервисы и технологии. Поисковик индексирует чешские и словацкие сайты, а для иноязычных ресурсов использует Bing от Microsoft.
Самостоятельность мирового масштаба
Наибольших успехов как в целом в интернете, так и поисковом сегменте в частности достиг Китай. Второе место в списке поисковых систем мира уже несколько лет занимает китайский Baidu.com. Несмотря на принадлежность к домену .comон все же является локальным поисковиком, который не представлен за пределами КНР. Исключение – Япония, где запущена версия ресурса на местном языке. Отметим, что англоязычные запросы в Baidu, как и в случае с чешским Seznam, ранжирует поисковый алгоритм Bing.
Поисковик является главным конкурентом Google за счет числа интернет-пользователей Китая, превышающего 600 млн человек. По последним данным, с Baidu работает 75% пользователей Сети КНР. Он способен находить новости, карты, изображения и видео. Кроме того, в конце прошлого года китайский интернет-гигант заключил контракт с компаниями SonyBMG, WarnerMusicGroup и UniversalMusicGroup.
В рамках договора пользователи поисковика смогут бесплатно слушать песни популярных исполнителей со всего мира.
Еще один игрок на рынке поисковых систем КНР – so.com, известный под именем «поиск 360». Он был запущен в 2012 году, но за прошедшие два года набрал популярность. Сейчас его доля на китайском рынке превышает 15 процентов.
Основатель поисковика – компания Qihoo 360, которая обеспечила себе славу за счет пиратства. Программы «360» позволяли устанавливать обновления ОС Windows, обходя проверку подлинности, и делали компьютер относительно безопасным, заменяя InternetExplorer6 на свой Safe Browser. А домашней страницей по умолчанию становился поисковик So.com.
Третьим по популярности поисковиком в Китае стал Sogou.com, которым владеет крупный интернет-портал Sohu. Поисковик быстро стал популярным благодаря продуктам Sohu, в числе которых – продвинутая система ввода иероглифов Sogou Input и безопасные браузеры на основе Chrome и InternetExplorer.Недавно в СМИ появилась информация о покупке Sogou компанией Qihoo.
Разработчики из КНР решили не останавливаться на достигнутом и в марте 2014 года запустили поисковую систему Chinaso.com, которая должна стать источником достоверной информации государственного значения.
Ко всему прочему, в апреле интернет-ретейлер Alibaba и мобильный браузер UCBrowser объявили о запуске совместной поисковой системы на основе существующего проекта Shenma. Разработкой будут заниматься бывшие сотрудники китайского Baidu и Google. Система предназначена для мобильных устройств. Эксперты полагают, что в случае успеха новый поисковик сможет стать главным конкурентом Baidu.
Количество китайских поисковых систем давно перевалило за двадцать. Кроме того, в КНР присутствуют международные Yahoo! и Bing, но их работа подвергается жесткой цензуре. Из-за несогласия руководства Google с государственной политикой в сфере интернета американский поисковик и вовсе покинул эту страну. Китайским пользователям доступна гонконгская версия Google.com.hk, которая работает с ограничениями.
Только кошерные результаты
Поисковые результаты могут цензурироваться не только по политическим мотивам, но и по религиозным. Примером такого рода стали исламский поисковик ImHalal и иудейский Koogle, которые, однако, не смогли прижиться на рынке.
В 2009 году в интернете появился первый «кошерный» поисковик Koogle, название которого является отсылкой к Google и блюду еврейской кухни – кугель. Система отвечала принципам Галахи, то есть искала только то, что, по мнению раввинов, удовлетворяло религиозным требованиям. Поисковик не давал пользователю найти откровенные фотографии, развлекательные сайты, рецепты из свинины, а также ссылки на запрещенные у иудеев предметы домашнего обихода. Кроме того, Koogle не функционировал в шабат, то есть в субботу, когда ортодоксальные евреи освобождены от работы.
Схожим образом осуществлял свою деятельность первый исламский поисковик ImHalal, тоже запущенный в 2009 году. Система содержала подзаголовок I Search Halal, I am Halal (Я ищу халяльное, я сам халяльный), который поясняет его название.
ImHalal отказывался выдавать результаты, которые у мусульман считаются харамными, то есть запретными. Например, введя запрос «pig» («свинья»), пользователь получал предупреждение.
Католики, православные и буддисты также запустили свои поисковые системы, однако они работают на основе Google. Результаты не фильтруются, как в случае исламским и иудейским сервисом, но поиск осуществляется только по сайтам христианской или буддистской тематики.
Не оставляя следов
Пока власти Китая и конфессиональные поисковые системы пытаются защитить пользователя от контента, поисковик DuckDuckGo обеспечивает безопасность персональным данным самого пользователя.
DuckDuckGo начал работу еще в 2008 году, но стал популярен лишь летом 2013 года, когда в СМИ были опубликованы материалы бывшего сотрудника Агентства национальной безопасности США (АНБ) Эдварда Сноудена о слежке американскими спецслужбами за интернет-пользователями.
В отличие от таких поисковиков, как Google или Yahoo!, сервис не собирает информацию о своих пользователях и не хранит историю поисковых запросов.
В политике конфиденциальности прописан отказ от любой записи и анализа таких данных. Также DuckDuckGo не использует так называемый «пузырь фильтров».
Хорошо знакомое старое
Yahoo!, доля которого в мире сейчас составляет примерно 6%, был запущен в 1995 году. До появления Google этот поисковой сервис являлся одним из лучших. Сейчас, несмотря на снижение популярности, Yahoo! входит в пятерку самых посещаемых интернет-ресурсов в мире. Также баллов компании добавляют принадлежащие ей сервисы Tumblr и Flickr.
Отметим, что в Японии Yahoo! является лидером, его доля равна 53 процентам. Это не только главный поисковик, но и самый посещаемый сайт Японии.
В апреле текущего года в СМИ появилась информация, что Yahoo! может стать основной поисковой системой для устройств компании Apple. Сейчас это место занимает Google, но Apple постепенно отказывается от его сервисов. Например, карты этого интернет-гиганта были заменены на собственное картографическое приложение.
А голосовой помощник Siri уже осуществляет поиск информации с помощью Bing от Microsoft.
Отметим, что до Bingу компании из Редмонда уже были запуски собственных поисковых систем – MSN Search, Windows Live Search и Live Search. Они не нашли особого отклика у пользователей. Но, несмотря на неудачи прошлых лет, Microsoftпродолжила попытки. И запущенный в 2009 году Bing наконец начал оправдывать ожидания и набирать популярность. Его успех связывают с массивом статистических данных, который накопился у Microsoft за годы существования браузера Internet Explorer. На основе этой информации разработчикам удалось добиться действительно релевантной выдачи результатов поиска.
В отличие от других сервисов, Bing хорошо работает с сайтами, которые используют большое количество flash-элементов. А у Google и «Яндекс» эксперты не раз отмечали проблемы ранжирования интернет-страниц, перегруженных flash.
Стоит отметить, что третье место на российском рынке занимает также отечественная поисковая система – «Поиск@Mail.
Ru» с долей в 9 процентов. Большую часть своей истории холдинг Mail.Ruиспользовал системы сторонних компаний: Google и «Яндекс». Однако 1 июля 2013 года было принято решение о переходе на собственные поисковые технологии.
На вкус и стук
Помимо разнообразных простых поисковиков в интернете также существуют узконаправленные системы.
Например, Koders.com представляет собой поисковик для программистов. Используя несложный синтаксис, можно производить поиск по названиям классов, методов, файлов и интерфейсов. Запрос можно ограничивать одним из типов лицензии, а также языком программирования. В результатах поиска можно увидеть небольшой фрагмент программного кода, где встречается искомое слово, сайт, на котором он размещен, и язык программирования.
При запросе об интересующем событии Addictomatic.com предоставит обзор популярнейших сервисов с упоминанием искомой информации на них. Поисковик, по замыслу разработчиков, является заменой газеты. Среди сайтов, по которым производится поиск и сбор информации, представлены: новости live.
com, сообщения из Twitter, видео с YouTube, Google Blogs, картинки с Flickr и другие. Похожим образом работает Wikio.Com, который осуществляет поиск по интернет-изданиям и блогам.
С помощью системы Songtapper.com можно «настучать» ритм, используя клавишу «Пробел», после чего система выдаст несколько подходящих результатов, которые можно прослушать в формате Midi. В базе данных Songtapper более 70 тыс. мелодий.
Ко всему прочему, существуют сервисы, которые ищут исключительно PDF-файлы (PDFgive.com) или аудио (FindSounds.com), предметы, используемые в популярных кинофильмах (ThingsYouSawInAMovie.com) и даже любимую газировку (SodaFinder.com).
Словом, подводя итоги, можно сказать, что в интернете действительно найдется все. Главное – выбрать правильный поисковик.
***
Пузырь фильтров (англ. filterbubble) – алгоритм, показывающий пользователю только особым образом отобранную информацию. Отбор осуществляется путем анализа поисковой истории человека, а также посещенных им интернет-сайтов.
Как появились первые поисковые системы интернета — Интернет провайдер | Лобня Долгопрудный Химки Дмитров
В настоящее время трудно представить свою жизнь без поисковых систем. Абсолютно каждый пользователь сети интернет ежедневно ищет информацию в таких поисковиках, как Яндекс и Google. Причем поисковые системы сейчас стали настолько «умны», что могут понять запрос буквально с полуслова. Но так было не всегда. В конце восьмидесятых годов, когда интернет еще не был развит столь повсеместно, как таковых поисковиков не было в принципе. Пользователи сохраняли ссылки на полезные сайты в «закладках» или просто собирали их в отдельные текстовые файлы. История возникновения первых поисковых систем началась в девяностые годы и прошла огромный путь. Рассмотрим подробнее этапы зарождения и развития поисковых систем интернета.
1990. Archie.
Первой в мире поисковой системой считается появившийся в 1990 году Archie — компьютерная программа, осуществлявшая поиск файлов на анонимных FTP-серверах по протоколу FTP.
1991. Veronica. Jughead
В 1991 году студент Миннесотского университета Марк Маккэхилл создал новый сетевой протокол Gopher. Структура протокола была очень схожа со структурой каталогов в файловой системе (вложенные друг в друга каталоги и файлы). Это позволяло пользователям быстро искать необходимую информацию.
На базе Gopher были созданы две новые поисковые системы — Veronica и Jughead. Как и Archie, они искали имена файлов и заголовки, хранящиеся в индексных системах Gopher.
Протокол Gopher активно использовался университетами и правительственными учреждениями США, вплоть до конца 90-х годов. Впоследствии был практически полностью вытеснен протоколом HTTP.
1993. W3catalog.
В 1993 году разработчиком из Женевского университета Оскаром Нирштрассом была представлена поисковая система W3catalog. Она представляла собой ряд сценариев на Perl, которые копировали веб-страницы и форматировали их в стандартный формат. При этом W3catalog использовал только составленные вручную списки веб-ресурсов.
1993. Wandex.
В 1993 году разработчик из Массачусетского института Мэтью Грэй создает Wandex — первую в мире поисковую систему, способную индексировать сайты и выдавать результаты поиска по запросу.
Однако, алгоритмы Wandex были еще очень далеки от совершенства. Сканировались только заголовки сайтов, а не все содержимое. При запросе выдавались не релевантные ссылки, а все подряд, без какого-либо анализа и ранжирования.
1993. Aliweb.
В том же 1993 году появилась поисковая система Aliweb. Поиск с помощью Aliweb также осуществлялся по ресурсам Всемирной сети. Однако владельцы сайтов должны были сами добавлять их в индекс Aliweb, чтобы эти сайты появлялись в поиске. Для многих это было очень неудобно, поэтому данная поисковая система так и не получила дальнейшее распространение.
1994. Excite.
В 1994 году студентами Стэнфордского университета была представлена поисковая система Excite. Программа использовала статистический анализ слов в тексте для упрощения поиска в интернете. В дальнейшем Excite стал включать в себя не только поисковую систему, но также и веб-почту, обмен мгновенными сообщениями, информационные ресурсы.
В 1997 году Excite был отмечен как второй по популярности сайт в интернете.
1994. WebCrawler.
21 апреля 1994 года студентом Вашингтонского университета Брайаном Пинкертоном была запущена WebCrawler — первая в мире полнотекстовая поисковая система. Она осуществляла поиск по всему содержимому веб-страниц, а не только по их заголовкам. С тех пор это стало стандартом для большинства поисковых систем. Кроме того, WebCrawler стал первым поисковиком, получившим широкое распространение. Примечательно, что данная поисковая система работает до сих пор.
1994. Yahoo.
В 1994 году аспирантами Стэнфордского университета Дэвидом Фило и Джерри Янгом был создан сайт «Путеводитель Джерри по Всемирной паутине». Данный сайт представлял собой каталог других веб-сайтов. Изначально «Путеводитель» был предназначен для студентов университета. Но уже к осени 1994 года сайт насчитывал более 2 тысяч ссылок, а его аудитория расширилась далеко за пределы университета.
Фило и Янг продолжают активно работать над своим проектом, выбирают для него краткое запоминающееся название Yahoo! И уже к концу 1994 года Yahoo! становится домашней страницей веб-браузера Netscape. Постепенно Yahoo! превращается из обычного каталога в информационный портал, на котором доступны новости, афиша, погода, котировки и др.
На сегодняшний день Yahoo! входит в ТОП5 поисковых систем во всем мире, преимущественно в США.
1995. Altavista.
В 1995 году была запущена поисковая система Altavista. На момент своего появления Altavista была самой быстрой из всех поисковых систем — она работала на мощнейшем на то время сервере DEC Alpha. Кроме того, она принимала запросы на так называемом «естественном языке». Достаточно было ввести в поисковую строку любую фразу или вопрос, чтобы получить ответ. Еще одним преимуществом Altavista стало обеспечение поддержки множества языков, в том числе китайского и японского.
А в 1996 году Altavista запустила морфологическое расширение для русского языка.
В феврале 1996 года была представлена поисковая система Апорт. На тот момент Апорт осуществлял поиск только по сайту russia.agama.com. По всему интернету поисковик начал искать лишь с конца 1997 года. Вплоть до середины 2000-х годов Апорт был одним из лидеров поиска в Рунете. На пике популярности система обладала довольно расширенными возможностями — на главной странице присутствовал новостной блок, погода, телепрограмма, курс валют. Также Апорт давал возможность поиска организаций по заданному адресу. Стоит отметить тот факт, что Апорт стал первым поисковиком Рунета, кто применил технологию ранжирования Page Rank — базовую технологию Google.
Апорт как поисковая система просуществовала до 2012 года. После она была перепрофилирована в прайс-агрегатор.
1996. Rambler.
8 октября 1996 года на свет появляется еще одна поисковая система — Rambler.
Буквально за год Rambler становится лидером среди российских поисковых систем, оставляя позади себя первопроходцев поиска Рунета — Altavista и Апорт.
В 1997 году появился счетчик Rambler Top100 — первый рейтинг-классификатор Рунета. Счетчик позволял определять посещаемость веб-сайтов и популярность среди пользователей интернета, а также оценивать возможный трафик для рекламодателей.
В 1999 году Rambler получил награду как лучший российский сайт (по версии Международного Компьютерного Клуба).
Начиная с 2001 года Rambler начал сдавать свои позиции, уступив место лидера Яндексу.
А в 2011 году Rambler полностью отказывается от собственной поисковой машины и устанавливает на своем портале поиск от Яндекс. На сегодняшний день Rambler является медийно-сервисным интернет-порталом, включающим в себя новостной агрегатор, почтовую службу, биржевые сводки и другие информационно-развлекательные сервисы.
1997. Yandex.
23 сентября 1997 года российские программисты и предприниматели Аркадий Волож и Илья Сегалович представили на выставке Softool новую поисковую систему Yandex.Ru. Стоит отметить тот факт, что первая рабочая версия поискового приложения под названием «Яndex» появилась еще в 1993 году. На тот момент приложение представляло собой инструмент для поиска информации в рамках одного сайта.
Несмотря на то, что Яндекс не был первой поисковой системой Рунета, он стал быстро набирать аудиторию. К середине 1999 года Яндекс уже входил в ТОП7 популярнейших сайтов Рунета. В 2001 году Яндекс становится лидером среди русскоязычных сайтов, обогнав Rambler.
Успех был обусловлен запуском обновления поисковой системы: улучшение поиска ссылок, введение «взвешенного индекса цитирования», повышение точности и скорости поиска информации. В этом же году появляется система контекстной рекламы Яндекс.Директ, впоследствии ставшая основным источником доходов компании.На сегодняшний день Яндекс является крупнейшим поисковым сервисом Рунета и входит в ТОП10 популярнейших поисковиков мира.
1997. Google.
В 1997 году в западных странах наступает переломный момент в развитии поисковых систем — двое студентов Стэнфордского университета Сергей Брин и Ларри Пейдж основывают Google. На самом деле разработка проекта велась еще с 1996 года. Брин и Пейдж считали, что поисковые системы должны ранжировать и анализировать сайты в зависимости от того, сколько раз слова, используемые в поисковых запросах, появлялись на веб-страницах. Так был разработан алгоритм анализа ссылок Page Rank.
Page Rank оказался отличным способом выявления полезных веб-ресурсов, и пользователи интернета довольно быстро поняли, что поиск в Google более эффективен, чем поиск с помощью других поисковых систем. Аудитория Google росла стремительными темпами. Уже к 2002 году Google занял место лидера среди поисковых систем по всему миру. На сегодняшний день Google является самым посещаемым сайтом в мире. Ежедневно он обрабатывает более 7 млрд. запросов в день, и это количество продолжает неуклонно расти.
1998. MSN Search. Bing.
Осенью 1998 года международная корпорация Microsoft представила поисковую систему MSN Search, которая использовала базу данных проиндексированных страниц от Inktomi. Система включала в себя поисковую машину, индекс и веб-сканер.
8 марта 2006 года была представлена демо-версия сервиса Windows Live Search.
В сентябре 2006 года Windows Live Search полностью сменил уже устаревшую на тот момент поисковую систему MSN Search. Новый поисковый механизм позволял пользователям интернета искать информацию среди данных конкретного типа: по веб-страницам, новостям, музыке, изображениям.
3 июня 2009 года Live Search был официально заменен на Bing. Bing является поисковой системой по умолчанию в браузере Microsoft Edge. На сегодняшний день Bing занимает вторую строчку в списке мировых поисковых систем.
1998. Mail.
В 1998 году группа российских программистов, вдохновившись примером компании Yahoo!, выложила на тестовый сайт свое программное обеспечение по поддержке почтового сервиса. Поток пользователей, желающих получить красивый электронный адрес с окончанием @mail.ru, стремительно рос. Так появился информационно-развлекательный интернет-портал Mail.ru. Функция поиска там тоже присутствовала. Но стоит отметить, что долгое время поиск на Mail осуществлялся сторонними движками: в 2004-2006 и 2010-2013 годы использовался поиск Google, в 2007-2009 годы — поиск Яндекс.
Лишь с июля 2013 года Mail.ru стала использовать собственные поисковые технологии. На настоящее время Mail.поиск входит в десятку самых популярных поисковых систем Рунета.
2000. Baidu.
В 2000 году два предпринимателя из Китая Робин Ли и Эрик Сю основали поисковую систему Baidu. На сегодняшний день Baidu является лидером среди поисковых систем Китая. Количество запросов, ежедневно обрабатываемых данным поисковиком, превышает 6 млрд, что неудивительно для самой густонаселенной страны мира. Примечательно, что в Китае Google используют лишь 4 процента пользователей интернета.
Популярность за пределами Китая поисковая система Baidu так и не получила. Связано это с несколькими факторами: Baidu индексирует лишь сайты на китайском и английском языках; предпочтение в ранжировании отдается сайтам, расположенным на китайских или гонконгских серверах; результаты поиска сильно цензурируются.
2008.
DuckDuckGo.
25 сентября 2008 года предпринимателем Гэбриелом Вайнбергом была представлена поисковая система DuckDuckGo. Ее ключевой особенностью является конфиденциальность пользовательской информации. Система не хранит IP-адреса, не ведет логи и использует cookie только по мере необходимости.
За 30 лет своего развития и совершенствования поисковые системы прошли огромнейший путь. На сегодняшний день в мире существует более 20 действующих поисковых систем. Каждая из них обладает определенными достоинствами и недостатками. Нет однозначного ответа на вопрос «какой поисковик лучше». Одному пользователю удобнее искать в Google, другой предпочтет использовать Bing. В заключение хотим отметить, что поисковые алгоритмы постоянно совершенствуются, что делает поиск информации в интернете еще более быстрым и эффективным.
Мадина А.
Aliweb: первая в мире поисковая система в Интернете
Август 2014 г.
Я предполагаю, что, как и большинство пользователей Интернета, вы будете использовать поисковую систему, возможно, Google. Знаете ли вы, что Nexor изобрел первую поисковую систему?
Aliweb
Еще в 1992 году Мартин Костер, разработчик программного обеспечения в Nexor, создал программное обеспечение для управления и индексации появляющейся сети. Его работа под названием Aliweb признана первой в мире поисковой системой. (Би-би-си неправильно цитирует WebCrawler, но Aliweb был анонсирован в 1993 до WebCrawler и представлен на первой конференции World Wide Web в 1994 году).
Вот документация того времени:
Всемирная паутина становится слишком большой, чтобы легко находить нужные вещи. Невозможно уследить за всеми услугами, которые предоставляют другие люди; они часто меняются, и их просто слишком много.
Поэтому ALIWEB предлагает людям просто отслеживать услуги, которые они предоставляют, таким образом, чтобы автоматические программы могли просто подобрать их описания и объединить их в доступную для поиска базу данных.
Поскольку автоматические программы не могут понимать естественный язык, эти описания должны быть написаны в кратком и стандартном формате.
Таким образом, ALIWEB работает следующим образом:
- Люди пишут описания своих услуг в стандартном формате в файл в Интернете вручную или с помощью автоматических инструментов.
- Затем они сообщают ALIWEB об этом файле.
- ALIWEB регулярно извлекает все эти файлы и объединяет их в доступную для поиска базу данных.
- Любой может прийти и выполнить поиск в этой базе данных из Интернета.
Поскольку база данных может обновляться регулярно (в настоящее время один раз в день), данные очень актуальны. Поскольку ALIWEB выполняет всю работу по поиску и объединению этих файлов, людям нужно беспокоиться только об описаниях своих собственных услуг; так что информация, скорее всего, будет верной и информативной. А так как нужно собрать только эти небольшие файлы описания, накладные расходы минимальны.
По мере того, как начали появляться другие поисковые службы, использующие технику поиска (изобретенную Костером из Nexor), Aliweb стала одной из многих таких поисковых систем. Их индивидуальный охват был ограничен, и чтобы найти то, что вы хотели, вам действительно нужно было выбрать правильную поисковую систему.
CUSI
Чтобы решить эту проблему, Костер разработал CUSI (настраиваемый унифицированный интерфейс поиска), который позволял отправлять один запрос в несколько поисковых систем. Интерфейс по-прежнему виден на WayBack Machine.
…затем появился Google…
NB: www.aliweb.com — коммерческая компания, не имеющая ничего общего с Nexor или оригинальным исследованием поисковой системы Aliweb.
Биография автора — Колин Роббинс
Колин Роббинс — управляющий консультант по безопасности Nexor. Он является членом IISP, а также сертифицированным NCSC советником по безопасности и информационным рискам (ведущий CCP) и аудитором безопасности (старший CCP). У него есть специальный технический опыт в области безопасного обмена информацией и систем идентификации, и он считается соавтором LDAP. Он также проявляет большой интерес к управлению безопасностью, поскольку является квалифицированным аудитором ISO 27001.
- Профиль LinkedIn
- Просмотреть все сообщения Колина
8 поисковых систем, которые работали до появления Google
Хотя Интернет стал общедоступным в 1990 году, первая поисковая система появилась только в 1993 году. До этого все веб-сайты отслеживались и индексировались людьми вручную.
И хотя теперь мы признаем Google королем веб-поиска, Google даже не участвовал в игре до 1998 года. За этот пятилетний перерыв у ряда других поисковых систем был шанс на славу, и большинство из них потерпели неудачу. . Возможно, вы даже помните некоторые из них.
Вот некоторые из самых известных поисковых систем до Google.
WebCrawler начал свою жизнь в январе 1994 года. Он был разработан Брайаном Пинкертоном из Вашингтонского университета и изначально был настольным приложением. Только в апреле того же года веб-версия была запущена.
На момент запуска в его базе данных было 4000 веб-сайтов, и движку потребовалось всего шесть месяцев, чтобы найти свой миллионный запрос.
Из всех существующих поисковых систем WebCrawler является старейшей поисковой системой, которая все еще активна. Сегодня он объединяет результаты Google и Yahoo; она отказалась от собственной базы данных в 2001 г.
Конечно, это уже не жизнеспособная альтернатива Google; есть варианты получше.
Lycos — еще одна поисковая система старой школы, у которой все еще есть работающий сайт.
Он родился в Университете Карнеги-Меллона в мае 1994 года, когда создатель Майкл Лорен Молдин превратил свой университетский проект в полноценную компанию.
Венчурные капиталисты быстро увидели преимущества; сайт был запущен с финансированием более чем на 2 миллиона долларов. Это капля в море по сравнению с оценками технологических компаний, которые мы видим сегодня, но тогда это была феноменальная сумма денег.
Как и WebCrawler, Lycos продолжает развиваться. Ему принадлежат несколько других ностальгических интернет-брендов, в том числе Angelfire, Tripod и Gamesville.
3. AltaVista
AltaVista заработала в декабре 1995 года и быстро стала одной из самых популярных поисковых систем 1990-х годов. Его популярность была связана с дизайном поисковой системы; это была первая полнотекстовая база данных с возможностью поиска в Интернете, которая имела доступный и простой в использовании интерфейс.
В день запуска сайт посетили более 300 000 человек. В течение двух лет ежедневный трафик достигал 80 миллионов человек.
Известный своим простым интерфейсом (возможно, Google делал заметки!), он был 11-м по посещаемости сайтом в Интернете как в 1998, так и в 2000 году. Действительно, на рубеже тысячелетий 17 процентов всех пользователей сети посещал сайт каждую неделю. Для сравнения, у Google было всего семь процентов.
В 2003 году Overture купила сайт за 140 миллионов долларов, а позже в том же году Yahoo приобрела Overture. В 2013 году сайт окончательно отключился.
Excite — еще одна из старейших поисковых систем. Он был основан в 1994, а сайт официально запустится в следующем году. Создателями стали шесть студентов Стэнфордского университета — Грэм Спенсер, Джо Краус, Марк ВанХарен, Райан Макинтайр, Бен Латч и Мартин Рейнфрид.
Excite была одной из первых поисковых систем, которая предоставляла больше, чем просто поиск. Когда сайт был запущен в 1995 году, он также предлагал порталы новостей и погоды, службу электронной почты, службу мгновенных сообщений, биржевые котировки и полностью настраиваемую домашнюю страницу.
В 1996 году Excite приобрела WebCrawler и подписала эксклюзивные соглашения со многими крупнейшими современными технологическими компаниями, включая Microsoft и Apple.
В 1999 году Excite предложили весь бизнес Google всего за 750 000 долларов, после того как Сергей Брин и Ларри Пейдж решили, что это отнимает у них слишком много времени. Тогдашний генеральный директор Джордж Белл решил, что это слишком дорого, и разорвал сделку. Сегодня стоимость Google составляет 900 миллиардов долларов, что делает решение Excite одной из самых дорогостоящих бизнес-ошибок всех времен.
Yahoo была основана в 1994 году, а ее сайт был запущен в 1995 году. Это самая известная из всех поисковых систем до Google.
Несмотря на несколько трудных периодов, в том числе многократные выкупы, низкое количество посетителей и сомнительные решения по продукту, он по-прежнему является технологическим гигантом.
По состоянию на 2021 год некоторые из его других сервисов включают Yahoo News, Yahoo Mail, Yahoo Finance и Yahoo Sports, каждый из которых набирает десятки миллионов просмотров в день. Как и у Google, у Yahoo также есть список неудачных продуктов в своем каталоге, включая Yahoo Games, Yahoo Music, Yahoo Messenger и Yahoo Directory.
По данным Alexa, по состоянию на 2021 год это по-прежнему 11-е место в мире по посещаемости9.0007
Dogpile запущен в ноябре 1996 года. У него ужасная торговая марка, но, возможно, именно поэтому она и запомнилась.
Создатель, Аарон Флин, был разочарован отсутствием согласованности в результатах от других поставщиков, поэтому приступил к созданию механизма метапоиска. При запуске он извлекал запросы из Yahoo, Lycos, Excite, WebCrawler, Infoseek, AltaVista, HotBot, WhatUseek и World Wide Web Worm. У него также была возможность поиска в Usenet, что делало его одним из самых полных поисковых инструментов в Интернете в то время. По крайней мере, это помогло вам найти что-то новое для чтения.
Сегодня Dogpile объединяет результаты Google, Yahoo и российской поисковой системы Yandex (которая также старше Google!).
Сервис Ask Jeeves был запущен в 1996 году и сразу же завоевал популярность благодаря своему уникальному формату вопросов и ответов. Идея состояла в том, чтобы создать поисковую систему, которая позволяла бы пользователям получать ответы, используя естественный язык, а также поиск по ключевым словам. Хотя сейчас многие из нас принимают это как должное благодаря Google, в то время это было революционно.