История развития поисковых систем | sirBlond blog
Период без поисковиков
На первоначальной стадии развития Интернета пользователи были привилегированным меньшинством и объем доступной информации относительно небольшой. В тот период доступ к ней имели, в основном, работники различных крупных учебных заведений и лабораторий, и полученные данные использовались в научных целях. В то время использование Сети не имело такой актуальности, как сейчас.
В 1990 году британский ученный Тим Бернерс-Ли (который также является изобретателем URI, URL, HTTP, World Wide Web) создал сайт info.cern.ch, который является первым в мире доступным каталогом интернет-сайтов. С этого момента Интернет начал набирать популярность не только среди научных кругов, но и среди простых обладателей персональных компьютеров.
Таким образом, первым способом облегчения доступа к информационным ресурсам в Интернете стало формирование каталогов сайтов. Ссылки на ресурсы в них были сгруппированы по тематике.
Первым проектом такого рода принято считать Yahoo, открытый
На ранних этапах развития сети интернет каталоги ссылок использовались очень активно, но постепенно утрачивали свою популярность. Причина проста: даже при наличии множества ресурсов в современных каталогах, они все равно показывают только малую часть имеющейся в сети Интернет информации. К примеру, самым большим каталогом сети является — DMOZ (Open Directory Project). Он содержит информацию о чуть более пяти миллионах ресурсов, что несоизмеримо с поисковой базой Google, содержащей более восьми миллиардов документов.
Самым крупным русскоязычным каталогом является Яндекс-каталог. Он содержит информацию о чуть более ста четырёх тысячах ресурсов.
Хронология развития поисковых систем
1945 год – американский инженер Ванневар Буш опубликовал записи идеи, которая привела в дальнейшем к изобретению гипертекста, и рассуждение о необходимости разработки системы быстрого извлечения данных из таким образом хранимой информации (эквивалент сегодняшних поисковых систем). Введённое им понятие устройства-расширителя памяти содержало оригинальные идеи, которые, в конце концов, воплотились в Интернете.
1960-е — Джерард Сэлтон и его группа в Корнелльском университете разработали «Остроумную систему извлечения информации» (SMART information retrieval system). SMART — аббревиатура от Salton’s Magic Automatic Retriever of Text, то есть «Волшебный автоматический извлекатель текста Сэлтона». Джерард Сэлтон считается отцом современной поисковой технологии.
1987-1989 – разработана Archie — поисковая система для индексации FTP архивов. Archie представлял из себя сценарий, автоматизирующий внедрение в листинги на ftp-серверах, которые затем переносились в локальные файлы, а уже потом в локальных файлах осуществлялся быстрый поиск необходимой информации. Поиск основывался на стандартной grep-команде Unix, а доступ пользователя к данным осуществлялся на основе telnet.
В следующей версии данные были разбиты на отдельные базы, одна из которых содержала только текстовые названия файлов; а другая — записи со ссылками на иерархические директории тысячи хостов; и еще одна, соединяющая первые две. Эта версия Archie была эффективней предыдущей, так как поиск производился только по именам файлов, исключая множество существующих ранее повторов.
Поисковая система становилась всё популярнее, и разработчики задумались, как ускорить её работу. Упомянутая выше база данных была заменена на другую, основанную на теории сжатого дерева. Новая версия, по существу, создала полнотекстную базу данных вместо списка имен файлов и была значительно быстрее, чем раньше. В дополнение, второстепенные изменения позволили системе Archie индексировать web-страницы. К сожалению, по различным причинам, работа над Archie вскоре прекратилась.
В 1993 году была создана первая в мире поисковая система для Всемирной сети Wandex. В её основу был заложен World Wide Web Wanderer бот, разработанный Метью Греем из Массачусетского технологического института.
1993 год – Мартин Костер создаёт Aliweb – одну из первых поисковых систем по World Wide Web. Владельцы сайтов должны были сами их добавлять в индекс Aliweb, чтобы они появлялись в поиске. Поскольку слишком мало вебмастеров это делали, Aliweb не стал популярным
20 апреля 1994 г. – Брайан Пинкертон из университета Вашингтон выпустил WebCrawler — первого бота, который индексировал страницы полностью. Основным отличием поисковой системы от своих предшественников является предоставление возможности пользователям осуществлять поиск по любым ключевым словам на любой веб-странице. Сегодня эта технология является стандартом поиска любой поисковой системы. Поисковая система «WebCrawler» стала первой системой, о которой было известно широкому кругу пользователей. Увы пропускная способность была невысокой и в дневное время система часто была недоступной.
20 июля 1994 г. – открылся Lycos — серьезная разработка в технологии поиска, созданная в университете Карнеги Мелон. Майкл Малдин был ответственен за эту поисковую систему и до сих пор остаётся ведущим специалистом в Lycos Inc. Lycos открылся с каталогом в 54,000 документов. И в дополнение к этому результаты, которые он предоставлял, были ранжированными, кроме того он учитывал приставки и приблизительное совпадение. Но главным отличием Lycos был постоянно пополняемый каталог: к ноябрю 1996 было проиндексировано 60 миллионов документов — больше, чем у любой другой поисковой системы того времени.
Январь 1994 г. — был основан Infoseek. Он не был по-настоящему инновационным, но имел ряд полезных дополнений. Одним из таких популярных дополнений была возможность добавления своей страницы в реальном времени.
1995 год – запустилась AltaVista. Появившись, поисковая система AltaVista быстро получила признание пользователей и стала лидером среди себе подобных. У системы была практически неограниченная на то время пропускная способность, она была первой поисковой системой, в которой было возможно формулировать запросы на естественном языке, а также формулировать сложные запросы. Пользователям было разрешено добавлять или удалять их собственные URL в течение 24 часов. Также AltaVista предлагала много советов и рекомендаций по поиску. Основной заслугой системы AltaVista считается обеспечение поддержки множества языков, в том числе китайского, японского и корейского. Действительно, в 1997 году ни одна поисковая машина в Сети не работала с несколькими языками, тем более с редкими.
1996 год — поисковая машина AltaVista запустила морфологическое расширение для русского языка. В этом же году были запущены первые отечественные поисковые системы – Rambler.ru и Aport.ru. Появление первых отечественных поисковых систем ознаменовало новый этап развития Рунета, позволяя русскоязычным пользователям осуществлять запрос на родном языке, а также оперативно реагировать на изменения, происходящие внутри Сети.
20 мая 1996 г. — появилась корпорация Inktomi вместе со своим поисковиком Hotbot. Его создателями были две команды из калифорнийского университета. Когда сайт появился, то он быстро стал популярным. В октябре 2001 Дэнни Салливан написал статью под названием «База данных спам сайтов Inktomi открыта для публичного пользования», в которой рассказывалось о том, как Inktomi случайно сделал свою базу данных спам сайтов, которая к тому времени насчитывала уже около 1 миллиона URL, доступной для всеобщего использования.
1997 год – в западных странах наступает переломный момент в развитии поисковых систем, когда С. Брин и Л. Пейдж из Стэндфордского университета основали Google (первоначальное название проекта BackRub). Они разработали собственную поисковую машину, которая дала пользователям возможность осуществлять качественный поиск с учетом морфологии, ошибок при написании слов, а также повысить релевантность в результатах выдачи запросов.
23 сентября 1997 года – анонсирован Yandex, который быстро стал самой популярной у русскоязычных пользователей Интернета системой поиска. С запуском в поисковой системы Яндекс отечественные поисковые машины начали конкурировать между собой, улучшая систему поиска и индексации сайтов, выдачи результатов, а также предлагая новые сервисы и услуги
Таким образом, развитие поисковых систем и их становление можно охарактеризовать перечисленными выше этапами.
На сегодняшний день на мировом рынке обосновались три лидера – Google, Yahoo и Bing. Они имеют свои собственные базы, и свои алгоритмы поиска. Многие другие поисковые системы используют результаты этих трех основных поисковых систем. Например, AOL использует базу данных Google в то время как AltaVista, Lycos и AllTheWeb используют базу данных Yahoo Все остальные поисковые системы в различных комбинациях, используют результаты (выдачу) перечисленных систем.
Если же провести аналогичный анализ поисковых систем, популярных в странах СНГ, то мы увидим, что mail.ru транслирует поиск Google, при этом накладывая свои новые наработки, Rambler, в свою очередь, транслирует Яндекс. Поэтому весь рынок рунета можно разделить между этими двумя гигантами.
Именно поэтому, в странах СНГ продвижение сайта, как правило, осуществляется только в этих двух ПС.
Первые поисковые системы | WhoYOUgle
Современные поисковые системы просты и удобны в использовании, чем не могли похвастаться их предшественники. Найти с их помощью необходимую информацию было крайне сложно, они требовали огромных, по тем временам, сетевых ресурсов, выводя из строя веб-сервера.
Сегодня поисковая система — это один из самых широко используемых методов навигации в киберпространстве. Она представляет собой веб-сайт, предоставляющий возможность поиска информации в Интернете. Основной его частью является поисковая машина, или поисковый движок — комплекс программ, обеспечивающий функциональность поисковой системы. Основными критериями качества работы поисковой машины являются степень соответствия запроса и найденного результата, полнота базы, учёт морфологии языка.
Первые в Интернете
Первая поисковая интернет-система появилась в 1989 году, ее автором был студент информатики Монреальского Университета им. Мак Гилла Алан Эмтадж. Первый поисковик назывался Archie (от искаженного слова archive — «архив»). Программа собирала в единую базу данных имена файлов публичных ftp-серверов. Однако сами файлы «Archie» не индексировала.
Следующим этапом в истории поисковых систем стало появление сетевого протокола Gopher. Его автором был Марк Мак Кахилл из Университета Миннесоты. Протокол индексировал текстовые документы и предоставлял к ним доступ в Интернете.
Чуть позже два ученых из Университета Невады, Фред Барри и Стивен Фостер, разработали программу Veronica. В Veronica можно было осуществлять поиск по ключевому слову среди названий документов, перечисленных в Gopher.
Вскоре после ее появления был создан еще один поисковый инструмент — Jughead. Он имел подобные функциональные возможности, как и у Veronica, но при этом в него были добавлены логические возможности поиска. Jughead позволял получать информационное меню с различных серверов Gopher.
Первый сетевой робот
В 1993 году студент Массачусетского технологического института Мэтью Грей создал первого робота, который индексировал страницы Интернета. Назывался он World Wide Web Wanderer, буквально — «странник по Всемирной паутине». Прежде опись сетевых ресурсов составлялась вручную. Программа позволяла пересчитывать веб-серверы, измеряя масштабы Паутины. База сайтов, собранная при помощи первого робота, получила название Wandex. Однако с течением времени эта база становилась все менее пригодной для поиска, и постепенно утратила актуальность для пользователей. Поисковые роботы первого поколения были крайне медлительными и попросту не успевали за ростом всемирной Сети. Проблемы с автоматическим сбором информации привели к появлению принципиально иной концепции поисковой системы. Так возникла система ALIWEB- первый глобальный каталог (или директория) ресурсов Всемирной паутины. Ее базу данных наполняла не программа-робот, а хозяин сайта или веб-страницы.
Прибыльный бизнес
После того, как бизнесмены поняли, что из Интернета можно извлечь выгоду, началось усиленное финансирование развития поисковых систем. Стали появляться все новые и новые поисковики с усовершенствованным набором функций.
Так, в 1993 году шесть студентов Стэнфорда представили Excite. Программа использовала статистический анализ слов в тексте, чтобы облегчить процесс поиска в Интернете. Годом позже возникла сеть Galaxy — первый доступный для поиска интернет-справочник. В том же 1994 году была представлена программа WebCrawler. Это была первая поисковая машина, которая индексировала весь текст веб-сайтов. В отличие от своих предшественников, она позволяла пользователям искать по любым ключевым словам на любой веб-странице — с тех пор это стало стандартом во всех основных поисковых системах. Кроме того, это был первый поисковик, о котором было известно в широких кругах пользователей. Тогда же доктор Майкл Молдин разработал поисковую машину Lycos. Наряду с результатами поиска она предлагала ссылки на темы, связанные с поисковым запросом. В 1995 году появилась система AltaVista, которая первой предложила расширенную систему поиска. Кроме того, она принимала языковые запросы на так называемом «естественном языке», то есть Alta Vista могла производить поиск не только по одному ключевому слову, но и по целой фразе. Кроме того, система предлагала возможность поиска изображений, музыки и видеофайлов.
В некотором смысле все эти поисковые системы конкурировали с популярными интернет-каталогами, такими, как Yahoo!. Yahoo! появился в 1994 году. Его авторами были Джерри Янг и Дэвид Фило. Проект начался с составления каталога их любимых веб-сайтов. Единственное, что отличало этот перечень от других, был комментарий к каждой ссылке URL. Через год разработчики получили финансирование и создали корпорацию Yahoo!.
Пользователям Рунета первые поисковики стали доступны в 1996 году. Это были морфологическое расширение к поисковой машине Altavista и оригинальные российские поисковые системы Rambler и Aport.
1. История развития поисковых систем
Одним из первых способов организации доступа к информационным ресурсам сети стало создание каталогов сайтов, в которых ссылки на ресурсы группировались согласно тематике. Первым таким проектом стал сайт Yahoo, открывшийся в апреле 1994 года. После того, как число сайтов в каталоге Yahoo значительно увеличилось, была добавлена возможность поиска информации по каталогу. Это, конечно же, не было поисковой системой в полном смысле, так как область поиска была ограничена только ресурсами, присутствующими в каталоге, а не всеми ресурсами сети Интернет [4].
Каталоги ссылок широко использовались ранее, но практически утратили свою популярность в настоящее время. Причина этого очень проста — даже современные каталоги, содержащие огромное количество ресурсов, представляют информацию лишь об очень малой части сети Интернет. Самый большой каталог сети DMOZ (или Open Directory Project) содержит информацию о 5 миллионах ресурсов, в то время как база поисковой системы Google состоит из более чем 8 миллиардов документов.
Первой полноценной поисковой системой стал проект WebCrawler появившийся в 1994 году.
В 1995 году появились поисковые системы Lycos и AltaVista. Последняя долгие годы была лидером в области поиска информации в Интернет.
В 1997 году Сергей Брин и Лари Пейдж создали Google самую популярную на сегодняшний момент поисковую систему в мире.
сентября 1997 года была официально анонсирована поисковая система Yandex, самая популярная в русскоязычной части Интернет.
В настоящее время существует 3 основных международных поисковых системы — Google, Yahoo и MSN Search, имеющих собственные базы и алгоритмы поиска. Большинство остальных поисковых систем (коих можно насчитать очень много) использует в том или ином виде результаты 3 перечисленных. Например, поиск AOL (search. aol.com) и Mail.ru используют базу Google, а AltaVista, Lycos и AllTheWeb — базу Yahoo.
В России основной поисковой системой является Яндекс, за ним идут Rambler, Google.ru, Aport, Mail.ru и КМ.ru
AltaVista — поисковая система. Название «AltaVista» буквально переводится как «взгляд сверху».
Изначально, поисковая система AltaVista была настоящим новатором по созданию поисковых технологий. В 1995 году Альта виста создавалась как один из элементов оборудования исследовательской лаборатории Digital Equipment Corporation (DEC). Появившись, поисковая система AltaVista быстро получила признание пользователей и стала лидером среди себе подобных. Основной заслугой системы AltaVista считается обеспечение поддержки множества языков, в том числе китайского, японского и корейского. Действительно, в 1997 году ни одна поисковая машина в Сети не работала с несколькими языками, тем более с редкими.
В 1998 году корпорация Compaq Computer купила DEC (вместе с AltaVista). И уже в начале 1999 года AltaVista получила статус самостоятельного подразделения. В этом же году Microsoft лицензировала поисковую систему AltaVista для использования на своем узле MSN. Множество желающих сразу же стали пользоваться услугами по индексации больших объемов информации и возможностью мгновенного поиска в огромных базах данных. При этом адрес поисковой системы оставался прежним — altavista. digital.com.
А набор в адресной строке altavista.com приводил к попаданию на сайт компании AltaVista Technology. В результате, известность поисковой системы привела к огромному притоку посетителей на сайт AltaVista Technology и потере потенциальных пользователей поисковой системой. В итоге, домен altavista.com был выкуплен Compaq за 3,35 миллиона долларов в августе 1998 года (крупнейшая сделка подобного рода на тот момент). Несмотря на это, Compaq так и не удалось получить прибыль от поисковой системы. Поэтому в июне 1999 года начались переговоры Compaq и корпорации CMGI о формировании стратегического сетевого альянса, в рамках которого AltaVista была продана CMGI. 19 августа 1999 года было объявлено о приобретении корпорацией CMGI у Compaq 83 % акций AltaVista.
В феврале 2003 AltaVista была куплена Overture Services, Inc., которая в июле 2003 была приобретена Yahoo. С мая 2011 AltaVista перешла на поисковую технологию Yahoo.
Поисковая система AltaVista же стремилась стать универсальным порталом, включавшим онлайновый магазин, радиостанцию, форумы, чаты, персональные фотоальбомы и прочее. Но, из-за громадных денежных вливаний, из-за конкуренции с другими гигантскими порталами и опубликованной критики со стороны тех же конкурентов, 2001 год проходит для компании под девизом отказа от претензий на статус портала и «возвращения к истокам”.
Компания повернула свою деятельность в другое русло. Теперь www.altavista.com продвигает свою поисковую систему среди индивидуальных пользователей Интернета и лицензирует технологии поиска предприятиям, в том числе для использования во внутренних сетях. Основным же источником финансирования потребительской версии поисковой системы AltaVista стали доходы от рекламы, получаемые, в том числе и от наиболее популярных. Например, сейчас реальные результаты поиска помещаются после ссылки, за размещение которой, компании AltaVista платит владелец соответствующего ресурса.
Одновременно, с попытками стать порталом, AltaVista продолжала совершенствовать свои поисковые технологии.
Также еще одним источником прибыли AltaVista является разработка корпоративных поисковых систем внутреннего пользования.
Несмотря на явное отставание от конкурентов, www.altavista.com абсолютно уверена в своих силах. Надеемся, что компания Альта виста выполнит все намеченное и с успехом «вернется к своим корням”. Поисковая система AltaVista (www.altavista.com) завоевала сердца всех пользователей Интернета на раннем этапе его существования. Ее история — классический пример сочетания хорошей технологии с невнятным позиционированием.
Google (компания) — Википедия
У этого термина существуют и другие значения, см. Google.Google (МФА [ɡuːɡl][8][9], MWCD[en] /ˈgü-gəl/[10], транскрипция: «Гугл»[11][12]) — американская транснациональная корпорация, реорганизованная 15 октября 2015 года в международный конгломерат Alphabet Inc., компания в составе холдинга Alphabet, инвестирующая в интернет-поиск, облачные вычисления и рекламные технологии. Google поддерживает и разрабатывает ряд интернет-сервисов и продуктов (см.: Список сервисов и инструментов Google) и получает прибыль в первую очередь от рекламы через свою программу AdWords[13].
Компания основана Ларри Пейджем и Сергеем Брином. Впервые она была зарегистрирована как частная компания 4 января 1996 года, а 19 августа 2004 года начала продажу своих акций на фондовом рынке[14]. Тогда Ларри Пейдж, Сергей Брин и Эрик Шмидт договорились о совместной работе в Google в течение двадцати лет, до 2024 года[15]. Заявленной миссией компании с самого начала была «организация мировой информации, обеспечение её доступности и пользы для всех»[16], а неофициальный лозунг компании, придуманный инженером Google Полом Бакхейтом, — «Не будь злым» (англ. Don’t be evil)[17][18]. В 2003 году компания переехала в свою нынешнюю штаб-квартиру в Маунтин-Вью (штат Калифорния).
Google управляет более чем миллионом серверов в центрах обработки данных по всему миру[19] и обрабатывает более одного миллиарда поисковых запросов[20] и 24 петабайт пользовательских данных каждый день[21][22][23][24]. Быстрый рост Google с момента её основания привёл к появлению большого числа продуктов, не связанных непосредственно с главным продуктом компании — поисковой системой. У Google есть такие онлайн-продукты как почтовый сервис Gmail, социальная сеть Google+. У компании есть и десктопные продукты, такие как браузер Google Chrome, программа для работы с фотографиями Picasa и программа мгновенного обмена сообщениями Hangouts. Кроме того, Google ведёт разработку мобильной операционной системы Android, используемой на большом количестве смартфонов, а также операционной системы Google Chrome OS и устройства Google Glass. По данным Alexa, основной сайт Google — google.com — является самым посещаемым сайтом Интернета, а многочисленные международные сайты Google (google.co.in, google.co.uk и т. д.) входят в первую сотню по посещаемости, как и несколько других сайтов сервисов Google — YouTube, Blogger и Orkut[25]. В мае 2011 года количество уникальных посетителей сайтов Google за месяц впервые превысило 1 млрд человек[26].
По версии BrandZ, Google — самый мощный бренд в мире[27], а по версии компании Brand-Finance — самый дорогой бренд в мире в 2011 году[28]. В 2011 году Google была признана компанией с наилучшей репутацией в США, опередив Microsoft, Sony и другие компании[29][30]. Доминирующее положение сервисов Google на рынке приводит к критике компании по вопросам неприкосновенности частной жизни, авторского права и цензуры[31][32].
23 апреля 2018 года в России подверглись блокировке 118 из 1002 известных IP-адресов, используемых сервисами Google. Пользователям в разных частях России стали недоступны домены google.com, google.ru, сервисы YouTube, reCAPTCHA и AdSense[33][34].
В марте 2019 года компанией Google был установлен мировой рекорд по точности вычисления числа Пи, он превосходит прежний на девять триллионов знаков после запятой и равен 31 415 926 535 897. Впервые рекордная точность вычислений была обеспечена с помощью облачной обработки данных. Рекорд установлен сотрудницей компании, японкой Эммой Харукой Ивао[35].
19 марта 2019 года корпорация анонсировала создание нового стримингового сервиса Stadia, который будет предназначен для запуска видеоигр в браузере Google на настольных компьютерах, ноутбуках, смартфонах, планшетах и телевизорах[36].
Логотип Google с 1 сентября 2015 года 
Логотип Google с 19 сентября 2013 года по 31 августа 2015 года 
Логотип Google с 6 мая 2010 года по 18 сентября 2013 года 
Логотип Google с 31 мая 1999 года по 5 мая 2010 года 
Логотип Google с 4 сентября 1998 года по 30 мая 1999 годаGoogle появился в январе 1996 года как научно-исследовательский проект Ларри Пейджа и Сергея Брина, которые тогда учились в Стэнфордском университете в Калифорнии[37].
Хотя обычные поисковые системы тогда сортировали поисковую выдачу по тому, сколько раз искомые термины упоминались на странице, Пейдж и Брин размышляли над лучшей системой, которая анализировала бы отношения между сайтами[38]. Они назвали эту новую технологию PageRank, актуальность сайта в ней определяется количеством и важностью страниц, которые ссылаются на сайт[39][40].
Небольшая поисковая система RankDex от IDD Information Services, разработанная Робином Ли, с 1996 года уже изучала аналогичную стратегию для ранжирования страниц[41]. Технология RankDex была запатентована[42] и использована в дальнейшем, когда Ли основал Baidu в Китае[43][44].
Пейдж и Брин изначально назвали свою поисковую систему BackRub, потому что система проверяла обратные ссылки для оценки важности сайта[45][46][47].
В конце концов, они изменили название на Google — ошибочное написание слова «гугол» (англ. googol)[48][49]. Смена названия произошла случайно при встрече с одним из основателей Sun Microsystems Энди Бехтольшеймом. «Это очень интересно, — прервал Энди, когда Сергей начал демонстрировать ему возможности своего поисковика, — но я очень спешу. Как, вы говорите, называется ваша компания?» И, достав чековую книжку, подписал чек на сумму 100 тыс. долл. на имя несуществующей ещё компании Google Incorporated, заявленной ошарашенным Сергеем. Чтобы получить деньги в банке, необходимо было именно под этим названием зарегистрировать фирму, что и было сделано позднее 4 сентября 1998 года. Уставной капитал был заявлен в 1 млн долларов[50].
Гугол — это число, состоящее из единицы и ста нулей. Позднее в рекламной кампании было заявлено, что оно было выбрано, чтобы показать, что поисковая система хочет обеспечить людей большим количеством информации[51]. Первоначально Google работала на сайте Стэнфордского университета и имела домен google.stanford.edu[52].
Доменное имя для Google было зарегистрировано 15 сентября 1997 года[53], а компания была зарегистрирована 4 сентября 1998 года. Она была расположена в гараже подруги основателей (Сьюзен Воджиски[37]) в Менло-Парке (штат Калифорния). Крейг Сильверстейн, их однокурсник, был нанят в качестве первого сотрудника[37][54][55].
Финансирование и первичное публичное предложение[править | править код]
Первым финансированием для Google были 100 тыс. долларов от Энди Бехтольшейма, одного из основателей Sun Microsystems, полученные в августе 1998 года ещё до регистрации компании[56]. В начале 1999 года, будучи ещё аспирантами, Брин и Пейдж решили, что их поисковая система слишком сильно отвлекает их от учёбы. Они предложили главе Excite Джорджу Беллу купить её за миллион долларов, но он отверг предложение. 7 июня 1999 года было объявлено о раунде финансирования в размере 25 млн долл[57] с такими крупными инвесторами, как венчурные компании Kleiner Perkins Caufield & Byers и Sequoia Capital[56].[58][59]
Первичное публичное предложение (IPO) Google состоялось пять лет спустя, 19 августа 2004 года. Компания предложила 19 605 052 акций по цене 85 долл. за акцию[60][61]. Акции были проданы через онлайн-аукцион уникального формата, организованный андеррайтерами сделки Morgan Stanley и Credit Suisse[62][63] Выручка от IPO в 1,67 млрд долл. означала, что рыночная капитализация Google составила более 23 млрд долл.[64]. Подавляющее большинство из 271 млн акций остались под контролем Google, и многие сотрудники Google мгновенно стали миллионерами-владельцами ценных бумаг. Yahoo!, конкурент Google, также получила выгоду, поскольку владела 8,4 млн акций Google до проведения IPO[65].
31 октября 2007 года стоимость акций достигла 700 долл.[66], в первую очередь из-за большого объёма продаж и размеров доходов на рынке онлайн-рекламы[67]. В настоящее время компания указывается на бирже NASDAQ под тикером GOOG и на Франкфуртской фондовой бирже под тикером GGQ1.
12 февраля 2014 года капитализация компании достигла 400 миллиардов долларов[68].
Рост[править | править код]
В марте 1999 года компания переехала в Пало-Альто (штат Калифорния) — город, в котором размещены штаб-квартиры нескольких других известных технологических стартапов Кремниевой долины[69]. В следующем году, вопреки изначальной позиции Пейджа и Брина против финансируемой рекламой поисковой системы[70], Google начала продавать рекламу, связанную с поиском ключевых слов[37]. В целях соответствия минималистичному дизайну объявления были исключительно текстовыми.
В 2001 году Google получила патент, описывающий механизм PageRank[71]. Патент был официально выдан Стэнфордскому университету и указывает Лоуренса Пейджа как изобретателя. В 2003 году компания арендовала свой нынешний офисный комплекс у Silicon Graphics в Маунтин-Вью (штат Калифорния)[72]. Комплекс с тех пор стал известен как Googleplex. Три года спустя Google купила собственность у SGI за 319 млн долл[73]. К этому времени название Google вошло в бытовую речь, в результате чего глагол «google» был добавлен в академический словарь Merriam-Webster и Оксфордский словарь английского языка со значением «использовать поисковую систему Google, чтобы найти информацию в Интернете»[74][75].
Приобретения и партнёрства[править | править код]
С 2001 года Google приобрела много компаний, ориентируясь в основном на небольшие венчурные компании. В 2004 году Google приобрела Keyhole, Inc.[76] Этот стартап разработал продукт под названием Earth Viewer, в котором были размещены спутниковые фотографии земной поверхности. Google переименовала сервис в «Google Планета Земля» в 2005 году. Два года спустя Google купила видеохостинг YouTube за 1,65 млрд долл[77]. 13 апреля 2007 года Google приобрела одного из пионеров интернет-рекламы компанию DoubleClick за 3,1 млрд долл., что дало Google ценные связи, которые были у DoubleClick с веб-издателями и рекламными агентствами[78]. Позднее в том же году Google приобрела GrandCentral за 50 млн долл[79]. Этот сервис стал основой для Google Voice. 5 августа 2009 года Google купила первую для себя публичную компанию — производителя программного обеспечения для видео On2 Technologies за 106,5 млн долл.[80] Google также приобрела социальную поисковую сеть Aardvark за 50 млн долл.[81] В апреле 2010 года Google приобрела стартап Agnilux[82].
В дополнение к многочисленным приобретённым компаниям, Google сотрудничала с другими организациями для самых разных целей: от исследований до рекламы. В 2005 году Google сотрудничала с Исследовательским центром Эймса (отделение НАСА) для постройки 93 тыс. м² офисов[83]. Офисы были предназначены для исследовательских проектов, связанных с управлением данными больших объёмов, нанотехнологиями, распределёнными вычислениями и предпринимательской космической отраслью. В октябре 2005 года компания Google заключила партнёрское соглашение с Sun Microsystems[84]. Кроме того, компания сотрудничала с AOL для взаимного улучшения сервисов поиска видео[85]. В том же году Google наряду с другими компаниями, в том числе Microsoft, Nokia и Ericsson, также финансировала новый домен верхнего уровня .mobi[86]. Google позже запустила Adsense для мобильных устройств, используя преимущества развивающегося рынка мобильной рекламы[87]. В 2006 году Google и Fox Interactive Media подписали соглашение о предоставлении поиска и рекламы в социальной сети Myspace[88].
В 2008 году Google совместно с GeoEye запустила спутник для обеспечения Google Earth изображениями с высоким разрешением. Спутник был запущен с авиабазы Ванденберг 6 сентября 2008 года[89]. В том же году Google в рамках партнёрства с журналом Life разместила у себя архив его фотографий. Некоторые из изображений в архиве никогда не публиковались в журнале[90].
В 2010 году Google Energy совершила свою первую инвестицию в проект освоения возобновляемых источников энергии, вложив 38,8 млн долл. в две ветровые электростанции в Северной Дакоте. Компания объявила, что они будут генерировать 169,5 мегаватт энергии, что достаточно для снабжения 55 тыс. домов. NextEra Energy Resources, разработавшая электростанции, продала Google 20 % доли в проекте, чтобы получить финансирование для его развития[91]. Также, в 2010 году Google приобрела норвежскую компанию Global IP Solutions — разработчика сервиса веб-телеконференции[92]. В том же году Google завершила сделку по приобретению сети мобильных объявлений AdMob[93]. В июле 2010 года Google заключила соглашение с ветровой электростанцией Айовы о покупке 114 мегаватт энергии на 20 лет[94].
В августе 2011 года было объявлено о достижении соглашения о поглощении Google компании Motorola Mobility (одной из двух независимых компаний, образовавшихся при разделении Motorola), занимающейся выпуском мобильных телефонов. Стоимость сделки — 12,5 млрд долл.[95]22 мая 2012 года сделка была завершена. Google приобрёл Motorola Mobility, сменив CEO.
В 2018 году компания Google приобрела часть компании HTC. Стоимость сделки — 1,1 млрд долл. С момента заключения сделки более двух тысяч инженеров HTC будут разрабатывать гаджеты Google, включая смартфоны Google Pixel[96].
В июле 2001 года, по приглашению основателей компании, должности председателя совета директоров и главного исполнительного директора Google занял Эрик Шмидт[16].
4 апреля 2011 года главным исполнительным директором стал Ларри Пейдж. Эрик Шмидт остался председателем совета директоров компании Google.
По состоянию на 20 июня 2010 года, Пейджу, Брину и Эрику Шмидту принадлежало примерно 91 % акций класса B, которые в совокупности предоставляют своим держателям 68 % голосов. Триумвират оказывает решающее влияние в решении всех вопросов, относящихся к компетенции акционеров[97].
В 2015 году в результате реорганизации Google и создания холдинга Alphabet генеральным директором компании стал Сундар Пичаи.
По состоянию на 2017 год 81,21 % акций класса A принадлежат институциональным инвесторам, в частности[98]:
Также в собственности институциональных инвесторов находится 70 % акций класса C, крупнейшие пакеты у следующих[99]:
В 2013 году Google в четвёртый раз возглавила список 100 лучших работодателей США, который ежегодно публикует Fortune[100].
В Google действовала программа «20 процентов», в рамках которой инженеры могут тратить 20 % рабочего времени на проекты, которые не входят в их рабочие обязанности[101].
Найм персонала[править | править код]
При приёме новых сотрудников среди прочего оценивается их способность работать в условиях существующей корпоративной культуры, в частности в плоской организационной структуре и быстро меняющемся окружении. Успешный кандидат должен обладать талантом, креативностью и страстностью, быть этичным, открытым и уметь произвести впечатление и без делового костюма.
Миллионы поданных онлайн резюме сначала обрабатываются автоматически, выявляя тех, кто потенциально может подойти компании.
Стремясь привлечь таланты, компания проводит среди студентов колледжей турнир Google Code Jam. На этом турнире программисты соревнуются в решении задач на время. 15 финалистов приглашают в штаб-квартиру Google на финальный раунд[102].
В январе 2018 года бывший технический специалист Джеймс Деймор подал исковую жалобу в суд, обвинив компанию Google в дискриминации сотрудников по принципу цвета кожи и политических взглядов[103]. Сам Джеймс Деймор был уволен после заявления о неравенстве полов[104].
Проект «Кислород»[править | править код]
Google в течение двух лет проводила масштабное исследование, получившее название «Проект „Кислород“», целью которого было разработать собственную модель хорошего руководителя. В результате в марте 2011 года были опубликованы следующие важнейшие качества хорошего руководителя по версии Google:
- Он хороший тренер.
- Он доверяет команде, расширяет зону ответственности подчинённых и никогда не занимается микроменеджментом.
- Заинтересован в успехах членов команды, интересуется делами сотрудников и их личными делами.
- Помогает подчинённым строить карьеру.
- Имеет чёткий план развития команды, видит стратегию.
- Владеет профильными навыками и знаниями — при необходимости должен помочь своим сотрудникам, дать совет, высказать экспертное мнение и т. д.[105].
Поисковая система[править | править код]
Поисковая система Google занимает более 60 % мирового рынка. Ежедневно она регистрирует около 50 млн поисковых запросов и индексирует более 8 млрд веб-страниц. Google может находить информацию на 191 языке (на 2 декабря 2009).
Интерфейс Google содержит довольно сложный язык запросов, позволяющий ограничить область поиска отдельными доменами, языками, типами файлов и т. д. Например, поиск «intitle:Google site: wikipedia.org» даст все статьи Википедии на всех языках, в заголовке которых встречается слово Google[106][107][108].
Другие сервисы[править | править код]
Кроме поисковой системы, Google предоставляет много других сервисов, в частности Gmail и Hangouts. Самым популярным у третьесторонних создателей приложений стал сервис «Карты Google». Именно этот сервис лидирует в качестве основы интегрированных приложений (англ. mashups). В то время как Google взимает плату за доступ к своим сервисам через API, для Google Maps предусмотрено бесплатное обслуживание, если сайт гибридного приложения общедоступен и не берёт оплату за услуги, в основе которых лежит Google Maps. Корпоративные пользователи могут использовать этот сервис в своих интранетах или коммерческих приложениях платно.
В рамках прочих сервисов Google, в частности Google Search, можно иметь доступ к данным Google через открытый API, но при условии оплаты за каждую 1000 обращений к серверам Google.
28 июня 2007 года Google возобновил сервис «Вопросы и Ответы»[109]. Россия стала первой страной в мире, где Google запустил свою версию подобного сервиса[110].
8 апреля 2008 года Google представил свою новую платформу для масштабируемых веб-приложений — Google App Engine. До этого момента множество технических аналитиков прогнозировали, что Google со временем выйдет на этот рынок, вслед за такими гигантами, как Amazon.com.
В 2015 году компания Google начала тестирование интерактивных билбордов на улицах Лондона. Виды рекламных материалов, показываемых на билбордах, зависят от множества факторов: от текущей погоды, от текущих локальных событий, от сведений о пробках, от текущих поисковых запросов и т.д[111].
В мае 2016 года был презентован новый «умный» мессенджер Allo. Благодаря встроенному в Allo помощнику Google Assistant компания получает все пересылаемые в чате тексты, позволяет запускать интернет-поиск из чата и предлагает пользователям поисковые запросы, компании и услуги, релевантные теме беседы. Функция Умный Ответ предлагает варианты быстрого ответа, используя сохранённую на серверах базу предыдущих сообщений пользователя. Разработчики позаботились о том, чтобы мессенджер был защищён от хакерского взлома со стороны иных предприятий и частных лиц[112].
5 декабря 2018 года Google заявила, что в марте 2019 года закроет мессенджер Allo[113].
В апреле 2019 года компания выпустила теперь уже для iOS приложение Google Fit для отслеживания физической активности[114].
19 ноября 2019 года в 30 странах мира стал доступен облачный игровой потоковый сервис Google Stadia, ранее известный под названием Project Stream[115]. Игры сервиса доступны для различных устройств: ноутбуков, настольных компьютеров, телевизоров, планшетов и телефонов[116].
В 2004 году Google создала некоммерческое благотворительное ответвление — Google.org (Google Foundation), со стартовым капиталом около 1 млрд долл. Основными направлениями деятельности этой организации являются информирование общества и способствование решению проблем в областях изменения климата, глобального здравоохранения и нищеты. Одним из первых его проектов являются работы в области гибридных и электрических транспортных средств.
В 2007 году Google стала спонсором и активным участником нескольких гей-парадов в Сан-Франциско, Нью-Йорке, Дублине и Мадриде[117].
В 2008 году Google представила «проект 10^100», в котором все желающие могут предложить идеи, а потом совместно выбрать ту, которая изменит мир и поможет как можно большему количеству людей. На момент начала голосования было предложено более 150 тысяч идей от людей из 170 стран. В голосовании приняли участие 16 групп идей, из которых было выбрано до 5, на помощь в реализации которых Google выделил 10 млн долл.
В феврале 2010 года компания Google пожертвовала 2 млн долл. на поддержку Википедии. Деньги направлены Фонду Викимедиа. Полученные деньги фонд направил на эксплуатационные расходы, включая инвестиции в техническую инфраструктуру, и на развитие и поддержку энциклопедии[118].
22 января 2019 г. стало известно, что корпорация Google пожертвовала 2 млн $ фонду Wikimedia Endowment и 1,1 млн $ в Wikimedia Foundation, а также подарила доступ к API Переводчика Google через инструмент перевода контента. Об этом сообщил Бен Гомес, вице-президент Google по поиску и новостям, в официальном блоге компании. Общая сумма поддержки проекта «Википедия» от компании Google составит более 7,5 млн $[119].
- Вид мадагаскарских муравьёв Proceratium google был назван в честь сервиса Google Earth, который помог открывателю в его исследованиях.
- Доля плагиата в общем объёме дипломных работ и диссертаций, которые защищаются в университетах Западной Европы, достигает 30 %. Эту цифру приводит в своём исследовании «Синдром копирования Google» (англ. Google Copy‑Paste Syndrome) австрийский учёный Штефан Вебер. Этот феномен он определяет как «безмозглую текстовую культуру» (англ. text culture without brains)[120][121].
Нарушение права на неприкосновенность частной жизни[править | править код]
Впервые проблемы в связи с нарушением прав человека у Google начались в 2005 году. При создании карт Google Earth были использованы изображения крыши американского Белого дома, что представляет угрозу для национальной безопасности Соединённых Штатов. Американская общественность была глубоко возмущена тем, что потенциальные террористы получили шанс детально рассмотреть системы защиты Белого дома, расположенные на крыше[122].
Следующим громким скандалом, связанным с Google, стал иск против этой компании американской семьи Боринг из штата Пенсильвания. В 2008 году чета Боринг обвинила компанию Google в нарушении неприкосновенности их частной жизни. При создании общемировых городских виртуальных карт Google Street View были использованы изображения дома и бассейна супружеской пары. Боринги незамедлительно подали в суд и потребовали от Google 25 тыс. долларов в качестве компенсации за причинённый моральный ущерб. Однако их первый иск не был удовлетворён. Тем не менее, судебные тяжбы были продолжены, и по решению суда в 2010 году Боринги получили от компании компенсацию в размере 1 доллара[123]. Однако представители Google заявили: «К сожалению, абсолютной конфиденциальности в современном мире не существует, ведь имеются изображения со спутников, которые снимают всё, не обращая внимания на знаки „частная территория“». Тем не менее, специалисты компании могут убрать изображения со своего сервера, если их попросить об этом в частном порядке[124].
Против Google также выступил Американский Национальный Юридический и Политический Центр (NLPC). В качестве доказательства нарушения сервисом частных прав члены центра предоставили информацию об одном из руководителей Google, собранную при помощи сервисов компании менее чем за полчаса — изображения его дома, номера машин, припаркованных возле него, название фирмы, занимающейся благоустройством его территории и даже название охранной фирмы, клиентами которой являются его соседи[125].
В связи с большим количеством претензий в отношении компании Эрик Шмидт в 2009 заявил: «Если вы не хотите, чтобы кто-то узнал о вас лишнюю информацию, то в первую очередь, не делайте ничего предосудительного. […] На самом деле поисковые серверы, включая Google, сохраняют эту информацию какое-то время. Мы все подчиняемся властям Соединённых Штатов, поэтому возможна такая ситуация, при которой нам придётся раскрыть информацию представителям власти[126].
В 2010 году большой общественный резонанс получил новый скандал, связанный с Google. Стало известно, что во время работы над сервисом Street View компания сканировала IP адреса и пароли граждан. Во время съёмок улиц и площадей разных городов со специальных автомобилей, оборудованных видеокамерами, специалисты Google также занимались сканированием сигнала беспроводных сетей Wi-Fi. В результате компания получила пароли и другую информацию конфиденциального характера, необходимую для входа в электронную почту частных и юридических лиц[127]. Представители Google согласились с тем, что они допустили большую ошибку, нарушив таким образом право на неприкосновенность частной жизни, и принесли свои извинения. Однако они заявили, что они не знали о проблеме до того, как власти Германии не обратились к ним с претензиями в этом отношении. Специалисты Google заверили, что полученная информация частного характера не была использована в поисковом сервере[128].
Летом 2013 года благодаря бывшему сотруднику американских спецслужб Эдварду Сноудену стало известно о том, что американское правительство платило Google, Yahoo, Microsoft и Facebook миллионы долларов за раскрытие информации об интернет-пользователях (в рамках программы PRISM). Расходы, согласно документам, были покрыты подразделением Агентства национальной безопасности, известным как Отдел по работе со специальными источниками[129]. В ответ на это главный юрист Google Дэвид Драммонд опубликовал в блоге компании открытое письмо, адресованное генпрокурору США и директору ФБР, в котором просил разрешить обнародовать в регулярном отчёте о прозрачности подробную информацию о правительственных запросах, в том числе о запросах, основанных на Законе о надзоре за деятельностью иностранных спецслужб (FISA). По утверждению Драммонда, ответы на эти запросы не обеспечивали правительству США прямого доступа к данным пользователей[130].
В настоящее время компанию Google серьёзно критикуют за нарушения прав человека, связанные с реализацией проекта Google Glass. Ношение очков Google уже запрещено в американских кинотеатрах, казино и стрип-клубах. Их владельцы опасаются, что посетители в таких очках будут записывать происходящее на видео. Кроме того, решение о запрете очков в скором времени могут принять американские банки и дирекции парков[131]. Представители Google пока не комментируют эту ситуацию.
5 августа 2014 года компания Google сообщила правоохранительным органам США о хранении одним из пользователей дочернего почтового сервиса Gmail фотографий детей порнографического содержания, после чего пользователь был арестован[132][133][134][135][136][137].
Участие в делах иностранных государств[править | править код]
Некоторые специалисты Google приняли участие в событиях Арабской весны, выступая за демократические ценности и защиту прав человека. Так, директор по маркетингу Google на Ближнем Востоке и в Северной Африке Ваиль Гоним выступал за свержение режима Хосни Мубарака в Египте во время беспорядков в стране в 2011 году. Он создал страницу в социальной сети Facebook, где осуждалось насилие над гражданами Египта со стороны правящей власти и происходила координация действий демонстрантов. Гоним охарактеризовал египетское протестное движение как «Facebook revolution» и отметил, что интернет играл в ней чрезвычайно важную роль[138].
Кроме того, вскоре после событий Арабской весны представители Google заявили, что работают над облегчением доступа к информации и продуктам компании на Ближнем Востоке и в Северной Африке. В связи с этим целью американской компании является обеспечение доступа к ещё большему числу своих продуктов на арабском языке. За 2011 год компания запустила версию Google Voice и Google+ на арабском и представила в +Art Project два музея, расположенных в Катаре (Музей исламского искусства и Арабский музей современного искусства Матхаф), а в 2012 году пригласила президента Туниса выступить посредством сервиса видеовещания Google+ Hangout On Air[139]. У компании Google есть также серьёзные претензии к руководству Китая в связи с попытками ограничить доступ китайских граждан к информации в интернете.
To google[править | править код]
Из-за популярности поисковой системы в английском языке появился неологизм to google или to Google (аналог в русском компьютерном сленге — гуглить), использующийся для обозначения поиска информации в Интернете с помощью Google. Именно с таким определением глагол занесён в наиболее авторитетные словари английского языка — Оксфордский словарь английского языка и Merriam-Webster[10], хотя в других источниках[140] приводятся примеры его использования для обозначения поиска вообще чего-либо в Интернете.
Первым, кто использовал слово как глагол, был сам Ларри Пейдж, 8 июля 1998 года подписавший одно из своих сообщений для списка рассылки: «Have fun and keep googling!»[141]. Американское диалектическое сообщество назвало глагол «to google» словом десятилетия[142].
Опасаясь возможной утраты товарного знака, Google не одобряет использование глагола google, особенно когда подразумевается поиск в Интернете вообще[143]. Например, 23 февраля 2003 года компания направила письмо[144] — «требование
История возникновения поисковых систем 🚩 история создания поисковой системы 🚩 Интернет 🚩 Другое
Ситуация стала меняться с увеличением общего количества сайтов, когда поиск нужной информации превратился в настоящую проблему. Первые попытки создания поисковых систем принадлежат студентам американских и канадских вузов, но технологии поиска были достаточно примитивны, вплоть до возникновения WebCrawler в 1994 году. Эта поисковая система стала первой, которая могла анализировать весь текст веб-сайтов.
Начался этап, когда эволюция поисковых систем стала развиваться со стремительной скоростью. Уже в 1995 году заработала AltaVista — система поиска, которая могла искать не только текст, а еще изображения, музыку и видеофайлы. Вскоре конкуренцию ей составили Yahoo и запущенный в 1997 году Google.
Разумеется, Google, созданный аспирантами Стэнфордского университета, далеко не сразу встал в один ряд с ведущими поисковыми системами. Нехватка финансирования и свободного времени даже заставила его создателей, Сергея Брина и Ларри Пейджа, выставить свое детище на продажу, но Гугл тогда никого не заинтересовал, и аспиранты были вынуждены бросить учебу для того, чтобы иметь возможность развивать свой проект.
Вслед за решением проблемы свободного времени была решена и проблема с финансированием, причем так, что удалось привлечь крупных инвесторов и не потерять возможность самостоятельного управления компанией, что для создателей Google было важным моментом.
Работа не стояла на месте и спустя некоторое время компанией Google был запущен проект, с помощью которого был налажен поток получения внушительной прибыли. Будучи противниками рекламы на главной странице собственного сайта, создатели Google запустили в 2000 году контекстную рекламу. Это ссылки на сайты рекламодателей, причем появляются они только при запросе пользователей на данную тему, что делает эту рекламу ненавязчивой.
Совершив революционный переворот в коммерческой рентабельности поисковиков, Google не переставал развиваться и в техническом плане, все более совершенствуя технологии поиска, что позволило этой компании стать мировым лидером среди поисковых систем.
Параллельно с развитием зарубежных поисковиков происходила разработка поисковых систем и в России, которые были адаптированы для рунета. Первой из таких систем стало детище компании «Агама», которое появилось в 1996 году и носило название «Апорт».
К сожалению, его история была недолгой: постоянные перепродажи из рук в руки, погоня за прибылью и недостаточное внимание техническим разработкам быстро сделали «Апорт» неконкурентноспособным.
Похожая судьба ожидала и «Рамблер», другой российский поисковик, правда его угасание было значительно более медленным, и по большому счету он не перестал существовать, правда только как филиал «Яндекса» – поисковой системой, которая в итоге стала лидером рунета, разделив рынок России с Гуглом примерно пятьдесят на пятьдесят.
Поисковик Википедия
Поиск информации во Всемирной паутине был трудной и не самой приятной задачей, но с прорывом в технологии поисковых систем в конце 1990-х годов осуществлять поиск стало намного удобнейПоиско́вая систе́ма (англ. search engine) — это компьютерная система, предназначенная для поиска информации[источник не указан 383 дня]. Одно из наиболее известных применений поисковых систем — веб-сервисы для поиска текстовой или графической информации во Всемирной паутине. Существуют также системы, способные искать файлы на FTP-серверах, товары в интернет-магазинах, информацию в группах новостей Usenet.
Для поиска информации с помощью поисковой системы пользователь формулирует поисковый запрос[1]. Работа поисковой системы заключается в том, чтобы по запросу пользователя найти документы, содержащие либо указанные ключевые слова, либо слова, как-либо связанные с ключевыми словами[2]. При этом поисковая система генерирует страницу результатов поиска. Такая поисковая выдача может содержать различные типы результатов, например: веб-страницы, изображения, аудиофайлы. Некоторые поисковые системы также извлекают информацию из подходящих баз данных и каталогов ресурсов в Интернете.
Поисковая система тем лучше, чем больше документов, релевантных запросу пользователя, она будет возвращать. Результаты поиска могут становиться менее релевантными из-за особенностей алгоритмов (см. «Пузырь фильтров»[⇨]) или вследствие человеческого фактора[⇨]. По состоянию на 2015 год самой популярной поисковой системой в мире является Google, однако есть страны, где пользователи отдали предпочтение другим поисковикам. Так, например, в России «Яндекс» обгоняет Google больше, чем на 10 %[⇨].
По методам поиска и обслуживания разделяют четыре типа поисковых систем: системы, использующие поисковых роботов, системы, управляемые человеком, гибридные системы и мета-системы[⇨]. В архитектуру поисковой системы обычно входят:
- поисковый робот, собирающий информацию с сайтов сети Интернет или из других документов,
- индексатор, обеспечивающий быстрый поиск по накопленной информации, и
- поисковик — графический интерфейс для работы пользователя[⇨].
История поисковых систем и русского SEO: кто кого?
Сентябрь — значимый месяц для рынка поискового маркетинга. В сентябре отмечают свои дни рождения поисковики Google и «Яндекс». Американская корпорация под руководством Сергея Брина и Ларри Пейджа была основана в сентябре 1998 года, а поисковая система Yandex.Ru — представлена в сентябре 1997-го. Не знаю, какие ассоциации этот факт рождает в ваших головах, я лично вспоминаю о лучших временах SEO, о поисковой оптимизации в ее классический период. Он никогда больше не повторится, он ушел в прошлое благодаря развитию поисковых технологий. В самом начале сентября, месяца, подарившего нам сразу двух поисковых гигантов, хочется еще раз вспомнить о русском классическом SEO — вспомнить и вздохнуть с облегчением: его методы канули в Лету, а значит, пользователи имеют все основания надеяться на то, что поисковая выдача будет только улучшаться.
Прощаясь с SEO…
Все меняется: автомобили, книги, фильмы, даже — в какой-то степени — люди. И уж тем более меняются рынки. На рынке поискового маркетинга сегодня происходит глобальная перестройка. Уходит в прошлое целая эпоха классической поисковой оптимизации, уступая место комплексным интернет-маркетинговым действиям, направленным на улучшение сайтов. Прощаясь с русским SEO, вспомним его историю.
Тезисно о главном
Определение
Классическое русское SEO — наука о разновидностях манипуляций, которые помогали сайту быстро подняться в поисковой выдаче по определенным запросам.
(Среди российских SEO — компаний есть и такие, значимость которых для рынка поискового маркетинга в рунете ставить под сомнение невозможно. Но основная масса игроков была любителями легких результатов).
Убеждение русского сеошника
Оптимизаторы в рунете были убеждены, что любые нововведения в поисковых системах, вообще все действия поисковиков направлены на одно — на борьбу с SEO. Поисковики спят и видят, как бы ухудшить качество жизни оптимизатора.
Девяностые годы ХХ века
Во второй половине 90-х люди начинают активно пользоваться поисковыми системами.
- 1993 год — появление первой в интернете поисковой системы Wandex, созданной Мэтью Грэем из Массачусетского технологического института (впоследствии работал в Google).
- В том же году свет увидели поисковые системы Aliweb, Repository-Based Software Engineering (RBSE), JumpStation, Architext, из которой позже выросла система Excite, и другие.
Wandex и другие первые поисковые системы по современным меркам были шокирующе несовершенны. Формируя выдачу под запрос, они показывали не самые релевантные страницы, а все, которые содержали данный запрос, без ранжирования.
- 1995 год — создана AltaVista, самая популярная поисковая система 90-х.
- 1996 год — появились сразу два российских поисковых сервиса — Rambler и Aport.
- 23 сентября 1997 года на московской выставке Softool анонсирована поисковая система Yandex.Ru (компания «Яндекс» появилась позже — в 2000-м). Система образца 1997 года «понимала» русские морфемы, учитывала расстояние между словами и была способна ранжировать страницы в соответствии с их релевантностью пользовательскому запросу.
Растет аудитория поисковых систем — растет число желающих начать зарабатывать на этой аудитории. Появляются первые оптимизаторы, работающие по схеме: изучаем принципы работы поисковика и подстраиваемся под них. Так зарождается целая индустрия Search Engine Optimization.
Доссылочная эпоха
В рунете она длилась примерно до 2002 года. В доссылочную эпоху текстовые факторы являются основными для ранжирования. Поначалу оптимизация выглядит как контроль над правильностью написания названий документов, так как именно по заголовкам поисковые системы индексируют страницы. Чуть позже оптимизаторы начинают проверять также корректность метатегов, title, следят, чтобы в тексте на странице были достаточное кол-во раз вписаны ключевые слова, по которым данная страница продвигается.
Несколько лет подряд поисковые системы были сосредоточенны в значительной степени именно на текстах веб-документов. Это давало возможность оптимизаторам с помощью нехитрых манипуляций с ключевыми фразами в метатегах и другими внутренними факторами «вылезать» в топ по нужным запросам. В результате первые места в выдаче по большинству коммерческих запросов заняли рекламные сайты.
Сергей Людкевич сказал о доссылочной эпохе: «Это были веселые времена: скопировав страницу, которая высоко ранжировалась по тому или иному запросу и заменив несколько слов на этой странице, можно было опередить в выдаче сайт, у которого ты этот контент и позаимствовал» (цитата из этого интервью).
Когда стала понятна коммерческая выгода, которую можно извлечь из оптимизации сайта, SEO становится бизнесом, предлагающим услугу — продвижение по позициям.
2000 год — SEO взрослеет
До миллениума поисковая оптимизация — это так, цветочки, игра в бирюльки. После — все меняется. SEO становится настоящий бизнесом, появляются компании с большими оборотами. 2001-й стал годом основания первых серьезных российских SEO-агентств. Именно в тот год была создана, например, «Ашманов и Партнеры» — компания, которую считают родоначальницей русского SEO.
Ссылки — великое благо и великое зло
Ссылочные факторы, ставшие в нулевых годах ХХI века основными факторами ранжирования, имеют корни в научном мире. Как в среде ученых оценивается авторитетность того или иного труда? Один из способов понять, насколько значимо научное произведение, — посмотреть на его индекс цитирования, который определяется числом ссылок других авторов или изданий на это произведение. При этом, естественно, чем солиднее издание или ученый, который ссылается на данный труд, тем более значимым выглядит и сам труд. Отсюда — известный на рынке поискового маркетинга тезис: имеет значение не только количество, но и качество внешних ссылок.
Еще с 1998-го начинает набирать свою мировую популярность поисковая система Google. Изюминка будущего мирового поискового гиганта — алгоритм PageRank. Все остальные поисковики оценивают веб-страницы, исходя из текстовых факторов (говоря грубо: чем большее число раз на странице упоминается поисковая фраза, тем выше позиция страницы в выдаче). Google ранжирует принципиально иначе: по числу обратных ссылок на конкретный URL.
PageRank был основан на исчислении количества внешних ссылок и веса ссылающихся страниц, то есть решающее значение стало иметь число и авторитетность ресурсов, которые цитируют страницу. Проблема релевантности (когда поисковому боту трудно выбрать наиболее релевантные запросу страницы из массы документов одинакового содержания) была решена в Google с математическим изяществом. Благодаря PageRank, алгоритму расчета авторитетности страницы, качество поиска в Googlе в разы улучшилось.
Google, введя PageRank, сделал ставку на ссылочное ранжирование, благодаря которому его выдача в какой-то момент стала релевантнее, чем у конкурентов, для которых основным фактором по-прежнему являлся поиск по тексту страниц. Отсутствие альтернативы PageRank’у сделало неконкурентноспособными множество остальных поисковых систем.
Ссылочное ранжирование в рунете
В 2002-2003 годах в лексикон участников российского рынка поискового маркетинга активно входит термин тИЦ (тематический индекс цитирования).
Тематический индекс цитирования — введенная «Яндексом» величина, позволяющая определить авторитетность сайта с учетом количества ссылок на него с других сайтов. Причем «Яндекс» всегда придавал значение не только количеству, но и качеству внешних ссылок.
Это нанесло серьезный удар по дорвеям того времени. Качество поиска в «Яндексе» заметно улучшается.
Поняв, что ссылки стали серьезно влиять на выдачу, сеошники в очередной раз приспособилось к изменившимся условиям со свойственной им изобретательностью — они начали обмениваться ссылками.
SEO жаждет знаний и прибылей
2002 год — проходит первая конференция по SEO-оптимизации, организованная компанией «Ашманов и партнеры» — Optimization. Она становится ежегодной и самой, пожалуй, авторитетной для русских сеошников.
В середине нулевых начинают организовываться первые ссылочные биржи и агрегаторы, благодаря которым SEO вырастает в прибыльную индустрию.
Уже к середине нулевых годов буквально одной-двумя ссылками можно было вытащить в топ любой запрос, если это ссылки с «жирной морды».
Жирная морда — на сленге оптимизаторов означает главную страницу сайта с высокими показателями тИЦ и PageRank. Ссылки с «жирной морды» передавали большой вес и потому стоили дорого.
Самые известные биржи и агрегаторы рунета
2004-05 годы — появляются первые сервисы по покупке и продаже ссылок, напоминающие, скорее доски объявлений. Также активно торговля ссылками идет на SEO-форумах.
2006 год — появилась биржа нового поколения SAPE, занявшая место ведущей рунетовской биржи, где совершалась купля-продажа ссылок. Линки покупались с помесячной оплатой: если оптимизатор забывал оплатить, ссылки исчезали с донорского сайта, оплачивал – появлялись вновь.
2008 год — создана биржа «Миралинкс» и быстро завоевала позиции одного из лидеров на рынке платного размещения статей. В том же году появился агрегатор SeoPult.
2009 год — увидели свет первая биржа вечных ссылок в рунете GoGetLinks и биржа Rotapost, специализировавшаяся, в основном, на размещении линков в блогах. Также появились агрегаторы Megaindex, Maremoto и Webeffector.
2010 год — создан агрегатор Rookee.
2012 год — появляются агрегаторы SeoWizard и SeoHummer.
Ссылочные биржи и агрегаторы — это грандиозный по своей наглости и масштабности проект, получивший небывалый размах в рунете. На глазах у поиска и интернет — пользователей сеошники торговали ссылками и покупали их, чтобы повысить поизиции сайта по определенным запросам — без тени смущения, как будто это честное и благородное, совершенно нормальное дело.
Золотой век русского SEO
Он длился с 2007 года, когда появилась Sape, по 2009-й, когда в «Яндексе» начинает работать Matrixnet. Это было лучшее время SEO. Ссылки работали превосходно. Ссылочные бюджеты точно коррелировали с результатами выдачи: чем больше тратишь на линки, тем выше твои позиции. Жизнь оптимизатора стала беззаботной: зашел на биржу, прикупил линков, написал клиенту, какие ключевые фразы необходимо вписать на какие страницы. И все — живи в свое удовольствие. Маржинальность SEO-бизнеса была очень высокой.
Борьба за чистоту выдачи
Со второй половины нулевых годов становится очевидно, что качество выдачи страдает из-за манипуляций со ссылками. Так как концепция любой поисковой системы заключается в формировании максимально релевантной, удовлетворяющей пользовательским запросам выдаче, то началась жесткая борьба поисковиков с некачественными линками.
Самыми серьезными алгоритмами, направленными на очищение выдачи от ГС, стали АГС у «Яндекса» и «Пингвин» у Google.
В 2009-м начал работать алгоритм машинного обучения «Матрикснет». Он предпринимал (и довольно успешные) попытки определить, где естественная, а где некачественная ссылка. Благодаря «Матрикснету» в разы увеличилось число учитываемых при ранжировании факторов. Уже нельзя было с прежней точностью прогнозировать, на каком бюджете и в какие сроки будет выведен в топ тот или иной запрос.
В 2011 году стало очевидно, что при ранжировании большое значение имеют поведенческие факторы (вероятно, «Яндекс» стал учитывать их тогда же, когда появился «Матрикснет»): именно в 2011-м много сайтов оказалось под фильтром за накрутку поведенческих.
Куда все повернуло
Поисковик Google постоянно совершенствовал свои возможности в борьбе с некачественными внешними ссылками. Он уверенно идет по этому пути и сегодня. Чтобы добиться результатов в Google, нужно уделять внимание контенту, благодаря нему получать естественные ссылки, показывающие уровень заинтересованности аудитории вашим контентом.
Покупка ссылок — сегодня это абсолютно бесперспективная концепция продвижения в Google.
Вплоть до 2013 года все думали, что «Яндекс» будет делать то же самое. Но 5 декабря 2013 года на конференции IBC Russia 2013 Александр Садовский, руководитель поисковых сервисов компании «Яндекс», заявил, что ссылки при ранжировании в коммерческом сегменте перестанут учитываться поисковиком уже в 2014 году.
«Яндекс» пошел по радикальному пути (но, с другой стороны, и ссылкоторговля в рунете тоже приобрела радикальные формы — такой открытой и наглой, как у нас, она не была больше нигде) — 12 марта 2014 года он действительно перестал учитывать ссылочный фактор в ранжировании по коммерческим запросам.
Оптимизаторы не могли и не хотели в это верить. Еще несколько месяцев они искали доказательства обратному — что ссылки все-таки работают, всеми правдами и неправдами убеждали в этом клиентов, утверждая, что «Яндекс» только стращает. Но месяц за месяцем, апдейт за апдейтом — и становилось ясно, что «Яндекс» сыграл честно: ссылки действительно не работают. Эпоха классического с SEO ушла навсегда. Началась новая эпоха комплексного интернет-маркетинга и поисковой оптимизации, основанных на постоянном улучшении сайта с точки зрения контента, юзабилити и дизайна.
Читайте также:
istoriya-poiskovykh-sistem-i-russkogo-seo-kto-kogo