Асессоры — «Промо Эксперт», Екатеринбург
Стань асессором и заработай на Яндексе
Вакансия асессора на Яндексе для жителей Украины, Белоруссии или Казахстана.
Асессор — это эксперт, оценивающий релевантность документов в результатах поиска, которые нашла поисковая система по случайным запросам. Асессор делает оценку, опираясь на описанные правила и свой здравый смысл.
Требования к кандидату:
читать далее → «Стань асессором и заработай на Яндексе»
Что такое поисковый спам (10 признаков)
Иногда тексты просто напичканы ключевыми словами. У нормальных людей от них болят глаза. У поисковых роботов, возможно, тоже что-то болит.
Создание таких текстов с целью попадания в ТОП-10 — это самый настоящий поисковый спам.
Как поисковый алгоритм вычисляет спамовые сайты? — Спросим у Google.
Эль Греко. Изгнание торговцев из храма10 признаков спама по мнению Google
1. Маскировка и/или скрытая переадресация
На сайте используется маскировка (обычные пользователи и поисковые роботы видят
разный контент) или переадресация пользователей на страницу, отличную от показанной
роботам Google.
читать далее → «Что такое поисковый спам (10 признаков)»
Яндекс раскрывает секреты
На семинаре «Формула сайта» от 1С-Битрикс выступали двое представителей Яндекса. Один из них — Антон Роменский.
Антон — руководитель группы поддержки качества поиска, «Платон Щукин». Антон руководитель тех, кто выносит вердикты. Его емейл — judge@yandex-team.ru (судья).
Самое интересное — общение в кулуарах. На семинаре Антона окружили вебмастера, и он дал много интересной информации.
читать далее → «Яндекс раскрывает секреты»
Секреты качества сайтов от асессоров Google и Яндекс
На днях в Сеть «попала» свежая версия руководства для асессоров Google. Руководство традиционно на английском языке 🙂
Если сайт пропал из Яндекса
Иногда случаются ситуации, что сайт резко пропадает из результатов поиска.
При этом над сайтом не работает ни профессиональный оптимизатор, ни даже профессиональный офис-менеджер.
При резких просадках сайта в поиске необходимо подождать примерно неделю. Отслеживать обновления Яндекса можно, например, здесь.
Если позиции сайта не восстанавливаются, то необходимо писать в техподдержку Яндекса — [email protected]. Это нужно для того, чтобы получить точный ответ — сайт под санкциями или нет.
Практика показывает, что если ответ приходит быстро, то скорее всего санкции наложены.
Как работают асессоры в Яндексе
Понятные презентации от Ольги Мегорской (руководителя группы асессоров) и Кирилла Николаева (руководителя группы отдела качества веб-поиска), о том, зачем и как работают эти прекрасные специалисты, оценивая наши сайты. Помним, что оценки попадают в Матрикснет, который находит взаимосвязи и постоянно корректирует алгоритм ранжирования.
читать далее → «Как работают асессоры в Яндексе»
Примеры асессорских оценок
Презентация Ольги Онойко (администратор группы асессоров) с примерами оценок Яндекса с Яндекс.Субботника в 2012 году. В презентации приведены конкретные примеры того, как асессоры оценивают тот или иной контент на сайтах разных тематик.
читать далее → «Примеры асессорских оценок»
Руководство для асессоров от Google на русском (51 страница)
Важные документы для продвижения:
- SEO чеклист.
- Руководство для асессоров Search Quality Rating Guidelines от Google (Система оценки качества сайтов) на русском языке.
Глава I: ПРИНЦИПЫ ОЦЕНКИ
1. Добро пожаловать в программу по оценке качества поиска
1.1 Обзор оценки URL
1.2 Важные термины и идеи
1.3 Цель оценки качества поиска
1.4 Асессоры должны представлять пользователя
2. Когда непонятен запрос
2.1 Когда непонятно намерение пользователя
2.2 Язык и местоположение задачи
2.3 Многозначные запросы
2.4 Классификация запросов: транзакционные, информационные и навигационные (или Do-Know-Go)
3. Язык целевой страницы
4. Оценка по шкале релевантности
4.
1 Витальная4.2 Полезная
4.3 Релевантная
4.4 Относительно релевантная
4.5 Нерелевантная/Неполезная
4.6 Нерейтингуемая
5. От намерения пользователя до выставления оценки
5.1 Намерение пользователя и полезность страницы
5.2 О важности местоположения
5.3 О важности языка
5.4 Многозначные запросы
5.5 Четкость запросов и целевых страниц
5.6 Распространенные ошибки при оценке страниц
6. Метки
6.1 Метка Спам
6.2 Метка Порно
6.3 Метка Вредоносная страница
6.4 Совместимость оценок и меток
Глава II: ОЦЕНКА URL С УЧЕТОМ РЕГИОНА ЗАПРОСА
1. Регион запроса
2. Оценка страницы под геозависимый запрос
3. Принцип оценки при наличии региона запроса
4. Когда важен регион запроса
Глава III: РУКОВОДСТВО ПО ПОИСКОВОМУ СПАМУ
1. Что такое поисковый спам
1.1 Взаимосвязь оценок и спама
1.2 Зачем создают спам-страницы
1.3 Когда проверять спам
2. Поиск технических сигналов
2.
1 Скрытый текст и скрытые ссылки2.2 Перенасыщение ключевыми словами
2.3 Скрытые редиректы
2.4 Клоакинг
3. Полезные страницы vs спам-страницы
3.1 Страницы с копированным текстом и PPC-рекламой
3.2 Фейковые страницы поиска с PPC-рекламой
3.3 Фейковые блоги с PPC-рекламой
3.4 Фейковые доски объявлений с PPC-рекламой
3.5 Копированный контент, который НЕ является спамом
4. Коммерческие намерения
4.2 Страницы только с PPC-рекламой
4.3 Припаркованные/просроченные домены
4.4 Страницы с бесполезным содержанием и PPC-рекламой
5. Фишинговые сайты
6. Спам и стадия решения
Скачать Руководство для асессоров (.pdf, 10 мегабайт)
А здесь ссылки на свежие руководства для асессоров от Яндекса и Google (июль 2014).
Руководство Search Quality Rating Guidelines на русском языке
Попал в руки занимательный документ — Руководство для асессоров Search Quality Rating Guidelines от Google (Система оценки качества сайтов).
В октябре 2011 года, судя по слухам, часть руководства утекла в Сеть и появилась в открытом доступе. Google предпринял попытки связаться с вебмастерами, которые разместили информацию в своих блогах, и удалить данные.
1 марта 2013 года Google официально выложил в открытый доступ урезанное руководство на английском языке (.PDF, 43 страницы).
В новой официальной версии, по данным сравнений с утерянным руководством, нет больших блоков таких как «Показатели оценки страниц», «Примеры оценок». Эти блоки содержали огромное количество примеров релевантных и нерелевантных страниц, методику выставления баллов и пр.
Оставьте своё мнение в комментариях о том, нужен ли перевод на русский язык?
Поделитесь в социальных сетях ссылкой на эту страницу.
upd: Ссылка на скачивание руководства Search Quality Rating Guidelines от Google (перевод на русский) здесь.
Читать онлайн «Размышления о будущем устройстве Тверской Карелии», Михаил Викторович Дронь – ЛитРес
В своих предыдущих книгах я довольно большое внимание уделил вопросам организации местного самоуправления в Тверской Карелии.
Новые муниципалитеты и их налоговая самостоятельность, оптимизация структуры местных органов власти и избирательной системы, сочетание прямой и делегатской демократии на уровне муниципалитетов, радикальное перераспределение полномочий в пользу городских и сельских поселений – все эти темы и не только стали объектом самого пристального интереса с моей стороны и, в конечном итоге, их сочетание позволило выдвинуть собственный проект системы местного самоуправления для нашего края.
Теперь же мне хотелось бы затронуть не менее важную тему и поделиться своими соображениями о выборе наиболее оптимальных моделей будущего государственного устройства Тверской Карелии. Но перед тем как перейти к их описанию, необходимо остановиться на трёх обязательных условиях, без которых ни одна из предложенных мною моделей государственного устройства не сможет устойчиво и эффективно функционировать. В некотором роде – это «три кита» будущей политической системы Тверской Карелии. С них мы и начнём.
1.
Классическое образование и Табель о рангахОсновой основ любой успешной государственности является наличие особой системы образования, которая существует независимо от общеобразовательных учебных заведений с их стандартами и изначально ориентирована на подготовку высокопрофессиональных управленцев. До 1917 года подобная образовательная модель была в Российской империи, в настоящее время она успешно функционирует в Великобритании. Если описать её в двух словах, то чиновником нельзя стать что называется со стороны, а только последовательно окончив специализированные средние учебные заведения и соответствующий университет.
Для Тверской Карелии это может быть один университет, состоящий из двух факультетов – права и историко-филологического, а также одного лицея при университете (полного аналога мужской классической гимназии в Российской империи) и одного епархиального училища (та же гимназия, только под эгидой епархии) в качестве средних учебных заведений. И лицей, и епархиальное училище – это школы, организованные по принципу пансиона с постоянным проживанием учащихся, где в основе программы обучения лежит классическое образование: древние языки (древнегреческий и латынь), современные языки (английский, французский и финский), математика, музыка, театральное искусство и атлетизм.
Обучение в лицее и епархиальном училище – 6 лет, обучение в университете – 4 года. Всё это очень похоже на спартанскую систему гражданского воспитания, но именно её и брали за основу англичане, когда перестраивали свою систему закрытых школ и университетов в середине XIX века.
Понятно, что никаких экзаменов при поступлении в университет нет: все, кто успешно окончил лицей и епархиальное училище, зачисляются в университет и по-другому в университет не поступить. Для наибольшего эффекта образовательного процесса и университет, и лицей, и епархиальное училище должны находиться в одном населённом пункте, желательно небольшом и в сельской местности. Наиболее оптимальный выбор как по своему географическому положению, так и исходя из истории Тверской Карелии – это село Толмачи.
Именно на такой системе образования в виде связки «лицей / епархиальное училище – университет» и может быть основана новая Табель о рангах, эта основа основ современной меритократии и ненаследуемой аристократии.
Табель о рангах в своё время стала гениальной инновацией Петра Великого, но как инструмент конструирования элиты и успешно функционирующих социальных лифтов она не потеряла своей актуальности и сегодня. Её можно даже почти без изменений переносить в наши дни, только сократив классы чинов – с 14-ти как было у Петра I, до, например, 8-ми, так как чиновничий аппарат в Тверской Карелии будет объективно несоизмеримо меньшим.
Возможна следующая редакция Табели о рангах.
I класс – статский советник.
II класс – коллежский советник (срок выслуги до I класса 4 года).
III класс – надворный советник (срок выслуги до II класса 4 года).
IV класс – коллежский асессор (срок выслуги до III класса 4 года).
V класс – титулярный советник (срок выслуги до IV класса 3 года).
VI класс – коллежский секретарь (срок выслуги до V класса 3 года).
VII класс – губернский советник (срок выслуги до VI класса 3 года).
VIII класс – коллежский регистратор, сенатский регистратор, синодский регистратор (срок выслуги до VII класса 3 года).
Всего получается 8 классов чинов. Начиная с V класса дети таких чиновников имеют право на преимущественное поступление в лицей при университете, а чиновники I и II класса – право на зачисление своих детей в лицей без экзаменов. После успешного окончания лицея и епархиального училища, и зачисления в университет присваивается VIII класс – и далее уже по выслуге лет, приведённой выше, вплоть до I класса. Получается 24 года службы, если без задержек и проволочек. Но в любом случае, получить V класс и выше можно лишь окончив университет.
Однако могут быть и промежуточные варианты. Таким вариантом, например, может стать гвардейский полк или же жандармский корпус – название на самом деле не так уж и принципиально. Идея состоит в том, что сразу после окончания университета его выпускники (будущие чиновники) в полном составе зачислялись в такой полк или жандармский корпус на 5 лет: первые два года несли обычную военную службу, соединённую с силовой поддержкой правопорядка, а оставшиеся три года – в качестве нижних чинов в судах, в полиции и в качестве судебных приставов как прикомандированные в эти учреждения по всей Тверской Карелии.
Но сам полк или жандармский корпус также должен дислоцироваться в Толмачах – там, где университет, лицей и епархиальное училище. Тогда получится, что после окончания лицея и епархиального училища, и зачисления в университет будет присвоен VIII класс, через три года учёбы в университете – VII класс, после окончания университета и двухлетней службы в полку или жандармском корпусе – VI класс, и по окончанию службы в полку или корпусе – как раз V класс.
2. Орден
Вторым базовым элементом модели управления для Тверской Карелии является обязательное наличие Ордена – корпорации «элиты живых», который сочетал бы в себе черты французского Ордена Почётного легиона, британских орденов Бани и Британской империи.
Моё видение такого Ордена для Тверской Карелии следующее.
Всего рангов три:
1) кавалер Большого Креста
2) кавалер-командор
3) кавалер
Соответственно, кавалеров Большого Креста – не более семи, кавалеров-командоров – не более двенадцати, всего кавалеров 1 и 2 рангов не может быть более 24-х.
В случае, если Тверская Карелия будет являться по форме правления монархией (княжеством), то Сувереном Ордена должен быть монарх, а Великим магистром – наследник престола; если же Тверская Карелия будет иметь во главе государства президента, то Великим магистром по должности станет президент. По истечении срока своих полномочий бывший президент становится кавалером Большого Креста, а вице-президент кавалером-командором. Кроме того, глава правительства, пробывший на своём посту не менее двух лет, также после ухода в отставку становится кавалером-командором Ордена.
Кавалерами в Орден принимаются все чиновники после получения ими V класса и достижения 30-летнего возраста. Также в Орден могут быть приняты и иные лица за выдающиеся заслуги перед Тверской Карелией, но их доля не должна превышать 25% от общей численности кавалеров Ордена: принятие в Орден за выдающиеся заслуги осуществляется Великим магистром только по представлению правительства или большинства кавалеров Большого Креста.
Кроме того, из числа гражданских лиц в Орден могут быть приняты представители только тех профессий, которые требуют определённой теоретической подготовки и общего высокого уровня культуры; артисты, художники и спортсмены не могут стать кавалерами Ордена за свои успехи в кино, театре, живописи и в спорте. Кавалеры Ордена имеют право для своих детей преимущественного поступления в лицей при университете, а кавалеры-командоры и кавалеры Большого Креста – право зачисления своих детей в лицей без экзаменов.
Для повседневного управления Орденом, Великим магистром назначаются пять специальных офицеров: канцлер Ордена, привратник, герольдмейстер, секретарь и диакон. Общее руководство Орденом и его структурами осуществляет канцлер в соответствии с указаниями Великого магистра. Привратник ответственен за проведение всех церемоний Ордена и поддержание порядка на всех орденских мероприятиях, а также за охрану и обеспечение безопасности зданий и служб Ордена. Диакон Ордена по должности является также настоятелем собора в Толмачах, а сам Толмачевский соборный храм «Богоявления Господня» – главной церковью Ордена, где проводятся все значимые орденские мероприятия (церковные службы, посвящения и интронизация Великого магистра).
Ежегодно на праздник Воздвижения Креста Господня 27 сентября все кавалеры Ордена во главе с Великим магистром собираются на генеральный капитул – общее собрание Ордена, в ходе которого происходит приём новых членов Ордена, посвящение в кавалеры-командоры и кавалеры Большого Креста, торжественное вступление в должность офицеров Ордена – канцлера, привратника, герольдмейстера и секретаря, также на генеральном капитуле канцлер представляет Ордену нового Суверена и Великого магистра. Кавалеры Ордена, проживающие и служащие на одной территории, вправе собираться на местные конвенты для решения вопросов, связанных с деятельностью Ордена в границах соответствующих территориальных образований. Очевидно, что штаб-квартира Ордена, орденский архив и музей должны располагаться в Толмачах.
Таким образом, Толмачи станут чем-то вроде Древней Спарты, где одновременно будут находиться университет, лицей при нём и епархиальное училище, гвардейский полк или жандармский корпус, инфраструктура Ордена (штаб-квартира, архив и музей), а также главный храм Ордена – Толмачевский собор.
Основная идея тут состоит в том, что будущие управленцы должны быть привязаны как друг к другу (они с детства вместе растут и идут по жизни через лицей и епархиальное училище, университет и военную службу), так и к конкретному месту, где сосредоточено всё, что им дорого в этой жизни, что делает их единым сословием. Но, повторюсь, такой населённый пункт должен быть расположен в живописной сельской местности, его население не должно быть многочисленным и там не должно быть никаких больших промышленных предприятий – одним словом, типичный «шир», что-то вроде Итона и Оксфорда вместе взятых.
Если же говорить о названии Ордена, то наиболее интересным мне представляется «Орден Святого Спаса» – в честь небесного покровителя тверской земли. Не случайно ведь, что на протяжении уже почти тысячелетия тверское Верхневолжье неофициально считается «Домом Святого Спаса».
3. Церковь
Третьим базовым элементом будущего политического устройства Тверской Карелии является придание православной церкви государственного статуса.
Проще говоря, православие должно вновь, как это и было до 1917 года, стать государственной религией, а иерархи Бежецкой епархии должны быть представлены в высших органах государственной власти Тверской Карелии и получить право на участие в принятии всех законов и важнейших политических решений.
Утверждение за православной церковью государственного статуса неизбежно повлечёт за собой формирование и самостоятельной епархиальной образовательной системы, которая станет частью независимой от общеобразовательных учебных заведений системы классического образования, нацеленной на подготовку профессиональных и высококвалифицированных управленцев. Так, епархиальное училище должно стать вторым, наряду с лицеем, средним учебным заведением, выпускники которого имели бы эксклюзивное право на зачисление в университет. Единственная разница между епархиальным училищем и лицеем состоит лишь в том, что количество учащихся в училище должно быть в половину меньше, чем в лицее при университете.
Кроме того, государственный статус православной церкви позволит полностью переориентировать всю систему помощи сиротам с государственной на церковную, а также передать Церкви все полномочия, связанные с регистрацией браков, разводов, рождений и смертей.
Вместо существующих детских домов и интернатов, сироты и дети, оставшиеся без попечения родителей, должны воспитываться в монастырях и церковных приютах Бежецкой епархии, а наиболее способные и талантливые из них – отбираться в епархиальное училище. Любое вмешательство со стороны государства в дела семьи, какое-либо правовое регулирование этой сферы должно быть полностью запрещено, семейное право, как в том же Израиле, вновь станет частью церковной юрисдикции: церковный суд следует наделить полномочиями высшей судебной инстанции по всем гражданским делам, связанных с вопросами семейного и наследственного права.
И вообще, на примере современного Израиля мы видим, как на практике может существовать и развиваться общество, в котором религии придан государственный статус. Так, религиозный суд является специализированным судом, рассматривающим вопросы личного статуса граждан и жителей Израиля, а также некоторые другие вопросы. В исключительную юрисдикцию религиозного суда входят дела, которые связаны с браком и разводом евреев, мусульман, друзов и христиан, относящихся к одной из официально признанных в Израиле христианских общин, а таковых на сегодняшний день 10: греческая православная, римско-католическая, армянская апостольская (армяно-григорианская), армяно-католическая, сирийская католическая (сиро-католическая), халдейская католическая, мелькитская грекокатолическая, маронитская католическая и сирийская православная, в 1970 году десятой признанной христианской общиной стала евангелическая епископальная община (диоцез Иерусалима).
Юрисдикция религиозного суда включает в себя такие вопросы, как содержание детей, алименты, опекунство, усыновление, раздел имущества супругов и наследство; сюда же входят вопросы создания и управления фондами, учреждёнными согласно религиозному праву.
В Израиле действуют раввинатский, мусульманский, христианский и друзский религиозные суды. Вопросы, связанные со структурой христианских судов, назначением судей и порядка судопроизводства, не оговорены в израильских законах и на практике регулируются каждой церковью самостоятельно в рамках её автономии. Каждый из религиозных судов состоит из двух инстанций – окружного и апелляционного религиозного суда. Религиозные суды в своих решениях опираются на религиозное право (к примеру, церковные суды – на каноническое право), а судьям религиозного суда гарантирована независимость при исполнении судебных полномочий. Сами законы сводят к минимуму вмешательство Верховного суда и других судебных органов израильского государства в решения религиозных судов, ограничивая такое вмешательство случаями, лишь когда речь идёт о превышении полномочий или несоблюдении положений закона.
Что-то подобное необходимо и нам в Тверской Карелии.
Теперь же, когда мы рассмотрели три обязательных условия любой успешной государственности, пришло время поговорить о моделях государственного устройства, которые могут стать образцом для нас в Тверской Карелии. И в качестве таковых я выбрал две: ту, что предложил правящий князь Лихтенштейна Ханс-Адам II в своей книге «Государство в третьем тысячелетии», и государственное устройство Великого княжества Финляндского до 1905 года. Коротко о каждой из них.
Яндекс объявляет о крупном обновлении алгоритма
Яндекс объявил об обновлении своей поисковой системы. Обновление называется Vega. Обновление предлагает много подробностей о том, как работают современные поисковые системы.
Основные улучшения Яндекса
Яндекс называет свое обновление Vega. Это обновление содержит 1500 улучшений. Из этих улучшений Яндекс выделил два, которые, по их словам, существенно влияют на результаты поиска.
Одно из изменений добавляет экспертную человеческую обратную связь в обучение алгоритма.
Вторым изменением стала возможность удвоить размер поискового индекса, не влияя на скорость результатов поиска.
Связанный: Полное руководство по поисковой оптимизации Яндекса
Краудсорсинг Оценщики результатов поиска
Google нанимает подрядчиков, прошедших обучение в соответствии с рекомендациями Google по оценке качества для оценки результатов поиска. Яндекс полагается на свою краудсорсинговую платформу Яндекс.Толока.
Хотя это может показаться немного менее контролируемым, чем метод Google, Яндекс предоставляет рекомендации для оценщиков, чтобы повысить точность оценок.
«Люди, или «оценщики», уже давно помогают обучать наши платформы машинного обучения через нашу краудсорсинговую платформу Яндекс.Толока.
Используя наши рекомендации по оценке результатов поиска, асессоры в Яндекс.Толоке выполняют задачи, которые помогают нам находить наиболее релевантные результаты для конкретных запросов».
Человеческий вклад в обучение алгоритмам
Мы знаем, что Google использует оценщиков качества для тестирования новых изменений алгоритмов.
То же самое делает и Яндекс. Они называют своих оценщиков оценщиками, потому что они оценивают веб-результаты.
Изменение, которое добавил Яндекс, заключалось в том, чтобы нанимать экспертов по заданной теме для проверки работы Асессоров с целью повышения точности их работы. Это означает, что обучающие данные, предоставленные алгоритму, будут лучше, поскольку они были проверены и подтверждены экспертом.
Поскольку обучающие данные Яндекса просматриваются экспертами по теме, алгоритм (предположительно) будет более точным, поскольку обучающие данные будут улучшены.
Вот как это объяснил Яндекс:
«Мы обновили алгоритм ранжирования с помощью нейронных сетей, обученных на данных, предоставленных реальными экспертами в нескольких областях, предоставляя пользователям еще более качественные решения их запросов.
Профессионалы, оценивающие экспертов, варьируются от ИТ-администраторов для запросов данных до гидрологов для поиска, связанного с реками.
Эксперты-оценщики используют более ста критериев для оценки работы оценщиков…
Обучая наши алгоритмы машинного обучения с экспертными оценками, наша поисковая система учится ранжировать релевантную информацию выше в результатах благодаря работе высококвалифицированной группы людей».
По теме: Интервью с поисковой командой Яндекса
Расширение поискового индекса с помощью кластеризации
Яндекс представил очень интересный способ обработки тематически похожих веб-страниц. Вместо того, чтобы искать ответ по всему индексу, Яндекс сгруппировал веб-страницы в тематические кластеры. Говорят, что это улучшает и ускоряет результаты поиска, позволяя поисковой системе выбирать ответ на релевантных страницах.
«Наши алгоритмы используют нейронные сети для группировки страниц в кластеры на основе их сходства. Когда пользователь вводит запрос, он ищется среди наиболее релевантного кластера страниц, а не всего нашего индекса».
Технология кластеризации Яндекса позволила Яндексу удвоить свой поисковый индекс, не влияя на скорость выбора веб-страницы.
Это очень интересно, потому что похоже на алгоритмы ранжирования ссылок, которые начинаются с исходных сайтов как представителей тем. Веб-страницы, на которые больше ссылок, расцениваются как менее релевантные теме. Страницы, расположенные ближе к исходной теме, считаются более релевантными.
Прогнозирование поисковых запросов и результатов
Интересным обновлением Яндекса является использование алгоритмов для прогнозирования того, что спросит пользователь, и «предварительной визуализации» результатов для этого поискового запроса. Хотя об этом было объявлено в контексте обновления Vega, на самом деле это было реализовано в марте 2019 года.
Что делает эту функцию хорошей, так это то, что она ускоряет время, необходимое для отображения пользователю результатов поиска, которые он ищет.
«С марта пользователи мобильных устройств Яндекса на Android осуществляют поиск с помощью технологии пререндеринга, которая предугадывает запрос пользователя и выбирает релевантные результаты по мере ввода пользователем».
Связанный: 9 Часто задаваемые вопросы о Яндексе SEO и контекстная реклама
Современный поиск информации
Яндекс — российская поисковая система, использующая нейронные сети и машинное обучение. Я считаю, что полезно понимать технологии, используемые во всем мире, потому что это позволяет мне быть в курсе того, что сегодня определяет современный поиск информации (бизнес поисковых систем).
Читайте официальный анонс обновления алгоритма Яндекса здесь:
https://yandex.com/company/blog/vega
Категория Новости SEO
Как Яндекс добился наибольшего улучшения в поисковой системе с помощью Толоки / Хабра
Введение
Прежде всего, я должен отметить, что современные технологии ML по-прежнему полагаются на человеческую оценку. Люди транскрибируют звук в текст, чтобы настроить алгоритмы распознавания голоса; люди оценивают релевантность справочных документов поисковым запросам, чтобы на них ориентировались формулы ранжирования поиска; люди классифицируют изображения, чтобы, обучившись на этих примерах, нейросеть смогла делать это дальше без людей и лучше людей.
Толока умеет все перечисленное. Итак, пришло время рассказать вам больше о платформе.
Задачи, о которых я говорил выше, обычно решает Яндекс с помощью подготовленных специалистов — асессоров. Оценщики смотрят, насколько результаты поиска соответствуют запросу, находят спам среди найденных веб-страниц, классифицируют его и решают аналогичные проблемы для других сервисов.
Ирония заключается в том, что по мере развития новых технологий растет потребность в человеческой оценке. Недостаточно просто определить релевантность страницы поисковому запросу. Важно понимать, не засорена ли страница вредоносной рекламой? Содержит ли страница контент для взрослых? И если это так, означает ли запрос пользователя, что это именно тот контент, который он искал? Чтобы автоматически учитывать все эти факторы, вам нужно собрать достаточно примеров для обучения поисковой системы. А так как в интернете все постоянно меняется, тренировочные наборы нужно постоянно обновлять и поддерживать в актуальном состоянии.
В целом, только для задач поисковых систем потребность в человеческих оценках измеряется миллионами в месяц, и это число только растет с каждым годом.
И не только это, поиск большего количества асессоров в разных странах — сложный процесс. Но для некоторых задач даже не требуется профессиональная подготовка — вот тогда мы полагаемся на краудсорсинг .
Толока
В фундаментальной логике любой краудсорсинговой платформы, а Толока в частности, нет ничего сложного. С одной стороны, Толока работает с пользователями, раздает задания, осуществляет платежи, а с другой стороны, Толока помогает клиентам получать результат с минимальными усилиями.
Некоторым компаниям нужны пользователи для классификации изображений, некоторым нужны пользователи для выбора определенного объекта на изображении. Потенциально задачи могут быть любыми с точки зрения входных данных, интерфейса и ожидаемых ответов. Например, вы можете проверить этот пост (на русском языке), где автор попросил толокеров (пользователей Толоки) сфотографировать свои счетчики воды, чтобы сделать набор данных для будущей нейронной сети, которая вводит измерения автоматически.
Как заработать с Толокой всем?
На самом деле очень просто! Если вам нужны люди для оценки данных даже с дополнительным обучением, то в Толоке есть множество руководств и готовых решений для постановки ваших задач. Вы можете выбрать любой аспект задачи: цену, качество оценки, рейтинги пользователей и т. д. Но если вы хотите зарабатывать с Толокой — вот вам краткое руководство. Лучше всего то, что вы получаете оплату практически мгновенно и можете легко вывести заработанные деньги.
Как вы обеспечиваете качество оценки?
Этот вопрос является серьезной проблемой для любой краудсорсинговой платформы. В Толоке есть старательные и внимательные люди, а есть ленивые, недобросовестные люди, умеющие писать сценарии. Основная задача — наградить честных людей и забанить пользователей скриптов. Для этого Толока обучена анализировать поведение пользователей. Клиенты теперь имеют возможность автоматически идентифицировать и ограничивать тех толокеров, которые, например, отвечают слишком быстро или чьи ответы не согласуются с ответами других.
Также в Толоке есть возможность использовать контрольные задания и обязательное принятие до оплаты. И приемку тоже можно упростить. Выдавайте задания одним пользователям, а оценку их результатов другим.
Улучшения
Итак, пришло время рассказать вам об улучшениях в Яндекс.Поиске и о том, как Толока уже помогла многим компаниям сделать их продукт лучше.
С помощью Толоки Яндекс создал новый алгоритм поиска под названием ЯТИ (Еще один трансформер с улучшениями). В отличие от предыдущих алгоритмов, YATI основан на нейросетях, прошедших серьезную подготовку на реальных ключевых фразах пользователей и открываемых ими страницах. Помимо самообучения, результаты проверяются и дополняются асессорами – специалистами, которые проводят экспертную оценку качества ранжирования текста. Алгоритм учится делить текстовый документ на зоны, отличающиеся своей значимостью в контексте введенного пользователем запроса. Фрагменты текста из наиболее важных областей также выбираются для ранжирования, в то время как наименее важные области игнорируются и не влияют на позиционирование сайта в результатах поиска.
Если страница содержит небольшое количество текста, то все это повлияет на ранжирование документа. По заявлениям представителей Яндекса, YATI изначально «обращает внимание» на заголовки документов — они должны соответствовать определенным запросам пользователей. Только после того, как это будет подтверждено, весь документ начинает участвовать в ранжировании.
Что такое трансформатор YATI?
Трансформеры — это сложные и большие нейронные сети, работа которых направлена на решение задач обработки и генерации текста. Это новый виток развития нейронных сетей, открывающий огромные возможности для различных сфер, в частности для построения алгоритмов ранжирования в поисковых системах. Теперь алгоритм поиска может сегментировать текстовые элементы на части по различным признакам и обрабатывать их по отдельности. Элемент представляет собой слово, знаки препинания и другие последовательности символов. Как отмечалось выше, в YATI есть механизм внимания, благодаря которому фрагменты вводимого текста отделяются и обрабатываются отдельно.
Например, это позволит понять, какая часть текста действительно важна для пользователей, и включить ее в факторы ранжирования, исключив при этом другие, неважные части. Это позволит значительно очистить результаты поиска от документов с некачественным содержанием.
Последовательность алгоритма обучения
На основе задач и особенностей ранжирования сеть обучается правилам языка по принципу маскированного моделирования языка. Входными данными являются пользовательский запрос и заголовок документа. Цель подхода — научить алгоритм предсказывать вероятность появления документа из результатов поиска по заданному ключевому слову.
Следующий шаг — дообучение алгоритма с помощью асессоров. Сначала данные изучают пользователи сервиса Толока. Как вы понимаете, это некачественная оценка релевантности запроса документу. Для улучшения этих показателей после толокеров данные перепроверяются специалистами самого Яндекса. В результате этих действий данные получают определенные оценки релевантности.
После этого полученная аналитика и сами данные отправляются на обработку, чтобы объединить их в сегменты по определенным признакам. Благодаря сбору итоговых метрик алгоритм оценивает уровень релевантности документа и пользовательского запроса.
Результаты
По данным Яндекса, качество ранжирования значительно повысилось с момента внедрения алгоритма, и YATI стал самым значимым нововведением последнего десятилетия. Алгоритм научился корректно искать не только короткие ключевые фразы, но и целые текстовые фрагменты. Учитывается не только порядок и форма слов, но и контекст введенного запроса, который сопоставляется с изучаемым документом. Такие улучшения позволят алгоритму «понимать» естественность языка, находить смысловые связи между словами и т. д. Поэтому, если смотреть с точки зрения пользователей поисковой системы Яндекс, YATI значительно улучшит качество результатов. Теперь сайты будут ранжироваться с максимальным совпадением по смыслу.