Индексация wordpress: Индексация страниц сайта — полное руководство

Содержание

Как в wordpress исключить страницы из поиска. Настройка robots.txt

Периодически перед веб-мастерами встает вопрос, как в WordPress исключить страницы из поиска. Это нужно для того, чтобы поисковые машины не индексировали технические страницы, персональные данные — информацию, которая не должна находиться в свободном доступе по разным причинам.

 

Индексация страниц и поисковая выдача

Как правило, процесс индексации Гугла означает, что бесчисленные армии ботов поисковика заходят на страницы сайта, исследуют их и если находят новые, то копируют и добавляют себе в базу данных.

Чтобы нежелательные для всеобщего обозрения материалы с сайтов не оказались в открытом доступе, сканирующим роботам следует дать установку, что индексировать, а что нет. После чего любой пользователь по ключевым словам сможет найти ссылки с искомой информацией.

Благодаря грамотной оптимизации и правильно подобранным ключевикам, сайты могут претендовать на высокие ранги поисковой выдачи. Значит на сайт будут приходить новые пользователи, которые могут стать вашими подписчиками или покупателями, в зависимости от того, на чем вы зарабатываете.

Кстати, если у вашего сайта индексируются не все страницы, прочитайте статью о том, как избавиться от этой проблемы. Ранее мы разбирали этот вопрос.

 

Почему так важно ограничить индексацию страниц?

На каждом сайте присутствуют материалы или целые категории, которые небходимо исключить из поиска. К примеру данные, указывающие на версию ядра Вордпресс,  плагинов и тем. Благодаря этой информации злоумышленникам будет легче найти уязвимости системы безопасности. О том, как улучшить защиту сайта и как удалить версию скрипта в wordpress мы говорили подробней в предыдущих статьях. В отсутствие аутентификации и кодов доступа приватные материалы рискуют стать достоянием общественности. Но если поисковым роботам не дать четкое направление, то они будут сканировать на вашем сайте все подряд, без разбора.

Около 20 лет назад злоумышленники использовали поисковик, чтобы найти информацию о банковских картах с сайтов. С помощью этой уязвимости хакеры похищали данные клиентов прямо с сайтов интернет-магазинов.

Такие казусы негативно скажутся на репутации бренда, что, как минимум, повлечет за собой отток клиентуры и соответственно экономические потери. Поэтому сотрудникам, отвечающим за безопасность интернет-магазинов или корпоративных ресурсов первым делом следует в wordpress исключить страницы поиска, то есть не допустить их индексации.

 

Как в WordPress исключить страницы из поиска

Исключить с помощью robots.txt

«Robots.txt» является файлом, указывающий поисковым ботам на контент, который нужно проиндексировать. В документе также можно запретить автоматике проникать и копировать определенные данные. В зависимости от того, какое кодовое значение вы внесете в файл. После того как вы закончите редактировать, документ надо будет разместить в корневой папке на хостинге. Как это сделать, рассмотрим ниже.

 

Какой код вставить в файл?

Перед вами перечень кодов, которые вы можете вставить в файл robots. txt. Их можно вставлять по отдельности или целыми блоками. В зависимости от того, что вы хотите индексировать в дальнейшем, а что скрыть. Сразу после списка вы сможете узнать, какой код к чему относится и что обозначает. Ознакомьтесь с ним ниже.

User-agent: *
Disallow: /cgi-bin          # классика...
Disallow: /?                # все параметры запроса на главной
Disallow: /wp-              # все файлы WP: /wp-json/, /wp-includes, /wp-content/plugins
Disallow: *?s=              # поиск
Disallow: *&s=              # поиск
Disallow: /search           # поиск
Disallow: /author/          # архив автора
Disallow: *?attachment_id=  # страница вложения. Вообще-то на ней редирект...
Disallow: */feed            # все фиды
Disallow: */rss             # rss фид
Disallow: */embed           # все встраивания
Disallow: */page/           # все виды пагинации
Allow: */uploads            # открываем uploads
Allow: /*/*.js              # внутри /wp- (/*/ - для приоритета)
Allow: /*/*.css             # внутри /wp- (/*/ - для приоритета)
Allow: /wp-*.
png # картинки в плагинах, cache папке и т.д. Allow: /wp-*.jpg # картинки в плагинах, cache папке и т.д. Allow: /wp-*.jpeg # картинки в плагинах, cache папке и т.д. Allow: /wp-*.gif # картинки в плагинах, cache папке и т.д. Allow: /wp-*.svg # картинки в плагинах, cache папке и т.д. Allow: /wp-*.pdf # файлы в плагинах, cache папке и т.д. #Disallow: /wp/ # когда WP установлен в подкаталог wp Sitemap: http://site.ru/sitemap.xml Sitemap: http://site.ru/sitemap2.xml # еще один файл #Sitemap: http://site.ru/sitemap.xml.gz # сжатая версия (.gz) Host: site.ru # для Яндекса и Mail.RU. (межсекционная) # Версия кода: 1.0 # Не забудьте поменять `site.ru` на ваш сайт.

Подробнее о коде:

В строке User-agent: * вы можете разрешить какой-либо поисковой системе индексировать страницы вашего сайта. Звездочка в конце означает, что любой бот из любого поисковика может проверять сайт. Но в случае если вы хотите ограничиться одним или несколькими системами то их следует указать. Для Гугла и Яндекса например:

User-agent: Yandex, User-agent: Googlebot

Allow: */uploads, данной командой мы даем согласие на индексацию страниц, где в URL есть слово/uploads. Очень важно это указать, ведь далее мы закрываем от индексации страницы, которые начинаются с /wp-, а /wp- является составляющей /wp-content/uploads. Таким образом, чтобы изменить  правило «

Disallow» wp- необходима строка Allow: */uploads.

Иные строки ограничивают переход ботов по URL. Они начинаются с кодов:

Disallow: /cgi-bin - закрывает каталог скриптов на сервере

Disallow: /feed - закрывает RSS фид блога

Disallow: /trackback - закрывает уведомления

Disallow: ?s= или Disallow: *?s= - закрыавет страницы поиска

Disallow: */page/ - закрывает все виды пагинации

Правило Sitemap: http://site. ru/sitemap.xml сообщает боту где находится файл с картой сайта в XML, если о его создании вы позаботились заранее. Нет? Тогда создайте, затем укажите роботу полный путь к документу, который может быть и не один. Если так, то путь прописываем к каждому индивидуально.

В директиве Host: site.ru мы сообщаем поисковику, какой домен следует считать главным зеркалом сайта. Это необходимо выполнить если у ресурса есть копии на других доменах, тогда Yandex будет индексировать их равнозначно. Почему в данном контексте мы говорим именно об этой поисковой системе? Дело в том, что

Host:
понимает только Yandex, но не Google. Это важно!

А если вы добавили для сайта безопасный протокол https, то не забудьте его прописать в URL сайта. Например Host: https://sitename.com

Ввиду того, что данная директива работает в разных частях robots.txt, то лучше ее ввести в самом начале или наоборот — внизу файла, сделав отступ размером в одну строку.

 

Не забудьте упорядочить правила перед обработкой.
Это важно!

Поисковики связываются с директивами Allow и Disallow, начиная не с первого и заканчивая последним, а в ином порядке — от короткого к длинному. Точка ставится после обработки крайнего правила:

User-agent: *
Allow: */uploads
Disallow: /wp-

То есть система считает данный код так:

User-agent: *
Disallow: /wp-
Allow: */uploads

Например, если бот исследует URL, заданные в формате: /wp-content/uploads/file.jpg, то правило Disallow: /wp- сообщит машине, что проверка не требуется,                                   а  Allow: */uploads сделает доступной для сканирования страницу по указанному вами адресу. Чтобы не перепутать и правильно отсортировать коды существует хороший совет: чем больше символов в конкретном правиле файла robots.txt, тем раньше оно будет обработано. Если же их количество не отличается друг от друга, то приоритет окажется у директив Allow.

 

С помощью WordPress плагина

Мы хотим вам рассказать о плагине, который может упростить вам задачу по работе с файлом robots. txt. Вам не нужно будет создавать его и самостоятельно размещать в корневой папке. Плагин оптимизации Clearfy готов сделать это за вас. Достаточно лишь подобрать необходимые директивы и создать правила. Скачайте и установите плагин, после чего в админке сайта перейдите в настройки приложения. Вот путь:

«Настройки» => «Clearfy меню» => «SEO»

Затем найдите строку «Создайте правильный robots.txt» и активируйте функцию, нажав кнопку ВКЛ.

После активации, ниже появится дополнительное поле, где вы сможете добавить правила для файла robots.txt. Туда нужно вставить код, который необходим, чтобы страницы сайта индексировались правильно.

Благодаря плагину вам не придется закачивать на хостинг файл robots.txt и скачивать обратно, чтобы внести правки.

Какие страницы сайта следует закрывать от индексации поисковых систем

Индексирование сайта – это процесс, с помощью которого поисковые системы, подобные Google и Yandex, анализируют страницы веб-ресурса и вносят их в свою базу данных. Индексация выполняется специальным ботом, который заносит всю необходимую информацию о сайте в систему – веб-страницы, картинки, видеофайлы, текстовый контент и прочее. Корректное индексирование сайта помогает потенциальным клиентам легко найти нужный сайт в поисковой выдаче, поэтому важно знать обо всех тонкостях данного процесса.

В сегодняшней статье я рассмотрю, как правильно настроить индексацию, какие страницы нужно открывать для роботов, а какие нет.

Почему важно ограничивать индексацию страниц

Заинтересованность в индексации есть не только у собственника веб-ресурса, но и у поисковой системы – ей необходимо предоставить релевантную и, главное, ценную информацию для пользователя. Чтобы удовлетворить обе стороны, требуется проиндексировать только те страницы, которые будут интересны и целевой аудитории, и поисковику.

Прежде чем переходить к списку ненужных страниц для индексации, давайте рассмотрим причины, из-за которых стоит запрещать их выдачу. Вот некоторые из них:

  1. Уникальность контента – важно, чтобы вся информация, передаваемая поисковой системе, была неповторима. При соблюдении данного критерия выдача может заметно вырасти. В противном случае поисковик будет сначала искать первоисточник – только он сможет получить доверие.
  2. Краулинговый бюджет – лимит, выделяемый сайту на сканирование. Другими словами, это количество страниц, которое выделяется каждому ресурсу для индексации. Такое число обычно определяется для каждого сайта индивидуально. Для лучшей выдачи рекомендуется избавиться от ненужных страниц.

В краулинговый бюджет входят: взломанные страницы, файлы CSS и JS, дубли, цепочки редиректов, страницы со спамом и прочее.

Что нужно скрывать от поисковиков

В первую очередь стоит ограничить индексирование всего сайта, который еще находится на стадии разработки. Именно так можно уберечь базу данных поисковых систем от некорректной информации. Если ваш веб-ресурс давно функционирует, но вы не знаете, какой контент стоит исключить из поисковой выдачи, то рекомендуем ознакомиться с нижеуказанными инструкциями.

PDF и прочие документы

Часто на сайтах выкладываются различные документы, относящиеся к контенту определенной страницы (такие файлы могут содержать и важную информацию, например, политику конфиденциальности).

Рекомендуется отслеживать поисковую выдачу: если заголовки PDF-файлов отображаются выше в рейтинге, чем страницы со схожим запросом, то их лучше скрыть, чтобы открыть доступ к наиболее релевантной информации. Отключить индексацию PDF и других документов вы можете в файле robots.txt.

Разрабатываемые страницы

Стоит всегда избегать индексации разрабатываемых страниц, чтобы рейтинг сайта не снизился. Используйте только те страницы, которые оптимизированы и наполнены уникальным контентом. Настроить их отображение можно в файле robots.txt.

Копии сайта

Если вам потребовалось создать копию веб-ресурса, то в этом случае также необходимо все правильно настроить. В первую очередь укажите корректное зеркало с помощью 301 редиректа.

Это позволит оставить прежний рейтинг у исходного сайта: поисковая система будет понимать, где оригинал, а где копия. Если же вы решитесь использовать копию как оригинал, то делать это не рекомендуется, так как возраст сайта будет обнулен, а вместе с ним и вся репутация.

Веб-страницы для печати

Иногда контент сайта требует уникальных функций, которые могут быть полезны для клиентов. Одной из таких является «Печать», позволяющая распечатать необходимые страницы на принтере. Создание такой версии страницы выполняется через дублирование, поэтому поисковые роботы могут с легкостью установить копию как приоритетную. Чтобы правильно оптимизировать такой контент, необходимо отключить индексацию веб-страниц для печати. Сделать это можно с использованием AJAX, метатегом <meta name=»robots» content=»noindex, follow»/> либо в файле robots.txt.

Формы и прочие элементы сайта

Большинство сайтов сейчас невозможно представить без таких элементов, как личный кабинет, корзина пользователя, форма обратной связи или регистрации. Несомненно, это важная часть структуры веб-ресурса, но в то же время она совсем бесполезна для поисковых запросов. Подобные типы страниц необходимо скрывать от любых поисковиков.

Страницы служебного пользования

Формы авторизации в панель управления и другие страницы, используемые администратором сайта, не несут никакой важной информации для обычного пользователя. Поэтому все служебные страницы следует исключить из индексации.

Личные данные пользователя

Вся персональная информация должна быть надежно защищена – позаботиться о ее исключении из поисковой выдачи нужно незамедлительно. Это относится к данным о платежах, контактам и прочей информации, идентифицирующей конкретного пользователя.

Страницы с результатами поиска по сайту

Как и в случае со страницами, содержащими личные данные пользователей, индексация такого контента не нужна: веб-страницы результатов полезны для клиента, но не для поисковых систем, так как содержат неуникальное содержание.

Сортировочные страницы

Контент на таких веб-страницах обычно дублируется, хоть и частично. Однако индексация таких страниц посчитается поисковыми системами как дублирование. Чтобы снизить риск возникновения таких проблем, рекомендуется отказаться от подобного контента в поисковой выдаче.

Пагинация на сайте

Пагинация – без нее сложно представить существование любого крупного веб-сайта. Чтобы понять ее назначение, приведу небольшой пример: до появления типичных книг использовались свитки, на которых прописывался текст. Прочитать его можно было путем развертывания (что не очень удобно). На таком длинном холсте сложно найти нужную информацию, нежели в обычной книге. Без использования пагинации отыскать подходящий раздел или товар также проблематично.

Пагинация позволяет разделить большой массив данных на отдельные страницы для удобства использования. Отключать индексирование для такого типа контента нежелательно, требуется только настроить атрибуты rel=»canonical», rel=»prev» и rel=»next». Для Google нужно указать, какие параметры разбивают страницы – сделать это можно в Google Search Console в разделе «Параметры URL».

Помимо всего вышесказанного, рекомендуется закрывать такие типы страниц, как лендинги для контекстной рекламы, страницы с результатами поиска по сайту и поиск по сайту в целом, страницы с UTM-метками.

Какие страницы нужно индексировать

Ограничение страниц для поисковых систем зачастую становится проблемой – владельцы сайтов начинают с этим затягивать или случайно перекрывают важный контент. Чтобы избежать таких ошибок, рекомендуем ознакомиться с нижеуказанным списком страниц, которые нужно оставлять во время настройки индексации сайта.

  1. В некоторых случаях могут появляться страницы-дубликаты. Часто это связано со случайным созданием дублирующих категорий, привязкой товаров к нескольким категориям и их доступность по различным ссылкам. Для такого контента не нужно сразу же бежать и отключать индексацию: сначала проанализируйте каждую страницу и посмотрите, какой объем трафика был получен. И только после этого настройте 301 редиректы с непопулярных страниц на популярные, затем удалите те, которые совсем не эффективны.
  2. Страницы смарт-фильтра – благодаря им можно увеличить трафик за счет низкочастотных запросов. Важно, чтобы были правильно настроены мета-теги, 404 ошибки для пустых веб-страниц и карта сайта.

Соблюдение индексации таких страниц может значительно улучшить поисковую выдачу, если ранее оптимизация не проводилась.

Как закрыть страницы от индексации

Мы детально рассмотрели список всех страниц, которые следует закрывать от поисковых роботов, но о том, как это сделать, прошлись лишь вскользь – давайте это исправлять. Выполнить это можно несколькими способами: с помощью файла robots.txt, добавления специальных метатегов, кода, сервисов для вебмастеров, а также с использованием дополнительных плагинов. Рассмотрим каждый метод более детально.

Способ 1: Файл robots.txt

Данный текстовый документ – это файл, который первым делом посещают поисковики. Он предоставляет им информацию о том, какие страницы и файлы на сайте можно обрабатывать, а какие нет. Его основная функция – сократить количество запросов к сайту и снизить на него нагрузку. Он должен удовлетворять следующим критериям:

  • наименование прописано в нижнем регистре;
  • формат указан как .txt;
  • размер не должен превышать 500 Кб;
  • местоположение – корень сайта;
  • находится по адресу URL/robots.txt, при запросе сервер отправляет в ответ код 200.

Прежде чем переходить к редактированию файла, рекомендую обратить внимание на ограничивающие факторы.

  • Директивы robots.txt поддерживаются не всеми поисковыми системами. Большинство поисковых роботов следуют тому, что написано в данном файле, но не всегда придерживаются правил. Чтобы полностью скрыть информацию от поисковиков, рекомендуется воспользоваться другими способами.
  • Синтаксис может интерпретироваться по-разному в зависимости от поисковой системы. Потребуется узнать о синтаксисе в правилах конкретного поисковика.
  • Запрещенные страницы в файле могут быть проиндексированы при наличии ссылок из прочих источников. По большей части это относится к Google – несмотря на блокировку указанных страниц, он все равно может найти их на других сайтах и добавить в выдачу. Отсюда вытекает то, что запреты в robots.txt не исключают появление URL и другой информации, например, ссылок. Решить это можно защитой файлов на сервере при помощи пароля либо директивы noindex в метатеге.

Файл robots.txt включает в себя такие параметры, как:

  • User-agent – создает указание конкретному роботу.
  • Disallow – дает рекомендацию, какую именно информацию не стоит сканировать.
  • Allow – аналогичен предыдущему параметру, но в обратную сторону.
  • Sitemap – позволяет указать расположение карты сайта sitemap.xml. Поисковый робот может узнать о наличии карты и начать ее индексировать.
  • Clean-param – позволяет убрать из индекса страницы с динамическими параметрами. Подобные страницы могут отдавать одинаковое содержимое, имея различные URL-страницы.
  • Crawl-delay – снижает нагрузку на сервер в том случае, если посещаемость поисковых ботов слишком велика. Обычно используется на сайтах с большим количеством страниц.

Теперь давайте рассмотрим, как можно отключить индексацию определенных страниц или всего сайта. Все пути в примерах – условные. 

Пропишите, чтобы исключить индексацию сайта для всех роботов:


User-agent: *

Disallow: /

Закрывает все поисковики, кроме одного:


User-agent: *

Disallow: /

User-agent: Google

Allow: /

Запрет на индексацию одной страницы:


User-agent: *

Disallow: /page.html

Закрыть раздел:


User-agent: *

Disallow: /category

Все разделы, кроме одного:


User-agent: *

Disallow: /

Allow: /category

Все директории, кроме нужной поддиректории:


User-agent: *

Disallow: /direct

Allow: /direct/subdirect

Скрыть директорию, кроме указанного файла:


User-agent: *

Disallow: /category

Allow: photo. png

Заблокировать UTM-метки:


User-agent: *

Disallow: *utm=

Заблокировать скрипты:


User-agent: * 

Disallow: /scripts/*.js

Я рассмотрел один из главных файлов, просматриваемых поисковыми роботами. Он использует лишь рекомендации, и не все правила могут быть корректно восприняты.

Способ 2: HTML-код

Отключение индексации можно осуществить также с помощью метатегов в блоке <head>. Обратите внимание на атрибут «content», он позволяет:

  • активировать индексацию всей страницы;
  • деактивировать индексацию всей страницы, кроме ссылок;
  • разрешить индексацию ссылок;
  • индексировать страницу, но запрещать ссылки;
  • полностью индексировать веб-страницу.

Чтобы указать поискового робота, необходимо изменить атрибут «name», где устанавливается значение yandex для Яндекса и googlebot – для Гугла. Yandex» search_bot

Способ 4: Для WordPress

На CMS запретить индексирование всего сайта или страницы гораздо проще. Рассмотрим, как это можно сделать.

Как скрыть весь сайт

Открываем административную панель WordPress и переходим в раздел «Настройки» через левое меню. Затем перемещаемся в «Чтение» – там находим пункт «Попросить поисковые системы не индексировать сайт» и отмечаем его галочкой.

В завершение кликаем по кнопке «Сохранить изменения» – после этого система автоматически отредактирует файл robots.txt.

Как скрыть отдельную страницу

Для этого необходимо установить плагин Yoast SEO. После этого открыть страницу для редактирования и промотать в самый низ – там во вкладке «Дополнительно» указать значение «Нет».

Способ 5: Сервисы для вебмастеров

В Google Search Console мы можем убрать определенную страницу из поисковика. Для этого достаточно перейти в раздел «Индекс Google» и удалить выбранный URL.

Процедура запрета на индексацию выбранной страницы может занять некоторое время. Аналогичные действия можно совершить в Яндекс.Вебмастере. 

На этом статья подходит к концу. Надеюсь, что она была полезной. Теперь вы знаете, что такое индексация сайта и как ее правильно настроить. Удачи!

Как закрыть сайт или его страницы от индексации: подробная инструкция

Что нужно закрывать от индексации

Важно, чтобы в поисковой выдаче были исключительно целевые страницы, соответствующие запросам пользователей. Поэтому от индексации в обязательном порядке нужно закрывать:

1. Бесполезные для посетителей страницы или контент, который не нужно индексировать. В зависимости от CMS, это могут быть:

  • страницы административной части сайта;
  • страницы с личной информацией пользователей, например, аккаунты в блогах и на форумах;
  • дубли страниц;
  • формы регистрации, заказа, страница корзины;
  • страницы с неактуальной информацией;
  • версии страниц для печати;
  • RSS-лента;
  • медиа-контент;
  • страницы поиска и т. д.

2. Страницы с нерелевантным контентом на сайте, который находится в процессе разработки.

3. Страницы с информацией, предназначенной для определенного круга лиц, например, корпоративные ресурсы для взаимодействий между сотрудниками одной компании.

4. Сайты-аффилиаты.

Если вы закроете эти страницы, процесс индексации других, наиболее важных для продвижения страниц сайта ускорится.

    Способы закрытия сайта от индексации

    Закрыть сайт или страницы сайта от поисковых краулеров можно следующими способами:

    1. С помощью файла robots.txt и специальных директив.
    2. Добавив метатеги в HTML-код отдельной страницы.
    3. С помощью специального кода, который нужно добавить в файл .htaccess.
    4. Воспользовавшись специальными плагинами (если сайт сделан на популярной CMS).

    Далее рассмотрим каждый из этих способов.

    С помощью robots.txt

    Robots.txt — текстовый файл, который поисковые краулеры посещают в первую очередь. Здесь для них прописываются указания — так называемые директивы.

    Этот файл должен соответствовать следующим требованиям:

    • название файла прописано в нижнем регистре;
    • он имеет формат .txt;
    • его размер не превышает 500 КБ;
    • находится в корне сайте;
    • файл доступен по адресу URL сайта/robots.txt, а при его запросе сервер отправляет в ответ код 200 ОК.

    В robots.txt прописываются такие директивы:

    • User-agent. Показывает, для каких именно роботов предназначены директивы.
    • Disallow. Указывает роботу на то, что некоторое действие (например, индексация) запрещено.
    • Allow. Напротив, разрешает совершать действие.
    • Sitemap. Указывает на прямой URL-адрес карты сайта.
    • Clean-param. Помогает роботу Яндекса правильно определять страницу для индексации.
    • Crawl-delay. Позволяет задать роботу Яндекса диапазон времени между окончанием загрузки одной страницы и началом загрузки другой. Измеряется в секундах.
    Имейте в виду: поскольку информация в файле robots.txt — это скорее указания или рекомендации, нежели строгие правила, некоторые системы могут их игнорировать. В таком случае в индекс попадут все страницы вашего сайта.
    Полный запрет сайта на индексацию в robots.txt

    Вы можете запретить индексировать сайт как всем роботам поисковой системы, так и отдельно взятым. Например, чтобы закрыть весь сайт от робота Яндекса, который сканирует изображения, нужно прописать в файле следующее:

    User-agent: YandexImages 
    Disallow: /  

    Чтобы закрыть для всех роботов:

    User-agent: * 
    Disallow: / 

    Чтобы закрыть для всех, кроме указанного:

    User-agent: * 
    Disallow: / 
    User-agent: Yandex 
    Allow: / 

    В данном случае, как видите, индексация доступна для роботов Яндекса.

    Запрет на индексацию отдельных страниц и разделов сайта

    Для запрета на индексацию одной страницы достаточно прописать ее URL-адрес (домен не указывается) в директиве файла:

    User-agent: *
    Disallow: /registration.html

    Чтобы закрыть раздел или категорию:

    User-agent: *
    Disallow: /category/  

    Чтобы закрыть все, кроме указанной категории:

    User-agent: *
    Disallow: /
    Allow: /category

    Чтобы закрыть все категории, кроме указанной подкатегории:

    User-agent: *
    Disallow: /uslugi
    Allow: /uslugi/main 

    В качестве подкатегории здесь выступает «main».

    Запрет на индексацию прочих данных

    Чтобы скрыть директории, в файле нужно указать:

    User-agent: *
    Disallow: /portfolio/ 

    Чтобы скрыть всю директорию, за исключением указанного файла:

    User-agent: *
    Disallow: /portfolio/
    Allow: avatar.png 

    Чтобы скрыть UTM-метки:

    User-agent: *
    Disallow: *utm= 

    Чтобы скрыть скриптовые файлы, нужно указать следующее:

      User-agent: *  
      Disallow: /scripts/*.ajax
    

    По такому же принципу скрываются файлы определенного формата:

    User-agent: *
    Disallow: /*.png

    Вместо .png подставьте любой другой формат.

    Через HTML-код

    Запретить индексировать страницу можно также с помощью метатегов в блоке <head> в HTML-коде.

    Атрибут «content» здесь может содержать следующие значения:

    • index. Разрешено индексировать все содержимое страницы;
    • noindex. Весь контент страницы, кроме ссылок, закрыт от индексации;
    • follow. Разрешено индексировать ссылки;
    • nofollow. Разрешено сканировать контент, но ссылки при этом закрыты от индексации;
    • all. Все содержимое страницы подлежит индексации.

    Открывать и закрывать страницу и ее контент можно для краулеров определенной ПС. Для этого в атрибуте «name» нужно указать название робота:

    • yandex — обозначает роботов Яндекса:
    • googlebot — аналогично для Google.
    Помимо прочего, существует метатег Meta Refresh. Как правило, Google не индексирует страницы, в коде которых он прописан. Однако использовать его именно с этой целью не рекомендуется.

    Так выглядит фрагмент кода, запрещающий индексировать страницу:

    <html>
        <head>
            <meta name="robots" content="noindex, nofollow" />
        </head>
        <body>...</body>
    </html>

    Чтобы запретить индексировать страницу краулерам Google, нужно ввести:

    <meta name="googlebot" content="noindex, nofollow"/>

    Чтобы сделать то же самое в Яндексе:

    <meta name="yandex" content="none"/>

    На уровне сервера

    В некоторых случаях поисковики игнорируют запреты и продолжают индексировать все данные.Yandex» search_bot

    На WordPress

    В процессе создания сайта на готовой CMS нужно закрывать его от индексации. Здесь мы разберем, как сделать это в популярной CMS WordPress.

    Закрываем весь сайт

    Закрыть весь сайт от краулеров можно в панели администратора: «Настройки» => «Чтение». Выберите пункт «Попросить поисковые системы не индексировать сайт». Далее система сама отредактирует файл robots.txt нужным образом.


    Закрытие сайта от индексации через панель администратора в WordPress

    Закрываем отдельные страницы с помощью плагина Yoast SEO

    Чтобы закрыть от индексации как весь сайт, так и его отдельные страницы или файлы, установите плагин Yoast SEO.

    Для запрета на индексацию вам нужно:

    • Открыть страницу для редактирования и пролистать ее вниз до окна плагина.
    • Настроить режим индексации на вкладке «Дополнительно».


    Закрытие от индексации с помощью плагина Yoast SEO


    Настройка режима индексации

    Запретить индексацию сайта на WordPress можно также через файл robots.txt. Отметим, что в этом случае требуется особый подход к редактированию данного файла, так как необходимо закрыть различные служебные элементы: страницы рассылок, панели администратора, шаблоны и т.д. Если этого не сделать, в поисковой выдаче могут появиться нежелательные материалы, что негативно скажется на ранжировании всего сайта.

    Как узнать, закрыт ли сайт от индексации

    Есть несколько способов, которыми вы можете воспользоваться, чтобы проверить, закрыт ли ваш сайт или его отдельная страница от индексации или нет. Ниже рассмотрим самые простые и удобные из них.

    В Яндекс.Вебмастере

    Для проверки вам нужно пройти верификацию в Яндексе, зайти в Вебмастер, в правом верхнем углу найти кнопку «Инструменты», нажать и выбрать «Проверка ответа сервера».


    Проверка возможности индексации страницы в Яндекс.Вебмастере

    В специальное поле на открывшейся странице вставляем URL интересующей страницы. Если страница закрыта от индексации, то появится соответствующее уведомление.


    Так выглядит уведомление о запрете на индексацию страницы

    Таким образом можно проверить корректность работы файла robots.txt или плагина для CMS.

    В Google Search Console

    Зайдите в Google Search Console, выберите «Проверка URL» и вставьте адрес вашего сайта или отдельной страницы.


    Проверка возможности индексации в Google Search Console

    С помощью поискового оператора

    Введите в поисковую строку следующее: site:https:// + URL интересующего сайта/страницы. В результатах вы увидите количество проиндексированных страниц и так поймете, индексируется ли сайт поисковой системой или нет.


    Проверка индексации сайта в Яндексе с помощью специального оператора


    Проверка индексации отдельной страницы

    С помощью такого же оператора проверить индексацию можно и в Google.

    С помощью плагинов для браузера

    Мы рекомендуем использовать RDS Bar. Он позволяет увидеть множество SEO-показателей сайта, в том числе статус индексации страницы в основных поисковых системах.


    Плагин RDS Bar

    Итак, теперь вы знаете, когда сайт или его отдельные страницы/элементы нужно закрывать от индексации, как именно это можно сделать и как проводить проверку, и можете смело применять новые знания на практике.

    Файл robots.txt для WordPress. Создание и правильная индексация

    В интернете можно найти много статей какой robots.txt для WordPress лучше использовать, но безусловно администратор сайта должен самостоятельно определить, что необходимо отдавать ботам для индексации, а что запрещать.

    Я как и многие другие потратив приличное количество времени на поиск оптимального шаблона robots.txt уяснил только одно, что конкретного варианта нет. Вы можете экспериментировать, никто вам этого не запрещает.

    Создаем robots.txt для WordPress

    Ниже представлен код одного из моих проектов про технологии и гаджеты, посещаемость ресурса более 7500 уникальных посетителей  в сутки.
    В своем каталоге сайта создайте файл и за основу можете взять мой robots.txt:

    User-agent: *                      #Для всех ботов, кроме Яндекса и Google
    Allow: /wp-content/plugins/*.js    #Разрешаем js-скрипты в папке плагинов 
    Allow: /wp-content/plugins/*.css   #Разрешаем css файлы в папке плагинов
    Allow: /wp-content/plugins/*.jpg   #Разрешаем картинки в папке плагинов
    Allow: /wp-content/plugins/*.jpeg  #Разрешаем картинки в папке плагинов
    Allow: /wp-content/plugins/*.png   #Разрешаем картинки в папке плагинов 
    Allow: /wp-includes/*.js           #Разрешаем js-скриты в главной папке WordPress
    Allow: /wp-includes/*.css          #Разрешаем css в главной папке WordPress
    Allow: /wp-content/themes/*.js     #Разрешаем js-скриты в теме
    Allow: /wp-content/themes/*.css    #Разрешаем css файлы в теме
    Allow: /wp-content/uploads/*.jpg   #Разрешаем индексировать загруженные картинки
    Allow: /wp-content/uploads/*.jpeg  #Разрешаем индексировать загруженные картинки
    Allow: /wp-content/uploads/*.gif   #Разрешаем индексировать загруженные картинки
    Allow: /wp-content/uploads/*.png   #Разрешаем индексировать загруженные картинки
    Disallow: /xmlrpc.php              #Запрещаем файл интеграции WordPress API
    Disallow: /cgi-bin                 #Запрещаем папку со скриптами
    Disallow: /wp-admin                #Запрещаем файлы в административной части WordPress
    Disallow: /wp-includes             #Запрещаем файлы в ядре WordPress
    Disallow: /wp-content/plugins      #Запрещаем файлы плагинов
    Disallow: /wp-content/cache        #Запрещаем кеш, отдаем только актуальные файлы
    Disallow: /wp-content/themes       #Запрещаем файлы тем
    Disallow: /trackback               #Запрещаем уведомления о ссылках
    Disallow: */feed                   #Запрещаем фиды
    Disallow: */comment                #Запрещаем комментарии
    Disallow: *comments                #Запрещаем комментарии
    Disallow: */attachment             #Запрещаем вложения
    Disallow: /author/*                #Запрещаем страницы авторов и пользователей
    Disallow: /page/                   #Запрещаем индексировать страницы пагинации
    Disallow: *page                    #Запрещаем индексировать страницы пагинации
    Disallow: /*?                      #Запрещаем индексировать страницы поиска
    
    
    
    User-agent: GoogleBot              #Только для Google
    Allow: /wp-content/plugins/*.js
    Allow: /wp-content/plugins/*.css
    Allow: /wp-content/plugins/*.jpg
    Allow: /wp-content/plugins/*.jpeg
    Allow: /wp-content/plugins/*.png
    Allow: /wp-includes/*.js
    Allow: /wp-includes/*.css
    Allow: /wp-content/themes/*.js
    Allow: /wp-content/themes/*.css
    Allow: /wp-content/uploads/*.jpg
    Allow: /wp-content/uploads/*.jpeg
    Allow: /wp-content/uploads/*.gif
    Allow: /wp-content/uploads/*.png
    Disallow: /xmlrpc.php
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /trackback
    Disallow: */feed
    Disallow: */comment
    Disallow: *comments
    Disallow: */attachment
    Disallow: /author/*
    Disallow: /page/
    Disallow: *page
    Disallow: /*?
    
    User-agent: Yandex                 #Только для Яндекса
    Allow: /wp-content/plugins/*.js 
    Allow: /wp-content/plugins/*.css
    Allow: /wp-content/plugins/*.jpg
    Allow: /wp-content/plugins/*.jpeg
    Allow: /wp-content/plugins/*.png
    Allow: /wp-includes/*.js
    Allow: /wp-includes/*.css
    Allow: /wp-content/themes/*.js
    Allow: /wp-content/themes/*.css
    Allow: /wp-content/uploads/*.jpg
    Allow: /wp-content/uploads/*.jpeg
    Allow: /wp-content/uploads/*.gif
    Allow: /wp-content/uploads/*.png
    Allow: /feed/dzen/                 #Разрешаю Яндекс Дзен (моя ссылка)
    Allow: /feed/turbo/                #Разрешаю Янжекс Турбо (моя ссылка)
    Disallow: /xmlrpc.php
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /trackback
    Disallow: */feed
    Disallow: */comment
    Disallow: *comments
    Disallow: */attachment
    Disallow: /author/*
    Disallow: /page/
    Disallow: *page
    Disallow: /*?
    
    Host: https://woohelp.ru       #Ссылка на сайт
    Sitemap: https://woohelp.ru/sitemap.xml     #Карта сайта
    Sitemap: https://woohelp.ru/sitemap.xml.gz  #Сжатая карта сайта

    Правильный Robots.txt для WordPress. Подведём итоги

    Сегодня файл robots.txt не влияет на индексацию вашего сайта. Я видел у конкурентных мне сайтов (по категории технологии) совершенно открытый robots.txt ко всем ресурсам и многие из них находятся в топе по ключевым запросам.

    Благодаря правильному файлу robots.txt вы можете уменьшить количество мусора в поисковике. Представьте если бы индексировали комментарии на форуме или в статье, то был бы прямо говоря бардак.

    Правильная настройка Yoast SEO плагина для WordPress

    В этой статье вы узнаете как правильно настроить Yoast seo плагин для WordPress в 2018 году. Что значительно поможет вашему сайту при продвижении в ТОП поисковых систем. На сайте brain-on.ru мы используем именно этот плагин.

    Установка плагина

    Скачать бесплатно Yoast можно прямо из WordPress консоли, в разделе «Плагины». Либо загрузить его с компьютера, в случае покупки Premium редакции.

    Правильная настройка Yoast SEO

    После установки плагина идем во вкладку «Возможности» и включаем «Дополнительные настройки страницы». Теперь нам доступны тонкие настройки seo.

    Не забудьте включить расширенный режим

    Начать рекомендуем с «Мастера настройки» на вкладке «Общие». Где шаг за шагом вы настроите большую часть параметров.

    В блоке «Дополнительно» / «Постоянные ссылки» включить «Перенаправлять URL вложений на URL родительской записи».

    Индексация и шаблоны мета-описаний

    Теперь необходимо определиться, что должно попасть в поиск а что нет, index и noindex соответственно. И как будут выглядеть поисковые сниппеты, а именно Заголовок (title) и Описание (description) для различных типов записей. Здесь мы определяем шаблон, что удобно когда записей или страниц большое количество. Для каждой отдельной сущности можно будет переопределить эти значения на странице ее редактирования. Как составить правильные мета-данные мы расскажем в отдельной статье.

    «Главная страница»

    Настраивается когда на главной странице у вас лента блога. Если же в качестве главной используется другая страница, настроить ее название и мета-описание можно редактированием самой страницы.

    «Типы записей»

    Для Записей (post) и Страниц (page) мы всегда разрешаем индексацию. Иначе они пропадут из поисковых систем.

    настройки индексации для Страниц и Записей

    Для Медиафайлов я настоятельно рекомендую выключить индексацию, выбрав noindex.

    Что касается других типов записей — зависит от ваших потребностей. Если вы приобрели платный шаблон с большим количеством типов (например Портфолио, Отзывы, Наша команда, Награды), то качественно описанные выполненные работы или проекты должны попасть в выдачу поисковика. Остальным страницам, скорее всего, там делать нечего — ставим Meta robots noindex. Если сомневаетесь убирать или нет — задайте вопрос в комментариях под статьей, попробуем разобраться вместе.

    «Таксономии»

    Здесь все запрещаем и «Архивы по формату» ставим Отключено.

    выключаем индексацию для списков Таксономий

    «Архивы»

    Архивы по датам и авторам мы запрещаем к индексации.

    XML-карта сайта Yoast SEO

    Оставляем включенными те типы, которые хотим скормить поиску. Страница и Запись — да, Медиафайлы — нет.

    настройка карты сайта sitemap.xml

    Совет: запрещая или разрешая индексацию страниц и записей, руководствуйтесь здравым смыслом. Поисковики ждут от вас контент, который ищут ваши посетители.

    Хлебные крошки Yoast SEO

    Как правило, в темах WordPress они предусмотрены по умолчанию. Если же их нет, добавить хлебные крошки на сайт можно через yoast плагин.

    Как добавить хлебные крошки на WordPress

    Внимание! Если вы новичок, обратитесь к профессиональным разработчикам. Иначе, вы можете вывести из строя весь сайт.

    Добавьте этот код в том месте темы, где хотите отобразить хлебные крошки. Чаще всего это файлы index.php и/или page.php, реже header.php.

    <?php if (function_exists('yoast_breadcrumb')) {
        yoast_breadcrumb(' <p>','</p> ');
    } ?>

    После чего включите их в блоке «Дополнительно» / «Хлебные крошки».

    включаем хлебные крошки WordPress Yoast seo

    Редактирование robots.txt и .htaccess в Yoast

    Отредактировать robots.txt и .htaccess файлы можно в разделе Инструменты. В этом же блоке доступно групповое редактирование заголовков и описаний страниц. Также имеется Импорт и Экспорт настроек плагина.

    групповой редактор мета-описаний и Заголовков

    Заголовки и мета-описания отдельных страниц

    С плагином Yoast seo заголовок и description можно сделать отличными от шаблона для каждой отдельной страницы. Нажмите кнопку «Изменить сниппет». Там же можно задать url (canonical) для вашей страницы.

    настройка заголовка страницы в yoast seo

    И yoast seo сразу показывает как будут выглядеть title и description в поиске:

    новые description и title yoast seo

    Ключевые слова и «фокусное слово»

    Фокусное слово носит рекомендательный характер и напоминает, что каждая страница сайта имеет цель — отвечать запросам пользователей. Чтобы не раздражали красные кружочки снизу, достаточно использовать одно фокусное слово в той же словоформе что и ключевое слово в заголовке страницы.

    WooCommerce и Yoast SEO

    WooCommerce Товары это один из типов Записей. Настраиваются они точно также как и другие типы, о которых написано выше. Вы можете отредактировать Заголовки и description на самих страницах товаров.

    Вопросы и ответы

    В: Стоит ли покупать Premium Yoast SEO?
    О: Расширенная (Premium) версия содержит множество полезные дополнений. Однако, даже бесплатная закрывает 90% потребностей. Если вы решили поставить Premium, в связи с участившимися взломами nulled версий тем и плагинов, мы рекомендуем его купить. Крайне НЕ рекомендуем использовать взломанный yoast seo premium, так как это чревато дырами в безопасности на вашем сайте.

    В: Как убрать префикс у категорий и тегов?
    О: Удалить префикс у категорий (как правило «/category/») можно в блоке «Дополнительно» / «Постоянные ссылки».

    В: Как WordPress связать с Google Webmasters?
    О: В меню «Консоль поиска» вы можете подключить Search Console от Google и анализировать поисковые переходы прямо из wordpress.

    В: Что еще можно сделать?
    О: Можно пройти по всем страницам плагина и разобраться с каждой опцией. Но описанных в статье функций достаточно, чтобы качественно настроить индексацию WordPress сайта. Рекомендую почитать другие наши статьи по SEO.

    В: Как настроить robots.txt в Yoast SEO для личного блога?
    О: Для блога данная статья актуальна. Проведите настройку по принципу, который описан. Если будут ещё вопросы, задавайте в комментариях.

    В: Стоит ли добавлять ключевые слова на каждую страницу в вордпрессе в 2018 году?
    О: Если речь идет о мета теге keywords, то его использовать не нужно. Если же мы говорим об оптимизации контента, то это делать надо обязательно!

    Как в WordPress скрыть от поисковых систем конкретную страницу?

    👍 Научим создавать сайты на WordPress бесплатно за 11 уроков. Подробнее →

    Часто владельцам сайтов бывает нужно скрыть одну или несколько выборочных записей или страниц от индексирования. Это необходимо, например, когда на странице существует много ссылок, а, как общеизвестно, это не очень хорошо воспринимается поисковыми системами.

    Как скрыть страницу/запись от поисковых систем?

    Способ 1. Плагин Yoast SEO

    Наиболее простым способом скрытия от индексирования контента является использование мощного SEO-плагина Yoast SEO. Итак, после его установки и активации, в админ-панели необходимо открыть запись или страницу на редактирование и найти там блок Yoast SEO, где выбрать раздел Дополнительно.

    После перехода в раздел Дополнительно Вам откроется окно дополнительных параметров для выбранной записи/страницы.

    Тут нас интересуют два поля: Meta robots index и Мета-тег robots follow. В первом поле нужно выбрать значение noindex, а второй поставить в положение nofollow.

    После нажатия кнопки Обновить новые параметры страницы/записи вступят в силу.

    Способ 2. Файл robots.txt

    Этот способ предполагает редактирование конфигурационного файла robots.txt, специально предназначенного для поисковых систем. Итак, пусть мы хотим скрыть от индексирования запись, имеющую следующий адрес:

    http://site.ru/2017/01/25/post1/

    Для этого в файл следует добавить следующие строки:

    User-agent: *
    Disallow: /2017/01/25/post1/

    Первая строка указывает, что наши намерения скрыть страницу распространяются на все поисковые системы. Во второй строке мы собственно и сообщаем, адрес какой конкретно страницы/записи необходимо скрыть. Заметим, что тут не указывается адрес сайта, так как для robots.txt он уже известен. Единственным недостатком такого метода является то, что не все поисковые системы следуют заданным в нем правилам.

    Способ 3. Установка пароля

    Еще одним способом запрета индексации страницы или поста является установка на них пароля. Это означает, что для просмотра контента нужно ввести заданный заранее пароль. Этот метод рассматривать не будем, как он детально был описан в одной из наших статьях.

    Нажмите, пожалуйста, на одну из кнопок, чтобы узнать понравилась статья или нет.

    Мне нравится19Не нравится

    Если Вам понравилась статья — поделитесь с друзьями

    В WordPress 5.3 будет использоваться мета-тег для запрета индексации сайтов поисковыми роботами

    В WordPress изменится метод, используемый для предотвращения индексации сайтов со стороны поисковых систем. Ранее после выбора опции «Запретить поисковым системам индексировать сайт» на странице Settings – Reading в WordPress добавлялась строка Disallow: / к файлу robots.txt. Это помогало запретить краулинг (сканирование), однако сайт все равно мог появляться в поисковых результатах.

    В WordPress 5.3 вместо метода с robots.txt появится обновленный мета-тег meta name=’robots’ content=’noindex,nofollow’. Мета-тег позволяет надежнее предотвратить индексацию и последующий краулинг сайта.

    Параметр, запрещающий поисковым системам индексировать сайт, нередко воспринимался пользователями как способ скрыть свои сайты из выдачи. Однако он не всегда работает именно так. Джоно Алдерсон резюмировал проблему и предлагаемое решение в комментарии к тикету, связанному с данным изменением:

    «Параметр Reading предназначен для того, чтобы предотвратить индексацию контента поисковыми системами. При этом краулинг все равно остается разрешенным. Наличие правила disallow в robots приводит к тому, что поисковые работы не добираются до директивы noindex и потому могут индексировать «фрагменты» (когда страница индексируется без контента).

    Специалисты Google недавно объявили о том, что они прилагают все усилия для предотвращения индексации фрагментов. Однако пока этот вариант возможен, мы должны скорректировать текущее поведение. Давайте удалим правило disallow из robots.txt и разрешим Google (и другим поисковым системам) сканировать сайт»

    В заметке, связанной с изменением, Питер Уилсон порекомендовал разработчикам, желающим запретить индексацию разрабатываемых сайтов, добавить HTTP-заголовок X-Robots-Tag: noindex, nofollow при передаче всех ресурсов сайта, включая изображения, PDF, видео и другие ресурсы.

    Источник: wptavern.com

    Как проиндексировать ваш новый сайт WordPress • Yoast

    Дияна Муждека

    Дияна — разработчик содержания электронного обучения в Yoast. Ей нравится создавать материалы, которые помогают людям учиться.

    Когда вы раскладываете красную ковровую дорожку на новом веб-сайте, вы можете ожидать, что посетители начнут приходить с нетерпением. На самом деле, прежде чем люди начнут посещать ваш сайт, поисковым системам необходимо найти, проиндексировать и оценить его. В этой статье я поделюсь некоторыми советами, которые помогут вам быстрее проиндексировать ваш сайт.

    Небольшая заметка, прежде чем мы продолжим. Хотя в краткосрочной перспективе вы можете кое-что сделать, чтобы быстрее проиндексировать свой сайт, вы не должны забывать о долгой игре. Веб-сайт с устойчивым высоким рейтингом во многом зависит от создания замечательного контента. Почему? Потому что поисковые системы хотят найти лучший ответ на запросы, которые задают их пользователи. Сайт с лучшим контентом побеждает в гонке на вершину результатов поиска.

    Как работают поисковые системы?

    Чтобы понять, как индексировать свой сайт, полезно знать, как работают поисковые системы.Поисковые системы генерируют результаты в три основных этапа: сканирование, индексирование и ранжирование.

    Сканирование — это процесс обнаружения, выполняемый сканерами, ботами или пауками. Компьютерная программа указывает сканерам, какие страницы сканировать и что искать. Когда сканеры попадают на страницу, они собирают информацию и переходят по ссылкам. Все, что они находят, они сообщают на серверы поисковых систем. Затем поисковая система пытается понять смысл страницы, чтобы проиндексировать ее. Он просматривает контент и все, что находит, помещает в гигантскую базу данных; их «индекс».

    Наконец, ранжирование начинается, когда вы ищете что-то в Интернете. Итак, алгоритм поисковой системы просматривает индекс и фильтрует страницы, чтобы найти лучшие. Мы не знаем точной механики алгоритма. Тем не менее мы знаем, что поисковые системы с особым энтузиазмом относятся к высококачественному контенту и удобным для пользователя современным страницам.

    Подробнее: Чем занимается Google? »

    Сканирование, индексация и ранжирование никогда не прекращаются. По мере того, как появляются новые страницы и обновляются старые, сканеры постоянно сканируют, а поисковые системы получают новые и улучшенные способы сбора и отображения результатов.

    Итак, как вы можете ускорить этот процесс и помочь поисковым системам быстрее находить вас? Отличный способ начать — отправить карту сайта в формате XML в Google Search Console.

    Как сделать так, чтобы ваш сайт был найден и проиндексирован Google:

    1. Создайте карту сайта XML с помощью Yoast SEO

      Карта сайта XML — это файл, содержащий информацию о вашем веб-сайте. Проще говоря, это список ваших самых важных страниц. Это полезный инструмент, который помогает Google находить и исследовать ваш сайт.Yoast SEO может помочь вам создать карту сайта. Все, что вам нужно сделать, это включить опцию XML Sitemap, и карта сайта будет автоматически сгенерирована. Это настоящая экономия времени!

    2. Настройка учетной записи в Google Search Console

      После того, как вы создали карту сайта, вам нужно сообщить об этом Google. Google Search Console — это инструмент, который может вам в этом помочь. Чтобы добавить карту сайта в Консоль, вам необходимо создать учетную запись. Yoast SEO также может помочь вам проверить ваш сайт с помощью консоли поиска Google.

    3. Добавьте карту сайта в Google Search Console

      В Google Search Console вы найдете вкладку XML Sitemap. Там вы можете добавить созданную карту сайта, чтобы Google знал, где ее найти. Если вы обновляете контент на своем сайте, ваша XML-карта сайта будет обновлена ​​автоматически.

    4. И / или отправьте свои наиболее важные отдельные страницы в Google Search Console

      Кроме того, вы можете попросить Google сканировать отдельные страницы.В консоли поиска Google вы найдете инструмент проверки URL, с помощью которого вы можете попросить Google просканировать или повторно просканировать URL. Существует квота, поэтому подумайте, какие страницы имеют решающее значение для вашего бизнеса с точки зрения рейтинга, и отправьте их сюда.

    Зачем вам нужна карта сайта в формате XML?

    Мы упоминали, что сканеры обнаруживают страницы, переходя по ссылкам. Когда у вас есть новый веб-сайт, вы можете столкнуться как минимум с двумя проблемами. Во-первых, скорее всего, не так много внешних сайтов, которые указывают на ваш сайт.Во-вторых, у вас, вероятно, все еще не так много контента, поэтому ваши внутренние ссылки и структура вашего сайта (пока) не идеальны. Как сканеры могут попасть на ваш сайт без ссылок?

    Одним из решений для индексации вашего сайта является создание карты сайта с самого начала и добавление ее в Google Search Console. Однако, поскольку у вас все еще может быть не так много контента, вам следует быть осторожным с тем, что вы в него включаете. Хотя вы можете создавать карты сайта для видео, изображений, категорий и тегов, это не означает, что вы обязательно должны это делать.Например, вы могли уже настроить некоторые категории. Но для каждой категории у вас есть только одно сообщение. В этом случае создание карты сайта для ваших категорий не так полезно, поскольку контент не дает много информации как посетителям, так и сканерам.

    Важно отметить, что Google не может сканировать и индексировать все элементы в вашей карте сайта. Тем не менее, мы рекомендуем вам создать его, так как мы уверены, что вы извлечете из этого пользу.

    Индексирование вашего сайта за пределами Google

    Мы рассказали вам, как можно отправить карту сайта с помощью Google Search Console.Но это не единственная поисковая система. Итак, как вы можете отправить свою карту сайта в другие поисковые системы? С Yoast SEO это просто. Другие поисковые системы также имеют инструменты для веб-мастеров, с помощью которых вы можете отправить карту сайта и следить за эффективностью своего сайта. В настоящее время вы используете Yoast SEO, чтобы добавить свой сайт в:

    Что дальше?

    После того, как вы создали карту сайта и соединили ее с поисковыми системами с помощью Yoast SEO, можете ли вы, наконец, расслабиться и посмотреть, как приходят посетители? Не совсем.Как мы уже говорили, вам придется продолжать делать качественный контент. Не забывайте, что вы также можете использовать социальные сети в своих интересах и стратегически делиться там своим контентом. Еще одна важная вещь — получение ссылок с других сайтов, желательно с высоким рейтингом. Это означает, что вам нужно будет поработать над наращиванием ссылок. Конечно, не забывайте применять к своему сайту целостные стратегии SEO, чтобы охватить все направления SEO и обеспечить высокие позиции в рейтинге.

    Продолжайте читать: Как занять высокие позиции в Google »

    WordPress для начинающих серии

    Проблема индексирования | WordPress.org

    Привет @ellalener,

    Сожалеем, что в последнее время у вас возникли проблемы с индексированием в поиске Google. Не могли бы вы предоставить нам несколько примеров URL-адресов для теста, которые, как вы обнаружили, влияют на индексирование или исчезли?

    Могу я как-нибудь прислать вам URL? Я не хочу размещать здесь свой веб-сайт. Пожалуйста, дайте мне знать.

    Привет @ellalener,

    К сожалению, на этом форуме поддержки нельзя написать нам личное сообщение.

    Проверьте следующие сведения на своем сайте:
    — Проверьте URL-адреса, которые не отображаются в результатах поиска Google, выполнив поиск «site: URL». -Замените «URL» на URL, который вы хотите проверить. URL-адрес должен появиться в поиске.
    — Проверьте настройки индексации в разделе SEO> Внешний вид в поиске> Типы контента, Таксономии. Убедитесь, что типы контента, которые вы хотите проиндексировать, настроены для отображения в результатах поиска.
    -Проверьте исходный код своих страниц и выполните поиск (CTRL + F или эквивалент в вашей операционной системе) по запросу «noindex».

    Не могли бы вы сообщить нам, что вы нашли?

    При поиске по сайту: posturl я получил сообщение по умолчанию «ваш поиск — сайт: posturl — не соответствует ни одному документу:».

    В настройках панели управления Yoast для сообщений установлено «да» (индексация разрешена). Также отмечено «да» для категорий и страниц, за исключением страниц с тегами.

    Сообщения: https://prnt.sc/sieh7m
    Страницы: https://prnt.sc/siehis
    Категории: https://prnt.sc/siehte

    И он также настроен на индексирование в исходном URL.Ниже приведен код.


    Как мне добавить мой сайт WordPress в список Google? (Руководство для начинающих)

    Недавно один из наших пользователей спросил нас, как добавить их сайт WordPress в список Google? Будучи крупнейшей поисковой системой в мире, Google неплохо умеет автоматически обнаруживать и перечислять новые веб-сайты.Однако иногда он может не сразу отображать ваш веб-сайт автоматически. Поскольку Google является крупнейшим источником трафика для большинства веб-сайтов, важно, чтобы вы немедленно разместили свой веб-сайт в Google. В этой статье мы расскажем, как легко разместить свой сайт WordPress в Google.

    Почему вы должны разместить свой веб-сайт в Google?

    Google — главный источник трафика и посетителей для большинства веб-сайтов. Если вы серьезно настроены завести блог или запустить свой веб-сайт для малого бизнеса, вам необходимо как можно скорее разместить свой веб-сайт в Google.

    Если вы следуете лучшим практикам WordPress в области SEO, то поисковые системы, такие как Google, могут автоматически найти ваш сайт. Однако это может занять некоторое время, и вы упустите потенциальных клиентов.

    Но вы легко можете ускорить этот процесс. Давайте посмотрим, как разместить свой сайт WordPress в Google.

    Размещение вашего сайта WordPress в Google

    Прежде чем мы начнем, вам необходимо создать учетную запись Google Search Console. Вы можете легко настроить его, следуя нашим пошаговым инструкциям о том, как добавить свой сайт WordPress в Google Search Console.

    Шаг 1. Проверьте настройки WordPress для видимости в поисковых системах

    После настройки учетной записи Search Console необходимо убедиться, что ваш сайт WordPress виден поисковым системам. Вы можете проверить это, перейдя в «Настройки » »Прочитав страницу и прокрутив вниз до опции Видимость в поисковой системе .

    Не забудьте снять флажок с этого параметра, чтобы поисковые системы могли сканировать ваш веб-сайт.

    Не забудьте нажать кнопку «Сохранить изменения», чтобы сохранить свои настройки.

    Шаг 2. Подключение консоли поиска Google к WordPress

    Следующее, что вам нужно сделать, это добавить свой веб-сайт в Google Search Console. Мы рекомендуем использовать метод префикса URL, потому что существует больше способов подтвердить свой сайт, и вам не нужно изменять записи DNS.

    В поле веб-сайта необходимо добавить полный URL-адрес веб-сайта. Важно, чтобы вы использовали тот же URL-адрес, который вы видите в строке URL-адреса вашего браузера, включая WWW или без www, а также HTTPS.

    После добавления URL-адреса веб-сайта вам будет предложено подтвердить, что вы являетесь владельцем домена. Есть несколько методов, которые вы можете использовать для подтверждения права собственности. Самый простой способ — щелкнуть стрелку рядом с надписью «Другие методы проверки». Это даст вам метатег, который вам нужно скопировать.

    Затем на своем сайте WordPress вам нужно будет установить и активировать плагин All in One SEO. Для получения дополнительной информации см. Наше пошаговое руководство по установке плагина WordPress.

    После активации вы увидите новый пункт в меню администратора WordPress с надписью All in One SEO.Идите вперед и щелкните меню All in One SEO »Общие настройки , а затем щелкните вкладку« Инструменты для веб-мастеров »вверху страницы.

    Щелкните поле Google Search Console и вставьте код подтверждения в появившееся поле.

    Когда вы закончите, нажмите кнопку Сохранить изменения вверху экрана. Теперь вернитесь в учетную запись консоли поиска Google и нажмите кнопку Verify . Право собственности на ваш сайт будет успешно подтверждено.

    Если по какой-то причине он не проходит проверку, убедитесь, что вы очистили кеш в WordPress.

    Шаг 3. Настройка XML-файлов Sitemap

    После подтверждения вашего сайта вам необходимо перейти на страницу All in One SEO »General в административной области WordPress, чтобы проверить настройки карты сайта. По умолчанию AIOSEO автоматически создает нужные вам карты сайта.

    Чтобы просмотреть свои карты сайта, вы можете нажать кнопку «Открыть карту сайта» или добавить карту сайта.xml ’на свой URL (например, www.example.com/sitemap.xml).

    Затем вам необходимо отправить карту сайта в инструменты Google для веб-мастеров. Файлы Sitemap помогают поисковым роботам Google легко находить и индексировать ваш новый контент.

    Шаг 4. Отправка файлов Sitemap в формате XML в Google Search Console

    Просто войдите в свою учетную запись консоли поиска Google и выберите свой веб-сайт.

    Вам нужно перейти к Sitemaps в левой части экрана.

    Затем добавьте последнюю часть URL-адреса вашей карты сайта (sitemap.xml) в разделе «Добавить карту сайта» и нажмите кнопку «Отправить».

    После того, как вы закончите эти шаги, вы можете посетить свою учетную запись в консоли поиска Google, чтобы проверить свои списки. Как только Google просканирует и проиндексирует ваш сайт, вы начнете видеть отчеты в консоли поиска.

    Еще одним важным фактором, влияющим на поисковый рейтинг, является скорость веб-сайта. Медленные веб-сайты вредны для пользовательского опыта и часто имеют более низкий рейтинг, чем более быстрые. См. Наше руководство о том, как повысить производительность вашего веб-сайта

    Вот и все.Мы надеемся, что эта статья помогла вам разместить ваш сайт WordPress в Google. Вы также можете проверить наш экспертный выбор лучших плагинов и инструментов WordPress для SEO, которые вы должны использовать для оптимизации своего сайта.

    Если вам понравилась эта статья, то подпишитесь на наш канал YouTube для видеоуроков по WordPress. Вы также можете найти нас в Twitter и Facebook.

    Как отговорить поисковые системы от индексирования сайтов WordPress

    Владельцы сайтов сделают все, чтобы их сайты были проиндексированы.Однако вы можете не захотеть, чтобы поисковые системы сканировали ваш сайт, если он все еще находится в разработке. В таком случае рекомендуется отговорить поисковые системы от индексации вашего сайта. Оставайтесь с нами, если хотите узнать больше по этой теме!

    Почему вы хотите, чтобы поисковые системы не индексировали ваш сайт?

    Бывают случаи, когда люди хотят отговорить поисковые системы от индексации своих сайтов:

    • Незавершенные веб-сайты — на данном этапе ошибок и испытаний лучше не делать свой веб-сайт доступным для публики.
    • Веб-сайты с ограниченным доступом — если вы планируете иметь веб-сайт, доступный только по приглашению, вы не хотите, чтобы он отображался в результатах поиска.
    • Тестовые учетные записи — владельцы сайтов создают дубликаты сайта для тестирования и пробных целей. Поскольку эти сайты не предназначены для широкой публики, не позволяйте поисковым системам индексировать их.

    Так как же заблокировать индексирование вашего сайта поисковыми системами? Что ж, взгляните на несколько вариантов ниже и попробуйте сами.

    1.Отговаривание поисковых систем от индексирования сайтов WordPress

    Самый простой способ запретить поисковым системам индексировать ваш веб-сайт — запретить им сканировать его. Для этого вам необходимо отредактировать файл robots.txt каталога вашего веб-сайта . Вот несколько способов добиться этого:

    Использование встроенной функции WordPress

    Редактировать файл robots.txt WordPress довольно просто, так как вам нужно использовать только встроенную функцию WordPress. Вот как это сделать:

    1. Войдите в админку WordPress и перейдите в Настройки -> Чтение .
    2. Прокрутите вниз и найдите вариант видимости для поисковых систем.
    3. Отметьте вариант с надписью Запретить поисковым системам индексировать этот сайт.
    4. Сохранить изменения, и все! WordPress автоматически отредактирует файл robots.txt за вас.

    Редактирование файла robots.txt вручную

    Если вы предпочитаете ручной вариант, вы можете использовать File Manager или FTP-клиент для редактирования файла robots.txt файл.

    В этой статье мы покажем вам, как это сделать с помощью файлового менеджера hPanel:

    1. Войдите в hPanel и найдите File Manager в области Files .
    2. Перейдите в папку корневого каталога WordPress (в большинстве случаев это public_html) и найдите файл robots.txt . Если вы не можете его найти, создайте новый пустой файл.
    3. Щелкните файл правой кнопкой мыши и выберите Изменить .
    4. Введите следующий синтаксис:
        Агент пользователя: *
      Disallow: /  

    Приведенный выше код не позволит поисковым системам проиндексировать весь ваш сайт .Если вы хотите применить правило запрета к определенной странице, напишите подкаталог и заголовок страницы. Например: Disallow / blog / food-review-2019.

    Синтаксис файлов robots.txt чувствителен к регистру, поэтому будьте осторожны при редактировании.

    2. Защита паролем вашего веб-сайта WordPress

    Поисковые системы и сканеры не имеют доступа к файлам, защищенным паролем. Вот несколько методов защиты паролем вашего сайта WordPress:

    Использование панели управления хостингом

    Если вы являетесь клиентом Hostinger, вы можете защитить свой веб-сайт паролем с помощью hPanel Password Protect Directories tool:

    1. Войдите в hPanel и перейдите к каталогам защиты паролем .
    2. Введите корневой каталог в первое поле.
    3. После выбора каталога введите свое имя пользователя и пароль и щелкните Protect .

    Если ваш корневой каталог — public_html , оставьте столбец каталога пустым

    Процесс в cPanel также очень похож:

    1. Войдите в свою учетную запись cPanel и перейдите на страницу Directory Privacy .
    2. Выберите корневой каталог. В нашем случае это public_html .
    3. Установите флажок для защиты этого каталога паролем и назовите защищенный каталог. Нажмите Сохранить .
    4. Создайте нового пользователя для входа на защищенный сайт, и все!

    Использование плагинов WordPress

    Существует множество плагинов, которые могут помочь защитить ваш сайт паролем. Тем не менее, плагин Password Protected может быть лучшим из существующих. Он был протестирован с новым обновлением WordPress, и его довольно просто использовать.

    После установки и активации плагина перейдите в «Настройки » -> «Защищено паролем» и настройте параметры в соответствии с вашими потребностями.

    3. Удаление проиндексированной страницы из Google

    Не беспокойтесь, если Google проиндексировал ваш сайт. Вы можете удалить его из поисковой выдачи, выполнив следующие действия:

    1. Настройте Google Search Console для своего веб-сайта.
    2. Войдите в консоль поиска Google вашего недавно добавленного веб-сайта и прокрутите вниз до Устаревшие инструменты и отчеты -> Удаление.
    3. Нажмите кнопку «Временно скрыть» и введите URL-адрес, который хотите удалить из Google.
    4. В новом окне выберите Очистить URL-адрес из кеша и временно удалить из поиска, , затем Отправить запрос .

    И все! Google временно удалит ваш сайт из результатов поиска. Обязательно примените предыдущие методы, чтобы Google не смог снова проиндексировать ваш сайт.

    Заключение

    Вот и все! Быстрые и простые способы отговорить поисковые системы от индексации ваших сайтов.Вот краткий обзор методов, которые мы изучили сегодня:

    • Отредактируйте файл robots.txt , который можно выполнить автоматически или вручную.
    • Защитите свой сайт паролем с помощью плагина или панели управления хостингом.
    • Удалить проиндексированные страницы из Google через консоль поиска Google.

    Если у вас есть другие методы или вопросы, дайте нам знать в комментариях. Удачи!

    Domantas возглавляет отделы контента и SEO, предлагая свежие идеи и нестандартные подходы.Обладая обширными знаниями в области SEO и маркетинга, он стремится распространить информацию о Hostinger во всех уголках мира. В свободное время Домантас любит оттачивать свои навыки веб-разработки и путешествовать по экзотическим местам.

    WordPress 5.3 изменит способ блокирования индексации

    WordPress объявил о важном изменении того, как он будет блокировать индексацию веб-сайтов поисковыми системами. Это изменение отказывается от традиционного решения Robots.txt в пользу подхода Robots Meta Tag. Это изменение приводит WordPress в соответствие с причиной блокировки Google, которая заключается в том, чтобы заблокированные страницы не отображались в результатах поиска Google.

    Это метатег роботов, который будет использовать WordPress:

    Блокирование индексации Google

    Давно это было стандартная практика использования Robots.txt для блокировки «индексации» веб-сайта.

    Слово «индексация» означало сканирование сайта роботом GoogleBot. Используя функцию блокировки Robots.txt, вы могли помешать Google загружать указанную веб-страницу, и предполагалось, что Google не сможет отображать ваши страницы в результатах поиска.

    Но эта директива robots.txt только помешала Google сканировать страницу. Google по-прежнему может добавить его в свой индекс, если сможет обнаружить URL.

    Реклама

    Продолжить чтение ниже

    Итак, чтобы заблокировать отображение сайта в индексе, издатель заблокировал бы Google от «индексации» страниц. Что не всегда было эффективным.

    WordPress 5.3 действительно предотвратит индексацию

    WordPress адаптировал подход Robots.txt. Но это изменилось в версии 5.3.

    Когда издатель в настоящее время выбирает « препятствовать поисковым системам индексировать этот сайт », он добавляет в файл robots.txt сайта запись, запрещающую Google сканировать сайт.

    Начиная с WordPress 5.3, WordPress будет применять более надежный подход с использованием метатегов роботов для предотвращения индексации веб-сайта.

    Это изменение повлияет на настройку «запретить поисковым системам индексировать этот сайт».

    Объявление

    Продолжить чтение ниже

    Это изменение является улучшением.Издатели WordPress могут быть в большей безопасности, зная, что заблокированные веб-страницы не будут отображаться в результатах поиска Google.

    Скриншот объявления об изменении WordPress 5.3.

    Почему WordPress использовал Robots.txt?

    WordPress использовал Robots.txt для блокировки индексации веб-сайта, потому что именно так все не позволяли страницам отображаться в результатах поиска Google. Это был стандартный способ сделать это.

    Объявление

    Продолжить чтение ниже

    Тем не менее, хотя все делали это таким образом, как было объяснено, это был ненадежный подход.

    Слово «индексирование» имеет два значения:

    1. Индексирование означает сканирование, например, когда робот Googlebot посещает и загружает веб-страницы.
    2. Индексирование также может означать добавление веб-страницы в базу данных веб-страниц Google (которая называется The Index) .

    Блокировка Google от «индексирования» веб-страницы не позволит ему видеть веб-страницу, но Google все равно может проиндексировать веб-страницу и добавить ее в индекс Google. Есть смысл?

    Реклама

    Читать ниже

    Robots.txt по сравнению с метатегом «Роботы»

    Решение Robots.txt не предназначалось для исключения веб-страницы из индекса Google. Это работа метатега роботов.

    Так что приятно видеть, что WordPress использует метатег Robots как решение, блокирующее отображение веб-страниц в поисковых системах.

    WordPress 5.3 планируется выпустить в ноябре 2019 года.

    Прочтите объявление WordPress:

    Изменения для предотвращения индексации сайтов поисковыми системами

    Прочтите официальную документацию Google
    1. Метатег роботов и X- Спецификации HTTP-заголовка Robots-Tag
    2. Блочная поисковая индексация с помощью noindex

    Как сделать индекс сайта WordPress быстрым в Google? [Инфографика]

    Как быстро сделать индексирование сайта WordPress в Google за несколько часов или минут? Это вопрос на миллион долларов!

    Если у вас уже есть веб-сайт WordPress или вы запустили новый, это руководство покажет вам, как очень быстро проиндексировать ваш сайт в Google.

    Итак, если вы ищете проверенные способы быстрой индексации вашего нового сайта в Google или хотите, чтобы Google проиндексировал ваши недавно опубликованные сообщения вашего существующего сайта за несколько минут, то вы находитесь в нужном месте.

    Я следовал нескольким стратегиям, чтобы быстро индексировать сайты WordPress в Google.

    Сначала позвольте мне рассказать вам основные детали!

    Индексирование поисковой системой

    Вы все знаете об индексной странице книги, верно? Там контент упорядочен в определенном порядке в соответствии с алфавитами.

    Точно так же роботы поисковых систем или пауки будут сканировать ваш сайт, индексировать ваши страницы и анализировать тип и качество контента.

    Затем он переместит вашу недавно созданную информацию в соответствующую категорию на странице результатов поисковых систем (SERP), чтобы показать ее пользователям поиска.

    В настоящее время алгоритмы поисковых систем усложняются, и да, они предназначены для обеспечения наилучших и подходящих результатов поиска для пользователей.

    Если вы по-прежнему хотите следовать стратегии наполнения ключевыми словами некачественного и бесполезного контента, то вас наверняка исключат из индекса Google.

    Итак, основная задача пауков — обнаруживать новое содержание веб-сайта и добавлять его в результаты поиска в правильной категории.

    Однако вы можете скрыть нежелательные страницы / сообщения, индексируемые в поисковых системах, с помощью тегов «NoIndex».

    Преимущества индекса быстрого поиска

    Мы все знаем, что трафик из поисковых систем является королем всех источников трафика, и получение большего объема трафика от Google на ваш сайт имеет несколько преимуществ.

    Но каковы преимущества создания вашего сайта? Сайт WordPress быстро индексируется в Google?

    • Повышает вашу узнаваемость в Интернете, узнаваемость бренда и, наконец, объем продаж / потенциальных клиентов.
    • Предотвращает проблему дублирования контента, когда кто-то копирует ваш контент и пытается индексировать быстрее, чем вы.
    • Сообщает Google, что вы являетесь специализированным веб-мастером.

    Но позвольте мне сказать вам одно честно. Нелегко увеличить посещаемость поисковой системы, когда у вас есть новый веб-сайт или блог.

    Почему?

    Причина проста в том, что Google не доверяет новым сайтам. Существует множество веб-сайтов, и каждый день создается миллион блогов.Так что давать новым сайтам высокие рейтинги просто нереально.

    По этой причине Google дает высший приоритет только сайтам с более высоким авторитетом домена и ссылками.

    Но как вы можете увеличить посещаемость ваших новых сайтов?

    Прежде чем привлекать больше трафика с Google на свои сайты, вам сначала нужно сделать несколько правильных вещей. Среди них крайне важно проиндексировать ваш сайт в Google.

    Как вы можете заставить людей посещать ваши сайты, не индексируя сообщения вашего блога в Google?

    Отсутствие индексации сайта в Google — одна из основных ошибок, которые совершают большинство новых блоггеров и владельцев сайтов.

    Если вы один из них, эта статья для вас, где вы узнаете, как индексировать свой сайт в Google и получать более быстрые результаты.

    Готовы узнать больше? Давайте углубимся в подробности.

    Как быстро проиндексировать ваш сайт WordPress в Google?

    Просто выполните важные шаги и сделайте сайт WordPress быстрым в индексе Google, даже если он новый!

    Шаг 1. Создание XML-карты сайта

    Самый первый шаг, который вам нужно реализовать, чтобы быстрее индексировать ваши сайты WordPress в результатах поиска Google, — это создать карту сайта в формате XML для вашего сайта.

    Карта сайта XML — это то, что содержит список всех страниц вашего веб-сайта. Это помогает сканерам поисковых систем легко сканировать весь ваш сайт и индексировать ваши страницы в Google всякий раз, когда вы что-то обновляете на своих сайтах.

    Так как же создать карту сайта в формате XML?

    К счастью для пользователей WordPress, доступен замечательный плагин. Он называется подключаемый модуль Google XML Sitemaps и генерирует специальную карту сайта XML, которая поможет таким поисковым системам, как Google, Bing, Yahoo и Ask.com, чтобы лучше проиндексировать ваш блог. Просто установите (это бесплатно), активируйте в своем блоге и следуйте следующему шагу.

    Если вы используете плагин SEO by Yoast , вы можете использовать предоставленную в нем функцию карты сайта XML.

    Шаг 2. Отправьте карту сайта в инструменты Google для веб-мастеров

    После того, как вы установили и включили на своем сайте плагин XML Sitemap, пора отправить карту сайта в инструменты Google для веб-мастеров.

    Если у вас еще нет учетной записи в инструментах для веб-мастеров, создайте ее немедленно, и это совершенно бесплатно.Вам необходимо проиндексировать весь свой сайт WordPress в результатах поиска Google.

    Просто перейдите на страницу Google Webmasters Tools и создайте бесплатную учетную запись со своей учетной записью Google. Как только вы закончите с этим, просто добавьте свой новый сайт в инструменты для веб-мастеров.

    Вы можете сделать это, перейдя на вкладку оптимизации в инструментах для веб-мастеров и щелкнув «Добавить URL», чтобы добавить ссылку в карту сайта.

    Если вам все еще трудно добавить свой сайт в Google Webmasters Tools, то ознакомьтесь с моим пошаговым руководством по включению вашего сайта в GWT .

    Шаг 3. Отправьте URL своего сайта в Google

    После того, как вы закончите с вышеуказанным шагом (после отправки карты сайта), просто отправьте URL своего сайта в Google.

    Вы можете сделать это, нажав « Добавить новое свойство » в опции консоли поиска Google, которую вы увидите в инструментах для веб-мастеров.

    Вот как это выглядит.

    Просто введите URL-адрес веб-сайта или блога и нажмите кнопку « Добавить », чтобы добавить свой сайт в инструменты Google для веб-мастеров.

    На этом этапе он попросит вас подтвердить ваш сайт, просто выберите любой из предоставленных методов для проверки вашего сайта.

    Кроме того, вы можете установить плагин WordPress SEO by Yoast (бесплатно) и просто вставить код, указанный в инструментах для веб-мастеров, чтобы подтвердить свой сайт. Это самый простой способ из всех.

    Вот и все! Вы завершили отправку своего сайта в Google, поэтому он будет быстрее индексироваться при каждом обновлении на своих сайтах.

    Шаг 4: Отправьте свой сайт в соответствующие онлайн-каталоги

    Хотя это необязательный шаг, я настоятельно рекомендую вам завершить этот шаг, так как он может привести к значительному изменению вашего рейтинга в поиске.

    Зачем вам добавлять свой новый сайт WordPress в веб-каталоги?

    Каталоги имеют МНОЖЕСТВО преимуществ, например

    • Быстро проиндексируйте свой сайт в Google
    • Получите несколько хороших обратных ссылок
    • Повысьте видимость результатов поиска

    Теперь, если вам интересно, где найти каталоги, не волнуйтесь. Вот МАССИВНЫЙ список веб-каталогов, составленный ведущим сайтом Top Rank Blog .

    Просто разместите свой новый сайт хотя бы на нескольких из них. Например, AllTop и DMOZ сделают ваш сайт WordPress более быстрым в результатах поиска Google.

    Другие стратегии для быстрого индексирования вашего нового WP-контента

    1. Создавайте качественный контент с помощью внутреннего SEO

    Всегда полезно писать полезный и качественный контент для читателей после исследования ключевых слов.

    Поймите требования посетителей, соберите ключевые слова, соответствующие их потребностям, создайте контент и разместите ключевые слова естественным образом.

    Внутреннее SEO по-прежнему имеет значение, поэтому следите за размещением ключевых слов.

    2.Делайте комментирование в блоге активных блогов

    Составьте список активных блогов с авторитетными источниками и оставьте свои содержательные комментарии после прочтения их содержания. Вы можете использовать URL-адрес публикации / страницы при комментировании вместо ссылки на домашнюю страницу вашего сайта.

    Он будет посылать ботам сигнал о том, что вы получили что-то новое на своем сайте и ускорили индексацию Google.

    3. Используйте сайты Ping

    Когда вы публикуете свежий контент, используйте сайты Ping, такие как Pingler и Pingomatic , и дайте «паукам» знать ваш новый контент.

    4. Используйте файл robots.txt

    Когда поисковые роботы приходят на ваш сайт, они следуют инструкциям, данным в файле robots.txt.

    Вы знаете, как его создать?

    Если вы ничего не знаете об этом простом текстовом файле, вы можете прочитать мой подробный пост о файле robots.txt WordPress .

    Добавление карты сайта в файл robots.txt поможет вашему сайту быстро проиндексироваться в Google.

    5. Используйте социальные сети, закладки и сайты сообществ

    Не забудьте создать профили в социальных сетях для вашего сайта с вашим сайтом ссылка на сайт.Добавьте целевых посетителей в качестве подписчиков в соцсетях и поделитесь для них своим новым контентом.

    Когда они смогут читать и распространять ваш контент в социальных сетях, было бы хорошим подспорьем ускорить индексацию вашего веб-сайта.

    Также используйте динамические закладки и сайты сообществ, такие как Digg, Delicious, StumbleUpon, Pinterest, Bizsugar, Blokube и Klinkk , чтобы добавить свой свежий контент.

    СОВЕТ ПРОФЕССИОНАЛА: Не ограничивайте себя в том, чтобы делиться контентом вашего сайта в социальных сетях! Если вы поделитесь качественными и полезными постами других, вы сможете оставаться авторитетным в глазах Google и других поисковых систем.

    5. Поддерживайте согласованность публикации сообщений

    Если вам интересно, Почему Google не индексирует мой новый контент , тогда я бы сказал, что лучше следить за частотой публикации контента (скажем, 1 в неделю).

    6. ​​Еще несколько моментов для рассмотрения

    Если у вас все еще есть вопросы, например, Почему мой новый контент не отображается в Google? Почему Google не индексирует мои новые сообщения в блоге , подумайте об исправлении следующих вещей

    # Проверьте неработающие ссылки, ошибки 404, ошибки сканирования и карты сайта в инструменте Google для веб-мастеров и исправьте их

    # Улучшите внутреннюю структуру ссылок с помощью идеальных текстовых ссылок привязки

    # Получите быстро загружающуюся тему WordPress .

    # Купите надежный хостинг , чтобы поддерживать бесперебойную работу

    # Настройте RSS-канал с Feedburner

    # Получите качественные обратные ссылки через гостевой блог и участие в форумах.

    Окончательный вердикт о быстрой индексации вашего сайта WordPress в Google

    Как я уже говорил ранее в этом руководстве, большинство блоггеров не индексируют свои сайты WordPress в Google. По этой причине большинство из них НИКОГДА не получают достаточного трафика от Google на свои сайты.

    Так что не делайте этой ошибки. Если вы хотите увеличить посещаемость поисковой системы, самым первым шагом должно стать индексация вашего сайта в Google.

    Выполнив простые шаги, упомянутые выше, вы можете быстро проиндексировать свой сайт WordPress в результатах поиска Google, чтобы начать получать больше трафика.

    Итак, что вы думаете об учебнике? Помогло ли вам ускорить индексирование вашего сайта WordPress в Google? Какие еще методы быстрой индексации вы пробовали?

    Сколько времени потребуется поисковой системе Google, чтобы отловить ваш недавно опубликованный контент? Если у вас есть другой полезный способ заставить Google мгновенно проиндексировать новый контент вашего сайта WordPress, сообщите нам об этом в разделе комментариев.

    Настало время инфографики 🙂

    Взгляните на инфографику, созданную с помощью быстрых стратегий индексации Google!

    Если вам нравится инфографика о том, как ускорить индексирование сайта WordPress в Google, просто скопируйте приведенные ниже коды, чтобы опубликовать их на своем сайте WordPress!

       ускорить индексирование сайта WordPress в Google   

    Подготовка вашего сайта WordPress для Google Mobile-First Индекс

    В 2016 году мобильный трафик впервые в истории превысил трафик настольных компьютеров. И если вы следили за изменениями алгоритмов Google за последние несколько лет, вы, возможно, заметили тенденцию доминирования мобильных устройств. Удобно , сразу после того, как мобильный трафик превысил общий объем трафика настольных компьютеров, Google объявил, что их индексирование поисковыми системами переходит на мобильные.

    Хотя Google подтвердил, что объявление было сделано не сразу и будет медленно разворачиваться по мере проведения тестирования, с момента первоначального объявления прошло более полутора лет. По состоянию на 26 марта 2018 года Google официально объявила о начале развертывания индексации для мобильных устройств. Это серьезно меняет статус-кво индексации.

    В настоящее время большинство сайтов плохо оптимизированы для настольных компьютеров, не говоря уже о мобильных, где 21% сайтов малого бизнеса не оптимизированы.😧 Если Google внезапно перевернет пресловутый переход на индексацию, ориентированную на мобильные устройства, подавляющее большинство сайтов, доминирующих в конкурентной борьбе, столкнется с Великой депрессией SEO, которая потенциально разрушит их нынешние методы работы.

    Итак, что на самом деле означает индексирование с ориентацией на мобильные устройства? Когда он вступит в силу и как можно подготовиться? В этом посте мы расскажем, прежде всего для мобильных устройств, и расскажем, как подготовить свой сайт WordPress к изменениям, чтобы избежать потенциальных катастроф.

    Что такое индексирование Mobile-First?

    Раньше системы сканирования, индексации и ранжирования Google использовали настольную версию веб-сайтов.Индексирование с ориентацией на мобильные устройства означает, что Googlebot теперь будет использовать мобильную версию вашего сайта WordPress для индексации и ранжирования . Это помогает улучшить поиск для мобильных пользователей. Имейте в виду, что вы также можете увидеть в журналах больше трафика со смартфона Googlebot.

    В любом объявлении Google иногда бывает трудно читать между строк. Черт возьми, у нас даже не было подтверждения двух основных факторов ранжирования более десяти лет. Получить прямой ответ от Google так же редко, как полное солнечное затмение.Индексирование с ориентацией на мобильные устройства — довольно простая концепция, но люди часто определяют ее излишне сложными способами.

    Позвольте мне пояснить это просто для вас: Google отмечает, что большинство людей во всем мире просматривают на мобильных устройствах и, следовательно, посещают мобильные версии веб-сайтов. Но в настоящее время вся их система индексирования смотрит на настольную версию сайта сначала при оценке качества и релевантности для пользователей.

    Это серьезный, потенциально опасный разрыв для Google, который может заставить пользователей покинуть платформу.Как так? Если большинство людей используют мобильные устройства для просмотра веб-страниц, а Google индексирует настольные версии на предмет релевантности и качества, вполне вероятно, что мобильные пользователи получают неудовлетворительный опыт.

    И помните предыдущую статистику: 21% мобильных сайтов для малого бизнеса не оптимизированы . Это означает, что многие пользователи Google неизбежно посещают некачественные мобильные сайты. Google и бизнес-сайты не могут позволить себе этого больше. Не тогда, когда 85% пользователей не вернутся на ваш сайт или бренд из-за неудовлетворительного опыта работы с мобильными устройствами.

    Большой скачок в количестве сайтов, использующих удобный для мобильных устройств дизайн за последние несколько месяцев (с помощью мета-тега области просмотра), но удивительно большой кусок Интернета не реагирует (или использует менее популярные схемы, оптимизированные для мобильных устройств) через @builtwith https: //t.co/zozrmHkfi4 pic.twitter.com/OlxHug4pYx

    — Сайрус (@CyrusShepard) 26 марта 2018 г.

    И падение трафика не было бы редкостью, если бы Google не обратил внимание на это массовое отключение. В 2013 году Google потерпел всего лишь пятиминутный перерыв в обслуживании, в результате чего глобальный трафик упал на , на 40% и потерял 545 000 долларов чистой прибыли.

    Данные показывают, что Alphabet Inc (материнская компания Google) зарабатывает более 3200 долларов в секунду. Это означает, что одно пятиминутное отключение сервисов в 2018 году приведет к чистым убыткам, почти вдвое большим, чем Google в 2013 году:

    Деньги, потерянные из-за сбоя сайта (Источник изображения: InvestorPlace)

    Можно с уверенностью сказать, что Google защищает свою текущую модель, стараясь предотвратить любые потенциальные катастрофы с точки зрения как доходов, так и доли рынка.

    По этим причинам Google будет постепенно внедрять изменения, чтобы сделать мобильные сайты приоритетными, когда дело доходит до индексации контента на предмет релевантности и качества . Google по-прежнему будет индексировать версии вашего сайта для настольных компьютеров, но приоритет отдается мобильным устройствам.

    Мобильная связь важнее, чем когда-либо. Совсем недавно, в конце 2017 года, отраслевые эксперты начали замечать тестирование и развертывание мобильных устройств на нескольких сайтах. Аналитик Google для веб-мастеров Гэри Иллис объявил эту информацию широкой публике на конференции SMX East.

    А 26 марта 2018 года Google официально объявил о начале внедрения индексации мобильных устройств. Но будьте уверены, он будет медленным и устойчивым. Это означает, что вам не нужно беспокоиться о том, что вы проснетесь, когда наступит конец света в Интернете, когда ваш рейтинг и трафик исчезнут в одночасье.

    Джон Мюллер, аналитик Google для веб-мастеров, также сказал, что пользователи будут проинформированы через консоль поиска Google, когда их сайт будет перемещен. Вы можете увидеть пример этого письма ниже.

    Электронное письмо от Google с первым индексированием с мобильных устройств

    Но это также не значит, что вы можете сидеть и ждать, пока на вашем сайте начнется внедрение. Готовы вы или нет. Вот как вы можете узнать, готов ли ваш сайт, и какие изменения вам необходимо внести, чтобы оставаться на плаву в этом меняющемся ландшафте.

    Сделайте свой сайт более удобным для мобильных устройств или адаптивным как можно скорее

    Согласно пресс-релизу Google, при индексировании мобильных устройств следует учитывать несколько условий.Во-первых, Google дал понять, что сайты, использующие оптимизированные для мобильных устройств или отвечающие мобильным устройствам протоколы, которые актуальны, вполне подойдут для этого обновления.

    Если ваш сайт оптимизирован для мобильных устройств или адаптирован для мобильных устройств, то есть ваш контент динамически обновляется между настольными и мобильными устройствами, вам не нужно вносить какие-либо фундаментальные изменения в свой сайт. Хотя это не означает, что вам не следует беспокоиться об улучшении своего мобильного сайта, это означает, что у вас меньше работы.

    Итак, как узнать, адаптирован ли ваш сайт для мобильных устройств или нет? Один из самых простых способов — просто использовать инструмент тестирования Google для мобильных устройств.

    Тест Google для мобильных устройств

    Вы также можете запустить свой веб-сайт с помощью стороннего инструмента, такого как Responsive Design Tool. Когда вы вводите свой веб-сайт в строку поиска, инструмент покажет вам, как ваш мобильный сайт выглядит на мобильном устройстве, планшете и компьютере:

    Тест адаптивного дизайна

    Если в настоящее время у вас есть отдельные сайты для мобильных и настольных компьютеров, на которые необходимо вносить обновления, ваш сайт не адаптируется для мобильных устройств. Например, если содержание и разметка на разных сайтах различаются, Google рекомендует внести изменения.

    Для начала, убедитесь, что вы предоставляете структурированную разметку как для мобильной, так и для настольной версии сайта. Вы можете дважды проверить эти усилия с помощью инструмента структурированных данных. Запустите свой URL-адрес через инструмент структурированных данных, и он отправит ваши данные прямо в вашу учетную запись Google Search Console в разделе «Внешний вид поиска → Структурированные данные».

    Отсюда проверьте, можно ли сканировать ваши структурированные данные без ошибок и обновляются ли карты сайта соответствующим образом. Если вы обнаружите проблемы, консоль поиска предложит вам точные шаги, которые необходимо предпринять для их устранения.

    Структурированные данные Google

    В связи с быстрым обновлением индекса, ориентированного на мобильные устройства, ваш сайт должен быть адаптивным для мобильных устройств или дружественным . Но если вашего сайта нет, не паникуйте. Вы можете решить эту проблему быстро, не нарушая банкротство и не ремонтируя весь свой веб-сайт.

    Используйте адаптивную тему WordPress

    Одним из больших преимуществ использования WordPress является то, что почти каждая проданная сегодня тема адаптивна «из коробки». Однако, если вы используете старую тему или отстаете от обновлений, вполне возможно, что ваша тема WordPress еще не адаптирована для мобильных устройств.Вот несколько вещей, которые нужно сделать.

    Во-первых, убедитесь, что ваша тема WordPress полностью обновлена. . Иногда разработчики перестраивают код в старых темах или перемещают их во фреймворки, чтобы они были удобны для мобильных устройств. Если вы перепрыгиваете через несколько версий, мы всегда рекомендуем сначала сделать резервную копию, а затем протестировать новую версию на промежуточном сайте.

    Во-вторых, если вы используете устаревшую тему WordPress или разработчика уже нет, возможно, пришло время перейти на новую.Есть множество отличных бесплатных и премиальных тем WordPress на выбор. Вы можете выбрать легкую, быструю и отзывчивую тему, такую ​​как GeneratePress или OceanWP. Они позволяют создавать практически любой веб-сайт и даже поддерживать магазины электронной коммерции.

    GeneratePress

    Вот несколько поставщиков тем, которых мы также рекомендуем проверить:

    Наймите разработчика WordPress, чтобы сделать свой сайт более удобным для мобильных устройств

    Возможно, у вас есть созданная на заказ тема или сайт WordPress, и вы не можете перейти на новую тему WordPress.В этом случае вам, возможно, придется выложить немного денег и нанять разработчика WordPress, чтобы убедиться, что он удобен для мобильных устройств. Это может включать перевод вашего сайта на новую платформу или даже рефакторинг всего вашего базового кода. Прежде чем продолжить, убедитесь, что получили оценку в нескольких местах. В зависимости от вашего сайта это может быть небольшое или очень крупное мероприятие. Мы рекомендуем несколько компаний:

    Используйте мобильный плагин WordPress

    Если вы в затруднении, вы также можете использовать мобильный плагин WordPress.Хотя мы рекомендуем это в крайнем случае, это может быть одним из самых простых способов сразу же убедиться, что ваш сайт оптимизирован для мобильных устройств.

    Некоторыми из лучших плагинов WordPress для мобильной оптимизации в настоящее время являются WPtouch, WP Mobile Pack, Jetpack и OBox Mobile. WPtouch — один из самых обновленных, поддерживаемых и надежных плагинов для оптимизации работы на мобильных устройствах, его скачали более пяти миллионов раз.

    Мобильный плагин WPtouch для WordPress

    В настоящее время активен на более чем 200 000 сайтов и выбран Google как лучший выбор для мобильных решений. Это надежный и эффективный вариант.Самый дешевый план начинается с 79 долларов, но вы можете настроить свои функции по меню, если хотите настроить планы и цены. WPtouch работает, добавляя мобильную тему для посетителей вашего сайта WordPress.

    Он мгновенно создает удобную для мобильных устройств версию, которая будет динамически перемещать контент между вашим настольным компьютером и мобильными сайтами. На панели инструментов вы можете настроить их предварительно созданные темы, чтобы они лучше соответствовали вашему текущему бренду рабочего стола:

    Пример WPtouch

    WPtouch — это один из самых простых способов сделать ваш мобильный сайт более удобным для пользователей при грядущем индексе, ориентированном на мобильные устройства.

    Сосредоточьтесь на повышении скорости загрузки сайта

    Когда дело доходит до оптимизации вашего сайта для мобильных устройств, скорость является одним из наиболее важных факторов, на которых следует сосредоточиться. Скорость играет важную роль во всем, от удобства использования до показателей отказов и определения того, вернутся ли потенциальные покупатели на ваш сайт.

    Подпишитесь на информационный бюллетень

    Мы увеличили наш трафик на 1187% с помощью WordPress.

    Мы покажем вам, как это сделать.

    Присоединяйтесь к 20 000+ другим, кто получает нашу еженедельную рассылку с инсайдерскими советами по WordPress!

    Подпишитесь сейчас

    Фактически, плохой мобильный опыт приведет к тому, что большинство пользователей увидят, что никогда не вернут .Согласно последнему отчету Google о скорости загрузки страниц, среднее время загрузки мобильного сайта в 2018 году составило 15 секунд. 🐌 Можете ли вы представить себе ожидание загрузки одной страницы почти полминуты? Поразительно.

    Как вы понимаете, пользователи требуют (и заслуживают) лучшего. Согласно тому же отчету о скорости страницы , 53% посетителей мобильных сайтов покидают страницы, загрузка которых занимает больше ничтожных трех секунд.

    Медленное взаимодействие с мобильными устройствами не убивает конверсии. Они мешают вам даже получить шанс конвертировать потенциальных клиентов.Когда время загрузки страницы увеличивается всего на несколько секунд, вероятность того, что кто-то подпрыгнет, растет в геометрической прогрессии.

    Статистика отказов при загрузке страницы (Источник изображения: Google)

    Если ваш мобильный веб-сайт загружается более десяти секунд, вы можете потерять почти всех своих потенциальных клиентов. И у меня для вас новость: ваш веб-сайт, скорее всего, слишком медленный. Согласно Google, средний сайт из каждой отрасли слишком медленный .

    Индекс средней скорости (Источник изображения: Google)

    Снижение показателя отказов всегда должно быть высшим приоритетом.Один из лучших способов сделать это — повысить скорость вашего сайта. Вы хотите дать пользователям реальную возможность потреблять ваш контент, а не уходить в приступе гнева.

    Вы можете использовать GTmetrix, WebPageTest или Chrome DevTools, чтобы узнать, насколько быстро ваш сайт загружается через мобильное соединение 2G или 3G.

    Тест скорости 3G с GTmetrix

    С помощью инструмента Google Test My Site вы можете просканировать свой текущий мобильный сайт и получить непосредственное представление о том, какие шаги необходимо предпринять для повышения скорости вашего сайта.При запуске вашего сайта с помощью этого инструмента будет создана бесплатная версия вашего отчета, которую он будет отправлять прямо на ваш почтовый ящик. Отчет охватывает текущую скорость вашего сайта в сравнении со скоростью ваших конкурентов. Он также покажет вам ваши текущие потери потенциальных посетителей:

    Мобильная скорость

    Помимо данных тестов, Google дает вам прямые и действенные способы сделать ваш сайт быстрее. Он даже оценивает количество времени, в течение которого каждая задача может сократить ваше общее время загрузки:

    Сделайте ваш сайт более быстрым. Рекомендации

    Нажмите на любой из советов «Посмотрите, как», и вы получите пошаговые инструкции по устранению любой из этих проблем на своем сайте.Прежде чем просто пересылать их своему разработчику, ознакомьтесь с некоторыми из наших руководств, которым вы можете следовать, чтобы быстро исправить их самостоятельно:

    После внесения предложенных изменений снова запустите свой сайт с помощью инструмента и сравните результаты. Вы должны увидеть кардинальные улучшения, которые сделают ваш сайт успешным в грядущем мире, ориентированном на мобильные устройства. Помните, что вы, скорее всего, не сможете все исправить. Наиболее важным значением является общее время загрузки вашего сайта.

    Не забудьте также выбрать быстрый хостинг WordPress, такой как Kinsta.Мы снова получили высшие баллы в тестах производительности 2018 от ReviewSignal и работаем на облачной платформе Google, одной из самых быстрых сетей в мире.

    Внедрить Google AMP

    Если вы все еще испытываете трудности со скоростью вашего сайта WordPress, вы также можете изучить возможность внедрения Google AMP. Google AMP (проект ускоренных мобильных страниц), по сути, предлагает способ обслуживания урезанной версии вашей текущей веб-страницы без всех вещей, которые ее замедляют, таких как JavaScript, раздутый CSS и т. Д.Существуют сторонние плагины, которые упрощают этот процесс.

    Google AMP

    Однако мы рекомендуем действовать с осторожностью в зависимости от типа вашего сайта WordPress. Из-за того, что Google AMP — это большое изменение, это может повлиять на все, от коэффициента конверсии до CTA. Их, конечно, можно восстановить, но это потребует некоторой работы. Если у вас есть сайт WooCommerce и у вас много мобильных клиентов, обязательно все протестируйте!

    После тестирования мы удалили Google AMP с сайта Kinsta.Однако это не означает, что мы не будем тестировать его снова в будущем. Google регулярно совершенствует эту технологию.

    Сделайте мобильную связь своим главным приоритетом

    Поскольку мобильный трафик преобладает в онлайн-браузере, и Google соответствующим образом корректирует свои действия, настало время сместить ваш собственный внутренний фокус. И хотя скорость сайта — это прямой шаг, который вы можете предпринять для улучшения своего сайта с учетом индекса, ориентированного на мобильные устройства, это еще не все.

    Мобильный трафик против настольного компьютера

    Если вы хотите добиться настоящего успеха с помощью мобильного сайта, это должно стать вашим приоритетом.Это означает, что вам нужно выйти за рамки динамической оптимизации и отзывчивости. Весь ваш сайт должен обслуживать мобильных пользователей. Все, от структуры до дизайна и элементов, которые вы используете.

    Пользователи просматривают страницы на мобильных устройствах совсем не так, как на компьютерах. Поэтому чаще всего простая имитация сайта для настольных компьютеров на мобильных устройствах не позволяет полностью оптимизировать взаимодействие с пользователем. На мобильных устройствах экраны меньше, вычислительная мощность ограничена, а пользователи часто бывают в пути.

    Типичные элементы страницы и изображения с высоким разрешением будут тормозить взаимодействие с мобильными пользователями.Наличие глубокой архитектуры сайта может вызвать ужасный опыт работы с мобильными устройствами, вынуждая пользователей переходить по десяткам вкладок для доступа к нужному им контенту:

    Архитектура веб-сайта (Источник изображения: Riverbed Marketing)

    Очевидно, что решение подобных проблем требует серьезного размышления. Это может даже потребовать значительного изменения структуры вашего сайта. Но предстоящий индекс Google, ориентированный на мобильные устройства, должен стать той соломинкой, которая сломает спину верблюду.

    Если ваша текущая структура сайта является глубокой и с ней сложно ориентироваться на мобильных устройствах, вам следует серьезно подумать о тестировании взаимодействия с пользователем на мобильных устройствах.Посмотрите, какие участки сложно активировать и где находятся обычные точки высадки.

    С приоритетом для мобильных устройств вы должны стремиться упростить пользователям мобильных устройств доступ к вашему сайту. Вместо того, чтобы создавать сначала сложный сайт для настольных компьютеров, а затем — сайт для мобильных устройств, переверните сценарий. HubSpot проверил это еще в 2015 году, когда они решили все упростить на своем мобильном сайте.

    Во-первых, они начали с содержательных целевых страниц. Они уменьшили их размер и ограничили количество прокруток, масштабирования, масштабирования и щелчков, которые должен делать пользователь:

    Мобильное форматирование (Источник изображения: Hubspot)

    Затем они взялись за формы, которые сопровождали эти страницы:

    Мобильные формы (Источник изображения: Hubspot)

    После того, как они обновили свои целевые страницы и их последующие формы, чтобы они были сжатыми и простыми для мобильных устройств, они добились снижения количества отказов на мобильных устройствах в среднем на и 27%. .Сочетание упрощения контента и архитектуры сайта с адаптивным дизайном снизило показатель отказов еще на 10,7%.

    На мобильных устройствах вам нужно настроить все: от адаптивного дизайна до скорости, архитектуры и удобства использования. И единственный способ добиться этого — по-настоящему поставить мобильные устройства в приоритеты.

    Еще одна важная вещь, на которую следует обратить внимание, заключается в том, что при индексировании сначала для мобильных устройств контент, который свернут или скрыт на вкладках , не будет обрабатываться иначе, , чем видимый контент (как это могло быть ранее), поскольку этот тип управления недвижимостью экрана на самом деле это лучшая мобильная практика.Подробнее об этом здесь.

    Ознакомьтесь с этими дополнительными советами по разработке контента для индекса, ориентированного на мобильные устройства.

    Отслеживание ключевых слов для мобильных устройств

    Беспокоитесь о своем SEO с новым индексом, ориентированным на мобильные устройства? Хотя все, что мы упомянули выше, может помочь улучшить ваше SEO, вы также можете отслеживать рейтинг своих ключевых слов на мобильных устройствах по сравнению с настольными компьютерами. Это особенно важно для тех из вас, у кого есть отдельный мобильный домен, например m.example.com.

    Если содержимое одинаково на настольных и мобильных устройствах, но переупорядочено, имеет ли это значение? «То, как структурирована страница, имеет значение для ранжирования».

    Главное содержание — это самое главное. Если это изменится для мобильных устройств, ваш рейтинг изменится. @ Method #Pubcon

    — Мари Хейнс (@Marie_Haynes) 21 февраля 2018 г.

    Вы можете легко сделать это с помощью таких инструментов, как Accuranker или SEMrush. Сейчас хорошее время для реализации этого, прежде чем это произойдет, чтобы вы могли эффективно отслеживать, как на ваш сайт повлияло новое изменение от Google.

    Accuranker сравнивает рейтинг мобильных устройств и компьютеров

    Дополнительные советы от Google

    Вот несколько дополнительных советов, рекомендованных Google:

    • Убедитесь, что мобильная версия вашего сайта также содержит важный и качественный контент.Сюда входят текст, изображения (с атрибутами alt) и видео — в обычных форматах для сканирования и индексации.
    • Метаданные должны присутствовать в обеих версиях сайта. Сюда входят такие вещи, как заголовки, метаописания, заголовки и т. Д. Ознакомьтесь с нашим контрольным списком SEO.
    • Проверяйте ссылки hreflang на отдельных мобильных URL. При использовании элементов link rel = hreflang для интернационализации связывайте URL-адреса мобильных и настольных компьютеров отдельно. Hreflang ваших мобильных URL-адресов должен указывать на другие версии для других языков / регионов на других мобильных URL-адресах, а также связывать рабочий стол с другими URL-адресами рабочего стола, используя там элементы ссылки hreflang.Если вы будете следовать нашему многоязычному руководству по WordPress, все будет в порядке!
    • Убедитесь, что серверы, на которых размещен сайт, обладают достаточной мощностью для обработки потенциально повышенной скорости сканирования. Это не повлияет на сайты, использующие адаптивный веб-дизайн и динамический показ, только на сайты, мобильная версия которых находится на отдельном хосте, например m.example.com.
    • Никаких изменений не требуется для связи с отдельными мобильными URL (сайтами m.-dot). Для сайтов, использующих отдельные мобильные URL-адреса, сохраните существующую ссылку rel = canonical и связывайте элементы rel = alternate между этими версиями.Гленн Гейб углубляется в некоторые дополнительные проблемы, связанные с отдельными мобильными доменами и каноническими тегами.

    Заключение

    Менее двух лет назад мобильный трафик превысил трафик настольных компьютеров во всем мире, и Google сообщил нам, что собираются внести изменения в способ индексации. И теперь оно здесь! Google начал развертывание нового индекса, ориентированного на мобильные устройства, 26 марта 2018 г. .

    Если ваш сайт еще не был перемещен, еще есть время, чтобы опередить тенденцию.Сосредоточьтесь на том, чтобы сделать ваш сайт удобным для мобильных устройств и адаптивным, повысить скорость работы и сделать мобильное приложение приоритетным во всем, что вы делаете на своем сайте.

    Есть ли еще какие-нибудь советы по индексации мобильных устройств, которые мы упустили? Напишите нам в комментариях.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *