Закрытие от индексации внешних ссылок: Как закрыть внешние ссылки от индексации, видеосовет 29

Как скрыть ссылки и текст от индексации на странице сайта?

#Оптимизация сайта #Индексация

#86

Ноябрь’18

22

Ноябрь’18

22

Встречаются такие ситуации, когда требуется закрыть контент от индексации. Это может быть:

  • неуникальный контент;
  • шаблонный текст, встречающийся на всех страницах сайта;
  • ссылки на сторонние ресурсы.

Ссылки


(внешние и внутренние)

Закрывать от поисковых систем внешние ссылки необходимо, если вы не хотите, чтобы страница, имеющая ссылку, теряла свой вес.

Это может происходить следующим образом:

  • Удалением внешних ссылок. Рекомендуется убирать внешние ссылки на сторонние ресурсы.
  • Если удалить ссылку нет возможности, то необходимо скрыть ссылку от индексации посредством скрипта так, чтобы в исходном коде страницы не было <a href=»» …></a>, а блок выводился в виде: <div></div>. Далее при формировании страницы скриптом выводилось содержимое данного блока в виде ссылок и прочего.
    Сам скрипт требуется закрыть от индексации в файле robots.txt.
  • Добавлением атрибута rel=»nofollow». Необходимо прописать атрибут rel=»nofollow» для внешней ссылки (<a href=»» rel=»nofollow» target=»_blank»>текст ссылки</a>).

Помимо внешних ссылок, аналогичное рекомендуют проводить с внутренними ссылками вида добавить в корзину, вход, авторизация, фильтр, сбросить фильтр и т.д. (для всех элементов, которые сверстаны ссылками <a href>, но при этом не ведут на реальные страницы).

Текст

Если у вас на сайте используется большое количество неуникального или дублирующегося контента, то его необходимо скрыть от индексации.

Это можно сделать двумя способами:

  • выделить кусок необходимого текста с помощью тега <!—noindex—>…<!—/noindex—>
  • прописать мета-тег <meta name=»robots» content=»noindex»/> странице.

Важно

Если Вы прописали мета-тег <meta name=»robots» content=»noindex»/>, то ссылки на странице все будут доступны для поисковых систем и роботы будут переходить по ним. Поэтому необходимо добавить атрибут, nofollow, если необходимо полностью запретить индексацию страницы. Выглядеть это может следующим образом: <meta name=»robots» content=»noindex, nofollow»/> или <meta name=»robots» content=»none»/>.

Похожее

Оптимизация сайта Индексация

Атрибут rel=canonical

Оптимизация сайта Индексация

Индексация ссылок

Оптимизация сайта Индексация

#133

Атрибут rel=canonical

Июнь’23

13603

23

Оптимизация сайта Индексация

#119

Индексация ссылок

Апрель’19

5056

30

Оптимизация сайта Индексация

#111

Описание и настройка директивы Clean-param

Апрель’19

10804

25

Оптимизация сайта Индексация

#104

Как привлечь быстроробота Яндекс

Февраль’19

2473

21

Оптимизация сайта Индексация

#94

Проверка индекса сайта. Как найти мусорные или недостающие страницы

Декабрь’18

10776

28

Оптимизация сайта Индексация

#82

Почему Яндекс удаляет страницы из поиска

Ноябрь’18

3616

19

Оптимизация сайта Индексация

#60

Правильная индексация страниц пагинации

Февраль’18

9156

19

Оптимизация сайта Индексация

#47

Как узнать дату индексации страницы

Ноябрь’17

8704

19

Оптимизация сайта Индексация

#46

Какие страницы надо закрывать от индексации

Ноябрь’17

11919

19

Оптимизация сайта Индексация

#38

Как удалить страницу из индекса Яндекса и Google

Ноябрь’17

15799

20

Оптимизация сайта Индексация

#37

Как добавить страницу в поиск Яндекса и Google

Апрель’17

21973

19

Оптимизация сайта Индексация

#7

Как закрыть сайт от индексации

Ноябрь’17

11372

18

Оптимизация сайта Индексация

#2

Как проверить индексацию сайта в поисковых системах

Ноябрь’17

19217

27

Оптимизация сайта Индексация

#1

Как ускорить индексацию сайта

Ноябрь’17

7710

29

Rel Nofollow и Noindex или Как закрыть внешние ссылки ссылки

Добрый день! Сегодня мы поговорим о том, как закрыть внешние ссылки от индексация. Сегодняшний урок будет написан на эту тему, так как мне на почту, да и в комментариях начали идти вопросы про Noindex и Nofollow.

Для чего нужно закрывать внешние ссылки от индексации

Многие вебмастера (в том числе и опытные “сеошники” (люди, которые занимаются продвижениями сайтов))закрывают от индексации ненужные ссылки (в частности внешние). Все это делается для того, чтобы не передавать вес страницы на другие сайты. Напомню, что каждая страница имеет определенный вес, который распределяется (“отдается”) другим страницам при простановке ссылок.

То есть, если в Вашем посте стоит одна единственная ссылка и ведет она на главную, то вес будет равняться, к примеру, 1. Получается, Вы сами же продвигаете свою главную страницу и увеличиваете ее вес. Поэтому, я Вам настоятельно рекомендую, чтобы у Вас на блоге была грамотная внутренняя перелинковка.

Смотрите: если у Вас в той же статье будет к примеру 2 ссылки, одна из которых ведет на site1. ru, а другая на site2.ru, то в таком случае вес им будет передаваться по 0.5 (это грубое значение, привел Вам пример, чтобы Вы поняли. На самом деле вес ссылки зависит от многих факторов: релевантность, использование ключевых слов, ссылка расположена ближе к началу документа или в конце и т.п.).

Именно поэтому, следует закрыть внешние ссылки, то есть для того, чтобы вес Вашей страницы никуда не “утекал”, а оставался на Вашем же блоге, что сильно поможет Вам при продвижении. Также, если Вас интересует продажа постовых (вернее заработок на нем), то заказчики требуют, чтобы количество внешних ссылок не превышал числа n (обычно они хотят, чтобы на странице было не более 4-7 внешних ссылок). К примеру, если на странице очень многих исходящих внешних ссылок, то вес каждой ссылки будет мизерным, то есть те сайты, которые получили ссылки с этой страницы получат очень маленький (а может даже и отрицательный) эффект.

Если Вы не закрывали внешние ссылки от индексации, настоятельно рекомендую прочесть то, что написано ниже.

Noindex и Nofollow

Nofollow

Самый лучший способ закрытия ссылки от индексации поисковыми системами это использование тега Nofollow. Работать с ним очень просто: всего лишь нужно добавить нужной ссылке, как говорится, rel=”nofollow”. Смотрите пример ниже.

Пример: обычная ссылка в php (в шаблоне темы, к примеру, sidebar.php, indesx.php) имеет следующий вид:

&lt;a href=”https://wpnew.ru”&gt;Текст ссылки&lt;/a&gt;

Допустим wpnew.ru (см. выше) – это сайт, на который мы не хотим, чтобы передавался вес нашей страницы. Для этого просто нужно добавить rel=”nofollow”. И окончательная ссылка будет выглядит так:

&lt;a href=”https://wpnew.ru” rel="nofollow"&gt;Текст ссылки&lt;/a&gt;

Вот и все, нужная нам ссылка закрыта от индексации.

Это был пример того, как закрывать ссылки от индексации в шаблоне. Если Вы пишите статью, и хотите непосредственно в самой статье поставить Nofollow, то Вам в админке WordPress нужно перейти в HTML режим и добавить уже там rel=”nofollow”:


В моем же любимом редакторе для написание постов (Live Writer) все это дело еще проще. Когда ставлю ссылку, я выбираю «Элемент записи” – nofollow и rel=”nofollow” автоматически присваивается данной ссылке:

Таким же образом Вы можете закрыть от индексации всякие счетчики от LiveInternet (даже если ссылка идет в виде картинки) и т.п.:

Noindex

Тег Noidex был придуман Яндексом. Яндекс раньше “не понимал” rel=”nofollow”, и все вебмастера, чтобы закрыть ссылку от индексации для Яндекса, использовали noindex. Но после того, как Яндекс стал учитывать nofollow (мы все благодарны ему за это 🙂 ), популярность noindex резко упала. Сейчас он очень редко применяется. Я обычно ставлю noindex в местах, где выводится реклама через скрипты и т.п.

Использование Noindex.

Тег Noindex нужно использовать немного по-другому. Он закрывает от индексации (напомню, закрывает только (!) для Яндекса) не конкретную ссылку, а определенный участок. Приведу тот же пример.

&lt;a href=”https://wpnew.ru"&gt;Текст ссылки&lt;/a&gt;

А вот с noindex от Яндекса:

&lt;noindex&gt;&lt;a href=”https://wpnew. ru"&gt;Текст ссылки&lt;/a&gt;&lt;/noindex&gt;

Вот пример того, где я использую noindex (на примере кода для вывода баннера от Rotaban):

Учтите, что тег noindex нужно ставить правильно. Если он стоит, например, ПЕРЕД <div> (начало какого-нибудь стиля), от он должен стоять после конца этого “стиля”, то есть после </div>.

Проверка

Чтобы узнать, все ли ненужные ссылки у Вас закрыты в nofollow, Вы можете использовать SEObar для Opera. А также рекомендую проверить свой блог с помощью http://be1.ru/stat/. Там показано количество исходящих внешних ссылок, а те ссылки, которые взяты в nofollow отмечены красным восклицательным знаком. Таким образом, Вы сможете найти ссылки, которые не закрыты с помощью rel=”nofollow”. Также данный сервис покажет ошибки при использовании noindex.

Думаю, на сегодня все. Будут вопросы, задавайте в комментариях. До скорой встречи, друзья!

Вы хотите купить перила? Ознакомьтесь с ценами на перила в Украине на http://metkov. com.ua — они вас приятно удивят.

Запрос на удаление контента из нашего индекса | Центральный блог Google Search

Вторник, 17 апреля 2007 г.

Мы давно не публиковали эту запись в блоге. Часть информации может быть устаревшей (например, некоторые изображения могут отсутствовать, а некоторые ссылки уже не работают). Прочтите нашу актуальную документацию об удалении веб-страниц.

Как владелец сайта, вы контролируете, какой контент вашего сайта индексируется в поисковых системах. Простейший способ сообщить поисковым системам, какой контент вы не хотите индексировать, это использовать файл robots.txt или robots метатег . Но иногда вы хотите удалить контент, который уже был проиндексирован. Как лучше всего сделать что?

Как всегда, начинается ответ: это зависит от типа контента, который вы хотите удалить. Наш справочный центр для веб-мастеров предоставляет подробную информацию о каждой ситуации. Как только мы повторно просканируем эту страницу, мы удалим контент из нашего индекса.

автоматически. Но если вы хотите ускорить удаление, а не ждать следующего сканирования, способ сделать это только что стало проще.

Для сайтов, право собственности на которые вы подтвердили в своем Инструменты для веб-мастеров учетной записи, вы увидите новый параметр на вкладке «Диагностика» под названием «Удаление URL». Для начала, просто щелкните ссылку Удаление URL , затем Новый запрос на удаление . Выберите вариант, который соответствует желаемому типу удаления.

Индивидуальные URL-адреса

Выберите параметр Индивидуальные URL-адреса , если вы хотите удалить URL-адрес или изображение. Для того, чтобы URL-адрес подлежит удалению, должно быть выполнено одно из следующих условий:

  • URL-адрес должен возвращать код состояния либо
    404
    или 410
  • URL-адрес должен быть заблокирован сайтом файл robots. txt.
  • URL-адрес должен быть заблокирован роботы метатег .

Когда URL-адрес будет готов к удалению, введите URL-адрес и укажите, отображается ли он в нашем веб-сайте. результаты поиска или результаты поиска изображений. Затем нажмите Добавить . Вы можете добавить до 100 URL-адресов в единый запрос. Добавив все URL-адреса, которые нужно удалить, нажмите Отправить запрос на удаление .

Каталог

Выберите этот вариант, если хотите удалить все файлы и папки в каталоге на вашем сайте. Например, если вы запросите удаление

https://www.example.com/myfolder , это удалит все URL-адреса, начинающиеся с этого пути, например:

  • https://www.example.com/myfolder
  • https://www.example.com/myfolder/page1.html
  • https://www. example.com/myfolder/images/image.jpg

Чтобы каталог можно было удалить, вы должны заблокировать его с помощью файла robots.txt. Например, в приведенном выше примере https://www.example.com/robots.txt может включать следующее:

 Агент пользователя: Googlebot
Запретить: /myfolder 

Весь ваш сайт

Выберите этот вариант, только если вы хотите полностью удалить свой сайт из индекса Google. Этот опция удалит все подкаталоги и файлы. Не используйте этот параметр для удаления нежелательных версию URL-адресов вашего сайта от индексации. Например, если вы хотите, чтобы все ваши URL-адреса были проиндексированы используя версию с www, не используйте этот инструмент для запроса удаления версии без www. Вместо, укажите версию, которую вы хотите проиндексировать, с помощью инструмента Preferred domain (и сделать

301 перенаправление к предпочтительной версии, если это возможно). Чтобы использовать эту опцию, вы должны заблокировать сайт с помощью файла robots.txt.

Кэшированные копии

Выберите этот параметр, чтобы удалить кэшированные копии страниц из нашего индекса. У вас есть два варианта изготовления страницы, подходящие для удаления кеша.

Использование метатега

noarchive и запрос на ускоренное удаление

Если вы вообще не хотите кэшировать страницу, вы можете добавить мета без архива тег на страницу, а затем запросите ускоренное удаление кеша с помощью этого инструмента. Запрашивая удаление с помощью этого инструмента мы сразу же удалим кешированную копию, а добавив мета noarchive , мы никогда не будем включать кешированную версию. (Если вы передумаете позже вы можете удалить метатег noarchive . )

Изменение содержимого страницы

Если вы хотите удалить кешированную версию страницы, так как она содержала содержимое, которое вы удалены и не хотят индексироваться, вы можете запросить удаление кеша здесь. Мы проверим, чтобы увидеть, что содержимое активной страницы отличается от кешированной версии, и если это так, мы удалим кешированная версия. Мы автоматически сделаем последнюю кешированную версию страницы снова доступной. через шесть месяцев (и в этот момент мы, вероятно, повторно просканируем страницу и кешированную версию будет отражать последний контент) или, если вы видите, что мы повторно просканировали страницу раньше, вы можете запросить повторное включение кэшированной версии с помощью этого инструмента.

Запросы на удаление отображаются как ожидающие до тех пор, пока они не будут обработаны, после чего статус изменяется на Отклонено или Удалено. Как правило, запрос отклоняется, если он не соответствует Критерии приемлемости для удаления.

Повторное включение контента

Если запрос выполнен успешно, он появляется на вкладке «Удаленное содержимое», и вы можете повторно включить его в любой момент. просто удалив блок тегов robots.txt или robots meta и нажав Reinclude . В противном случае мы исключим контент на шесть месяцев. По истечении этого шестимесячного периода, если содержание по-прежнему заблокирован или возвращает 404 или 410 сообщение о состоянии, и мы повторно просканировал страницу, она не будет повторно включена в наш индекс. Однако, если страница доступна для нашего сканеров по истечении этого шестимесячного периода, мы снова включим его в наш индекс.

Запрос на удаление контента, которым вы не владеете

Но что, если вы хотите запросить удаление контента, расположенного на сайте, которым вы не владеете? Просто стало проще это делать. Наш новый Инструмент запроса на удаление веб-страницы пошаговый процесс для каждого типа запроса на удаление.

Поскольку Google индексирует Интернет и не контролирует содержание веб-страниц, мы, как правило, не можем удалять результаты из нашего индекса, если только веб-мастер не заблокировал или не изменил содержимое или не удалил страница. Если вы хотите, чтобы содержимое было удалено, вы можете сделать это вместе с владельцем сайта, а затем используйте этот инструмент, чтобы ускорить удаление из наших результатов поиска.

Если вы нашли результаты поиска, содержащие определенные типы личной информации, вы можете запросить удаление, даже если вы не смогли работать с владельцем сайта. Для этого типа удаления укажите свой адрес электронной почты, чтобы мы могли работать с вами напрямую.

Если вы нашли результаты поиска, которые не должны возвращаться при включенном безопасном поиске, вы можете разрешить мы знаем, используя этот инструмент, а также.

Вы можете проверить статус ожидающих запросов, а также версию, доступную в веб-мастере. Tools статус изменится на «Удалено» или «Отклонено» после обработки. Как правило, запрос отклоняется, если он не соответствует критериям приемлемости. Для запросов, связанных с личными информацию, вы не увидите статус, доступный здесь, но вместо этого получите электронное письмо с более информация о следующих шагах.

А как насчет существующего инструмента для удаления URL-адресов?

Если вы делали предыдущие запросы с помощью этого инструмента, вы все равно можете войти в систему, чтобы проверить статус эти запросы. Однако делайте любые новые запросы с помощью этой новой и улучшенной версии инструмента.

Пагинация с помощью rel=&qout;next&qout; и rel=&qout;prev&qout; | Блог Google Search Central

Четверг, 15 сентября 2011 г.

Мы давно не публиковали эту запись в блоге. Часть информации может быть устаревшей (например, некоторые изображения могут отсутствовать, а некоторые ссылки уже не работают). rel=prev/next больше не является сигналом индексации. Проверьте наши актуальное руководство по пагинации.

Очень похоже на rel="canonical" действует сильный намек на дублированный контент, теперь вы можете использовать элементы ссылки HTML rel="следующий" и rel="предыдущий" чтобы указать взаимосвязь между URL-адресами компонентов в серии с разбивкой на страницы. На протяжении всей сети серия контента с разбивкой на страницы может принимать различные формы — это может быть статья, разделенная на несколько страницы-компоненты, или категория продуктов с элементами, разбросанными по нескольким страницам, или ветка форума разделены на последовательность URL-адресов. Теперь, если вы решите включить отн = "следующий" и rel="prev" на страницах-компонентах серии, вы даете Google сильный намек на то, что вы хотели бы, чтобы мы:

  • Объедините свойства индексирования, такие как ссылки, со страниц/URL-адресов компонентов на серию как целыми (то есть ссылки не должны оставаться рассредоточенными между page-1. html , page-2.html и т. д., но сгруппированы по порядку).
  • Направляйте пользователей на наиболее релевантную страницу/URL — обычно на первую страницу серии.
Взаимосвязь между URL-адресами компонентов в серии теперь может быть указана в Google через rel="следующий" и rel="предыдущий" .

Есть исключение для реализации rel="prev" и rel="next" : Если, наряду с вашей серией контента, вы также предлагаете пользователям страницу для просмотра всех или если вы рассматривая страницу просмотра всех, см. наш пост на Просмотреть все в результатах поиска, чтобы узнать больше информация. Поскольку пользователи чаще всего предпочитают страницы с возможностью просмотра всех, мы делаем все возможное, чтобы отображать эту версию, когда это уместно, в результатах, а не на странице компонента (страницы компонентов больше шансов всплыть с rel="следующий" и rel="предыдущий" ).

Если у вас нет страницы просмотра всех или вы хотите переопределить Google, возвращающий страницу просмотра всех, вы можно использовать rel="next" и rel="prev" , как описано в этом посте.

Для получения информации о конфигурациях с разбивкой на страницы, которые включают страницу просмотра всех, см. нашу публикацию на Просмотреть все в результатах поиска.

Описание вариантов

Вот три варианта серии:

  1. Оставьте все, что у вас есть, как есть. Контент с разбивкой на страницы существует во всем Интернете, и мы продолжать стремиться предоставлять пользователям наилучшие результаты, независимо от страницы rel="next" / rel="prev" HTML-разметка или ее отсутствие.
  2. Если у вас есть страница «Просмотреть все» или вы рассматриваете возможность создания страницы «Просмотреть все», см. нашу публикацию на Просмотреть все в результатах поиска.
  3. Подскажите Google взаимосвязь между URL-адресами компонентов вашей серии с rel="следующий" и rel="предыдущий" . Это помогает нам более точно индексировать ваши контент и показывать пользователям наиболее релевантную страницу (обычно первую страницу). Выполнение подробности ниже.

Реализация

rel="next" и rel="prev"

Если вы предпочитаете вариант 3 (выше) для своего сайта, давайте начнем! Допустим, у вас есть контент разбивается на URL-адреса:

https://www.example.com/article?story=abc&page=1
https://www.example.com/article?story=abc&page=2
https://www.example.com/article?story=abc&page=3
https://www. example.com/article?story=abc&page=4 

На первой странице https://www.example.com/article?story=abc&page=1 вы должны указать в разделе :

 

На второй странице https://www.example.com/article?story=abc&page=2 :


 

На третьей странице https://www.example.com/article?story=abc&page=3 :


 

И на последней странице https://www.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *