117342, Москва,
ул. Миклухо-Маклая, 42Б, оф. 16

cхема проезда

+7 (495) 540-53-66
(Пн-Пт с 9:00 до 21:00)

позвоните нам

117342, Москва,
ул. Миклухо-Маклая, 42Б, оф. 16

cхема проезда

+7 (495) 540-53-66
(Пн-Пт с 9:00 до 21:00)

Заказать звонок

117342, Москва,
ул. Миклухо-Маклая, 42Б, оф. 16

+7 (495) 540-53-66
(Пн-Пт с 9:00 до 21:00)

Закрыть от индексации

Один из приемов внутренней оптимизации — это закрытие страниц или отдельных ссылок от индексации роботами. Зачем это делать?

Оптимизация сайта — это перераспределение статичного веса проекта на конкретные продвигаемые страницы. Для достижения нужного результата иногда необходимо исключать некоторые ссылки и целые страницы из индекса.

Как происходит индексация?

Добавлением нового сайта или отдельных страниц в поисковую систему занимаются поисковые роботы. Они заходят на проект, считывают его, и, если проект соответствует правилам поисковой системы, добавляет его в базу.
Заходя на его страницы, поисковый робот первым делом обращается к файлу «/robots.txt». Найдя его, он «знакомится» с содержащейся в нем инструкцией: следует на те страницы, которые веб-мастер разрешает индексировать, избегая закрытых.

Что можно закрыть от индексации?

Любую страницу или ссылку. А можно и весь сайт. Достаточно написать в вышеупомянутом файле об этом.
Если вы хотите закрыть от индексации весь проект, то сделать это очень легко. Необходимо в robot.txt прописать:

User-agent: *
Disallow: /

После этого ни один работ с «Гугла», «Яндекса» или, не дай боже, «Бинга» не сможет добавить в базу контент сайта.
Другой способ — создание пустого файла «/robots.txt».

Можно разрешить индексировать проект только одному поисковому роботу. Например, вы хотите проверить эффективность продвижения проекта в одной только поисковой системе. У нее существует робот irobot, который следит за индексацией проектов. В «/robots.txt» необходимо прописать следующее:

User-agent: irobot
Disallow:
User-agent: *
Disallow: /

Зачем все это нужно?

Как уже было сказано, закрыть от индексации отдельные страницы или ссылки бывает полезно для внутренней оптимизации ресурса. Таким образом, можно сконцентрировать свои усилия на нескольких материалах, которые являются «посадочными страницами».

Такой способ при должном подходе повышает успешность проведения рекламной кампании.

  • Узнать цену
Оставить заявку



Наши отзывы
  • img1
    Группа компаний "Контур" выражает благодарность компании "Sem-systems" за плодотворное и приятное ...

Оставьте свой телефон и мы перезвоним вам
Оставьте свои контактные данные и мы свяжемся с вами