Как убрать дубли страниц?

24 мая 2013 г. Время чтения: меньше минуты Опубликовано в разделах: Блог, Общее

Что такое «дубли страниц», как и почему они появляются?
Дело в том, что на любом сайте содержатся так называемые «служебные страницы», которые полностью идентичны по контенту другим страницам, но, тем не менее, никакой нагрузки не несут (например, страницы вывода на печать контента). Дублирующие страницы могут быть оставлены в корпусе сайта и по недосмотру его разработчиков.

Дубли страниц вредны, прежде всего тем, что поисковый робот при индексировании Вашего сайта считает, что Вы несколько раз помещаете на своих страницах одну и ту же информацию; это приводит к снижению рейтинга Вашего ресурса. Поэтому дубли страниц необходимо убирать, то есть закрывать от индексации поисковыми системами.

Самый распространенный способ того, как убрать дубли страниц – это редактирование файла robots.txt, находящегося в корневой директории Вашего сайта. Но перед тем, как убрать дубли страниц, необходимо их вначале обнаружить.

Обнаруживаются дублирующие страницы следующим образом: Вы вводите в кавычках в строку поискового запроса довольно большой фрагмент текста с одной из страниц Вашего сайта, которая уже проиндексирована. Если в поисковой выдаче Вы находите больше одной страницы, то все остальные страницы – дублирующие. Таким образом проверяются все страницы Вашего ресурса; адреса дублирующих страниц выписываются.

Далее Вы открываете для редактирования файл robots.txt и в этом файле задаете поисковому роботу директиву Disallow, запрещающую индексацию страниц. Далее перечисляете все страницы, которые Вам необходимо закрыть от индексирования. Выглядит эта строка примерно так: Disallow: /site-page1. После окончания редактирования Вы сохраняете файл и ждете переиндексации сайта поисковыми системами; во время этой индексации поисковый робот сам уберет дублирующие страницы из индекса.

Понравился пост?

Подпишитесь на ежедневное обновление нашего блога прямо сейчас! Будьте в курсе новостей интернет-маркетинга!

Интернет-магазин и развитие
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Интернет-магазин и развитие на 100%
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Корпоративный сайт и развитие
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Корпоративный сайт и развитие на 100%
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Сайт-визитка и развитие
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Сайт-визитка, тексты и развитие
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Сайт-визитка и развитие на 100%
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Сайт, тексты и развитие (36 262 р)
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж и Яндекс.Директ
Получать новости компании


×
Лэндинг пейдж и Google.Adwords
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж и Яндекс.Директ и Adwords
Получать новости компании


×
Лэндинг пейдж и Яндекс.Директ 35 300 руб.
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Пакетное предложение
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Продвижение сайта без бюджета»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Продвижение сайтов. Модуль 2»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Профессиональная работа с контекстной рекламой»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание Landing page + Яндекс.Директ»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание сайта на Joomla 3! Модуль 2. Разработка»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание интернет-магазина на VirtueMart»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание интернет-магазина на VirtueMart»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «WordPress. Модуль 1. Управление сайтом»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс«WordPress. Модуль 2. Разработка»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание интернет-магазина»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Создание сайта на основе CMS/HTML»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Профессиональная веб-аналитика Google и Яндекс»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Курс «Непоисковое продвижение сайтов в Интернет»
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж на готовом дизайне и Яндекс.Директ
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж на готовом дизайне и Яндекс.Директ
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж на готовом дизайне и Google Adowrds
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж на готовом дизайне и Яндекс.Директ и Google Adowrds
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×
Лэндинг пейдж на готовом дизайне и Яндекс.Директ и Google Adowrds 2 месяца
Получать новости компании

Я согласен с обработкой моих персональных данных в соответствии с с Федеральным законом РФ № 152-ФЗ «О персональных данных» от 27.07.2006 г.

×