Дубли страниц сайта! Как обнаружить и зачем от них избавляться!

Начну с того, что дубли страниц имеются в любом сайте. Даже если вы считаете, что на вашем сайте их нет, легко проверить так ли это. Опасны дубли ухудшением индексации сайта, потому что сильно расширяют его содержимое. Только представьте, к примеру, на вашем сайте 10 статей и каждая из них имеет по одному дублю, объем ресурса увеличивается вдвое! А если статей больше ста или тысячи, и каждая из них дублируется, да еще и не один раз?

Дубли также влияют на показатели трафика страницы. Пользователи будут заходить на клон страницы, а не на основную страницу.

Добавьте сайт в Google Webmasters, перейдите в панель инструментов, далее «Вид в поиске» и «Оптимизация HTML. Здесь вы найдете всю информацию о повторяющихся мета-тегах и title

google webmasters

Почаще выполняйте такую проверку.

Здесь же вы увидите совпадающие заголовки, но только в случае если являетесь владельцем сайта.

Но что же делать если статья на сайте попадает под несколько категорий? Вы не увидите такие дубли страниц в Google Webmasters, а при анализе выдачи их легко пропустить. На помощь нам придет «Расширенный поиск», который присутствует и в Яндекс, и в Google. Пройдите на страницу http://www.google.ru/advanced_search

google webmasters2

 

Когда на сайте много страниц, для анализа разбейте их на категории и выберите по несколько страниц для каждой.

Для борьбы с дублями страниц прибегнем к помощи robot.txt, мета-тега robots и 301 редиректу.

Принципы работы с файлом robot.txt можно изучить на сайте robotstxt.org.ru? Разобраться с синтаксисом сможет каждый.  Не рекомендую пользоваться таким методом управления индексацией, потому как метод не эффективен. Давайте сразу перейдем к второму способу.

Применение мета-тега robots является более эффективным методом управления индексацией. Разместите в шапке страницы мета-тег: <meta name= “robots” content=”noindex”>. Тем самым, вы исключаете из существующего индекса страницы и запрещаете попадание новых. Более подробную информацию можно найти в справочнике от Google.

Практически на любом сайте есть как минимум четыре страницы дубля.  К примеру, главная страница имеет url адрес вида mysite.ru (где mysite — название вашего сайта), но согласитесь, если вы введете в адресной строке браузера www.mysite.ru, или mysite.ru/index.php, или www.mysite.ru/index.php, то вы попадете на одну и туже страницу, хотя и с разными url адресами. Вот вам четыре дубля.

Для борьбы с дублями такого вида, прибегнем к помощи модуля ModRewrite и перенаправим посетителей с адреса www.mysite.ru на mysite.ru. В файле .htaccess пропишем:

RewriteEngine On
RewriteCond %{HTTP_HOST} ^mysite.ru$ [NC]
RewriteRule ^(.*)$ http://mysite.ru/$1 [R=301,L]

что по сути одно и тоже. Далее избавимся от дублей с приставкой /index.php, для этого пропишем:

RewriteCond%(HTTP_REQUES)^[A-Z]{3,9}/index.php HTTP/

RewriteRule^index.php$http://mysite.ru/[R=301,L]

Если заменить php на html, то вы избавитесь от дубля страницы с видом mysite.ru/index.html

Добавляем в файл следующую запись:

RewriteCond %{REQUEST_URI} (.*/[^/.]+)($|\?)
RewriteRule .* %1/ [R=301,L]

тем самым мы избавимся от дубля страницы вида http://mysite.ru, теперь страница будет всегда иметь вид  http://myite.ru/

 

Воспользуйтесь формой ниже для оформления подписки на новые материалы. Без спама, не чаще одного раза в неделю.


 

 

Дубли страниц сайта Как обнаружить зачем от них избавляться

Оставить комментарий

Введите правильный ответ * Лимит времени истёк. Пожалуйста, перезагрузите CAPTCHA.

  • Флагманский планшет Samsung Galaxy Tab S6 не впечатлит ни скоростью зарядки, ни автономностью 19.07.2019
    Вчера мы уже смотрели на дизайн планшета Samsung Galaxy Tab S6, который получит SoC Snapdragon 855 и станет одним из самых производительных планшетов на рынке. Также известно, что аппарат получит дисплей диагональю 10,5 дюйма, подэкранный сканер отпечатков пальцев и 6 ГБ ОЗУ. Теперь же стало известно, что планшет оснастят аккумулятором ёмкостью 6840 мА·ч. Для сравнения, […]
    shavl
  • Xiaomi Qin 2 — очень необычный смартфон с невероятно вытянутым экраном и без фронтальной камеры 19.07.2019
    Компания Xiaomi на собственной краудфандинговой платформе начала сбор средств на весьма необычный смартфон. Англоязычные источники называют его Qin 2, относя к той же линейке, в которой в прошлом году вышел обычный кнопочный телефон Xiaomi Qin. При этом в названии на сайте среди китайских иероглифов этого слова найти не удастся. Впрочем, аппарат в любом случае относится […]
    shavl
  • Xiaomi Mi Mix 4 получит супер-телеобъектив 19.07.2019
    Директор по новой продукции Xiaomi Ван Тен Томас (Wang Teng Thomas) снова общался с пользователями в социальной сети Weibo и сообщил новую информацию по смартфону Xiaomi Mi Mix 4. Сразу несколько человек задали ему вопрос, получит ли Xiaomi Mi Mix 4 так называемый супер-телеобъектив. В ответ Ван Тен Томас заявил, что смартфон действительно должен получить супер-телеобъектив, согласно […]
    shavl

заработай на profit-partner

Яндекс.Метрика Рейтинг@Mail.ru