Дублирование страниц

Владимир Савкин

Гуру MediaWiki
Регистрация
03.04.2015
Сообщения
45
Реакции
2
Там несколько вообще вариантов дублей ))) я закрыл всё через robots.txt:
Код:
User-agent: *
Disallow: /api.php
Disallow: /index.php/*?
Disallow: /index.php?
Disallow: /index.php/MediaWiki
Disallow: /index.php/MediaWiki:
Disallow: /index.php/%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD
Disallow: /index.php?diff=
Disallow: /index.php?oldid=
Disallow: /index.php?title=MediaWiki
Disallow: /index.php?title=MediaWiki:
Disallow: /index.php?title=%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD
 
Там несколько вообще вариантов дублей ))) я закрыл всё через robots.txt
Достаточно ли вписать Disallow: /index.php/ для запрета индексации статей идущих через index.php или нужно ввести туда адрес каждой статьи? Вот это я не понимаю...
 
Достаточно ли вписать Disallow: /index.php/ для запрета индексации статей идущих через index.php или нужно ввести туда адрес каждой статьи? Вот это я не понимаю...

Этого достаточно.
Проверить на запрет индексации УРЛ'a можно в Яндекс Вебмастере, к примеру.
 
Этого достаточно.
Проверить на запрет индексации УРЛ'a можно в Яндекс Вебмастере, к примеру.
У меня не идет че то. После того как указал этот код некоторые страницы пропали из поиска. Из 29 статей на сайте яндексом проиндексировано только 7... Не пойму в чем дело, статьи вроде уникальные и времени с и их создания прошло прилично.
 
Достаточно ли вписать Disallow: /index.php/ для запрета индексации статей идущих через index.php или нужно ввести туда адрес каждой статьи? Вот это я не понимаю...
Вписав так Вы закроете все страницы для поисковиков! Смотрите мой роботс.txt www.wikijournal.ru/robots.txt - он закрывает все ненужные дубли от поисковиков
 
Вписав так Вы закроете все страницы для поисковиков! Смотрите мой роботс.txt www.wikijournal.ru/robots.txt - он закрывает все ненужные дубли от поисковиков
Я как знаю индексацию всех страниц запрещает такой текст Disallow: /index.php/ а я же ее вписал у себя в роботсе без косой черты в конце. Так вроде можно...
 
Назад
Верх