Дубли страниц

[frik 0]

Около года назад делал магазх на базе вамшопа, в итоге из-за включения коротких адресов насоздавались страницы дубликаты, как итог - резкое падение сайта из поисковиков и нахождение там доселе. Хочу начать с нуля заново. Собираюсь использовать при забивании товаров и позиций ввод адресов вручную. Вопрос-  как это реализовано? Будут опять создаваться дубли страниц или страница для каждого товара будет одна единственная?

Так же может есть какой-нибудь готовый файл роботс.тхт в котором закрыто от индексации всё лишнее, а то панель яндекс-вебмастер показывает такие ужасы по индексации магазина. Даже на абсолютно чистом магазе.... в панеле вебмастера: Загружено роботом 342, исключено 18, на поиске 43!  Это значит 280 страниц вообще левые какие то!

А на работающем интернет-магазине ситуация такая: Загружено 25096, исколючено 9550, в поиске 2484. Остается 13060 страниц левых, которые просто мешаются

[Bububu 0]

роботс.тхт есть в магазине

Если нужно что-то исключить из индекса (по вашему мнению и потребности) - пропишите в нём.

Панель яндекс-вебмастер вам как раз и покажет что нужно исключить из индексации.

А лучше оставьте роботс.тхт в покое и понаблюдайте за отчётом Яндекс по индексации - со временем он (Яндекс) сам всё расставит по полочкам.

Если Вы уверены в своих знаниях - отредактируйте роботс.тхт по своему усмотрению и выиграете 2-5 месяцев.

P.S.: Файл роботс.тхт, который идет по умолчанию настроен достаточно хорошо.

[frik 0]

Да я же не спрашиваю где прописать. Я спрашиваю есть ли готовый роботс.тхт нормально настроенный:). Ибо базовый дает как раз такую картину как я написал, а именно 70% левака в индексе

[Bububu 0]

P.S.: Файл роботс.тхт, который идет по умолчанию настроен достаточно хорошо.

ИМХО, конечно.

[Иван Юрченко 0]

Предлагаю внести в роботс директиву

Disallow: /print*

поскольку попадают в индекс поисковиков страницы-версии для печати

[Bububu 0]

Да.

[Иван Юрченко 0]

Еще дублируются первые страницы в каталоге, статьях, поиске и т.д. Если страниц больше одной, то у первой в конце добавляется &page=1, поэтому предлагаю закрыть в роботсе

Disallow: /*&page=1

Что скажете?

Еще безуспешно пытался сделать редирект в .htaccess со страниц &page=1 на страницы без такого окончания - ничего не получилось, адрес в строке не меняется

[Bububu 0]

Disallow: /*&page=1

Что скажете?

Не уверен, но мне кажется, что это работать не будет - Яндекс же понимает, что page это не страница, а параметр её. А для параметров у него отдельная директива: http://help.yandex.ru/webmaster/?id=996567#1041216

Еще безуспешно пытался сделать редирект в .htaccess со страниц &page=1 на страницы без такого окончания ....

Даже и не знаю.

[Иван Юрченко 0]

А чем этот запрет отличается от уже сущестаующих в стандартном роботсе?

Disallow: /*sort/

Disallow: /*cPath

Тогда эти параметры тоже надо убирать через Clean-param

[Bububu 0]

Тогда эти параметры тоже надо убирать через Clean-param

Согласен.

Например так:

Clean-param: sort
Clean-param: direction[/code]

[Иван Юрченко 0]

Проверил через вебмастер яндекс и вебмастер гугл:

Disallow: /*&page=1  - правильно понимает

[Bububu 0]

Хорошо.

[Иван Юрченко 0]

Решил немного переиграть: не блокировать страницы с окончание page=1 а вести на такие страницы сразу с меню (добавлять вконце ссылок меню &page=1). Подскажите где можно править ссылки, ведущие из меню каталога?

[Bububu 0]

Подскажите где можно править ссылки, ведущие из меню каталога?

Ссылки для меню каталога формируются в templates\vamshop\source\inc\vam_show_category.inc.php

[Bububu 0]

Очевидно там надо заменить

$categories_string .= vam_href_link(FILENAME_DEFAULT, $cPath_new);

$categories_string .= '">';

на

$categories_string .= vam_href_link(FILENAME_DEFAULT, $cPath_new);

$categories_string .= '?page=1">';

если я правильно понял, что вы хотите.

[Иван Юрченко 0]

Да, оно, спасибо, только не

$categories_string .= '?page=1">';

а

$categories_string .= '&page=1">';

Ссылки в меню изменились, но оказывается этого мало - остались ссылки старого вида из подкатегорий, которые вцентре страниц отображаются. Где это менять?

И второе - есть какое-то разделение в меню на категории которые содержат подкатегории и без них? - именно в последних надо и добавлять &page=1