Перейти к содержанию
Форум поддержки пользователей VamShop

google_sitemap.php закрыт доступ


Рекомендуемые сообщения

  • 3 weeks later...

Так что именно гугл пишет-то?!

Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

вот например: .../index.php?cat=107

в роботстхт прописано - Disallow: /*?cat=*

у меня аналогичная проблема - в google_sitemap.php включаются файлы без учета robots.txt

Можно ли внести корректировку?

Ссылка на сообщение
Поделиться на другие сайты

Так это уже Вы сами добавили такую строку в robots.txt

По умолчанию ничего такого нет.

Можно конечно, раз уже правили robots.txt, то странно, что Вы такие вопросы задаёте.

Ссылка на сообщение
Поделиться на другие сайты

Так Вам надо robots.txt править, в google_sitemap.php будет куча таких ссылок, это ссылки на разделы Вашего каталога товаров.

Ссылка на сообщение
Поделиться на другие сайты

пожалуйста разъясните для чего держать в выдаче дубли? почему не закрыты в роботстхт

....?sort=name&direction=asc&page=10

....?sort=price&direction=desc&page=2

а с ../*?cat=* похоже промашка вышла ))

Ссылка на сообщение
Поделиться на другие сайты

Через robots.txt всё равно все дубли закрыть не получится, пока что эта проблема с дублями до конца не закрыта.

Возможно, в будущих версиях.

Ссылка на сообщение
Поделиться на другие сайты

Через robots.txt всё равно все дубли закрыть не получится, пока что эта проблема с дублями до конца не закрыта.

Возможно, в будущих версиях.

а как если ни через robots.txt? Какие есть еще варианты в последней версии?

Ссылка на сообщение
Поделиться на другие сайты

Я ж говорю, в текущей версии эта проблема до конца не решена.

Как - добавлять свой php код и отдавать на дубли либо 404 либо 301 ответ.

Ссылка на сообщение
Поделиться на другие сайты
  • 3 months later...

Добрый вечер. Подскажите пожалуйста в "robots.txt" (магазин 1.69) чтобы отправить на индексацию в google и yandex, я правильно добавил строки?

User-agent: * - вариант по умолчанию

Disallow: ......

Disallow: ......

Disallow: ...... и Т. Д.

User-agent: Yandex

Disallow: ......

Disallow: ......

Disallow: ...... и Т. Д.

Host: Сайт.ru

И правильно я указал путь? к "sitemap" Sitemap: http://www.сайт.ru/i...age=xml_sitemap

и

User-agent: googlebot

Disallow: ......

Disallow: ......

Disallow: ...... и Т. Д.

Host: Сайт.ru

И правильно я указал путь? к "sitemap" Sitemap: http://www.сайт.ru/i...age=xml_sitemap

Ссылка на сообщение
Поделиться на другие сайты

XML карта вообще не является обязательным условием для индексации и тем более не обязательно её в robots.txt указывать.

Лучше её добавить в google webmaster и яндекс вебмастер, а можно вообще ничего не добавлять, роботы поисковиков и так Вас найдут и проиндексируют всё, что нужно, XML карта лишь немного упрощает жизнь поисковым роботам.

Ссылка на сообщение
Поделиться на другие сайты
×
×
  • Создать...