robots.txt

11 июля 2014 г.

robots.txt

ДД!
Такая ситуация:
Файл роботс прописан так
User-agent: *
Disallow: /admin
Disallow: /katalog/cart/
Disallow: /index.php$
Host: vdorogube.ru
Sitemap: http://vdorogube.ru/sitemap.php

Но почему-то поисковики индексируют и синонимы сайта. Файл в яндекс и гугл заливал.
Подскажите, что еще я не сделал?

Модератор 11 июля 2014 г.

Re: robots.txt

а давно прописан то?
Проверьте здесь: http://webmaster.yandex.ru/robots.xml

11 июля 2014 г.

Re: robots.txt

строка 'host' давно остальное вчера.

Модератор 11 июля 2014 г.

Re: robots.txt

vdoroguberu,
если не ошибаюсь, раньше для работы директивы Host обязателен был хотя бы пустой Disallow:

Авторизация