Найдено несколько директив Host в robots.txt

Если Вы не нашли подходящего раздела, для вопроса связанного с web строительством, то Вам сюда.
Аватара пользователя
Вирус
Сообщения: 28

Найдено несколько директив Host в robots.txt

Сообщение Вирус » Чт мар 26, 2015 5:40 pm

Доброго времени суток. Для своего сайта давненько написал robots.txt. И как говорит Yandex, для него надо писать отдельно, типа вот так:

Код: Выделить всё

User-agent: *
Disallow: /.....
Disallow: /.....
Hostsite.ru
Sitemap
http://site.ru/sitemap.xml

User-agentYandex
Disallow
: /.....
Disallow: /.....
Hostsite.ru
Sitemap
http://site.ru/sitemap.xml 

Так я и сделал. Сегодня решил проверить свою писанину в Вебмастере: http://webmaster.yandex.ru/robots.xml. При проверке получил ошибку: Найдено несколько директив Host. Понятно, что их несколько, но ведь одна прописана для Яндекса, вторая для всех остальных. Можно как-то поправить эту ошибку? Заранее спасибо.
Реклама
Аватара пользователя
Slash
Администратор
Сообщения: 2028
Поблагодарили: 62 раза

Re: Найдено несколько директив Host в robots.txt

Сообщение Slash » Чт мар 26, 2015 6:21 pm

Host - не надо прописывать для Яндекса и остальных поисковиков отдельно, в файле его хватит одного:

Код: Выделить всё

User-agent: *
Disallow: /.....
Disallow: /.....
Sitemaphttp://site.ru/sitemap.xml

User-agentYandex
Disallow
: /.....
Disallow: /.....
Sitemaphttp://site.ru/sitemap.xml

Hostsite.ru
Аватара пользователя
Вирус
Сообщения: 28

Re: Найдено несколько директив Host в robots.txt

Сообщение Вирус » Пт мар 27, 2015 12:53 pm

Slash, спасибо. То что надо.
Теперь ошибки нет.
cefp
Сообщения: 332
Поблагодарили: 3 раза

Re: Найдено несколько директив Host в robots.txt

Сообщение cefp » Пт июн 12, 2015 1:08 am

Интересно, нужно ли копировать остальные строки, если они одинаковые? Кроме строки User-agent:
d o h o d - s - n u l y a .ru - идеи бизнеса.
Аватара пользователя
greendev
Сообщения: 79

Re: Найдено несколько директив Host в robots.txt

Сообщение greendev » Сб июн 13, 2015 12:13 pm

Если Вы только запрещаете индексацию отдельных страниц, то отдельно для Яндекса ничего писать не нужно.

Вернуться в «Прочее»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 1 гость