RE: Нужно ли в WordPress в файле Robots.txt делать отдельные директивы для Googlebot ?
Суть вопроса в самом заголовке, нужно ли в WordPress в файле Robots.txt делать отдельные директивы для Googlebot, так как все делают для Яндекса ? Например сделать три куска директив для User-agent: *, User-agent: Yandex и User-agent: Googlebot.
Я не пойму, у меня одного в инструментах проверки файла robots.txt или у всех такое ?
Кстати про Адсенс. В Blogspote по умолчанию (немного с ним имел дело) для Адсенс все открыто и стоит такое правило:
User-agent: Mediapartners-Google
Allow: /
Может и в сайте ему все открыть ?
Да, можете открыть, так будете уверены, что реклама будет показана.
P.S. Если у вас есть замечания или встречный вопрос к ответу, просто нажмите "Комментарии" под выбранным ответом. Отвечать на свой же вопрос нет необходимости.
