Корректный robots.txt

Бюджет: 300 руб
3.83 $ – 3.36 €
Нужно откорректировать файл. Сайты на wordpress.
Хостер (majordomo) ругается на него и пишет следующее:

185.11.146.125 – - [17/Jul/2015:17:20:55 +0300] "POST /xmlrpc.php HTTP/1.1" 403 168 "-" "Googlebot/2.1 (+www.google.com/bot.html)"
185.11.146.125 – - [17/Jul/2015:17:20:55 +0300] "POST /xmlrpc.php HTTP/1.1" 403 168 "-" "Googlebot/2.1 (+www.google.com/bot.html)"
185.11.146.125 – - [17/Jul/2015:17:20:55 +0300] "POST /xmlrpc.php HTTP/1.1" 403 168 "-" "Googlebot/2.1 (+www.google.com/bot.html)"

Было очень много запросов от 185.11.146.125 к файлу /xmlrpc.php. Настолько много, что сервер не справлялся. В данный момент прописали директивы в конфигурационные файлы, запрещающие доступ к файлу xmlrpc.php.
Возможно, эти действия повлияют на индексацию сайта в google

support.google.com/webmas...

Вероятно, это связано с не корректным содержанием фалов robots.txt.
Вы можете создать корректный robots.txt , затем мы откроем доступ к xmlrpc.php

В данный момент сайты доступны (но не для google бота).

Проверьте, пожалуйста.
Опубликован 05.09.2015 в 14:44

Выберите способ верификации:

Обновите страницу после прохождения верификации.