Здравствуйте !
Итак, сегодня я расскажу вам о том, как проверить файл robots.txt в сервисе Яндекс Вебмастер. О том что такое файл robots.txt, как создать правильный файл robots.txt и как добавить данный файл на свой сайт — я уже рассказывал. Если на вашем сайте есть файл robots.txt значит сейчас мы проверим его в сервисе Яндекс Вебмастер.
Итак зайдите на сайт Яндекс Вебмастер.
На главной странице Яндекс Вебмастер, под зелёной кнопкой Начать работу, нажмите на вкладку — Проверить robots.txt.
Далее, на странице — Анализ robots.txt, вам нужно в поле — Имя хоста ввести адрес своего сайта и нажать на кнопку — Загрузить robots.txt с сайта.
После чего содержимое вашего файла robots.txt отобразится в поле — Robots.txt. Нажмите на кнопку — Проверить.
Внизу страницы будут показаны Используемые секции файла. Если в файле будут найдены ошибки, то они будут показаны на странице внизу. Если ошибки не отображаются значит с вашим файлом всё в порядке.
Вот в принципе и всё, здесь нечего особо разбирать, проверили один раз файл robots.txt, ошибок нет, значит всё нормально, можете забыть про файл robots.txt, больше его проверять не нужно. На этом всё, до новых встреч ! Остались Вопросы ? Что-то не понятно ? Пишите ! Будем разбираться…:-))