Инструмент вебмастера - анализ файла robot.txt
Заходим в вебмастер Яндекса.
Заходим меню Инструменты - Анализ robots.txt
При открытии инструмента загрузится текущая версия robot.txt . Если в файле присутствуют ошибки они будут показаны. Можно ошибки исправить и через кнопку проверить заново загрузить robot.txt. Чуть ниже можно проверить доступна или не доступна страница к индексации.
Пример ниже когда разрешена и запрещена индексация.
Добавить комментарий:
Для того, чтобы добавить коментарий, авторизируйтесь.