robot.txt
Если на сайте все страницы должны быть доступны для поисковиков, то нужно ли создавать robot.txt?
Если для этого случая нужен robot.txt, то будет ли этих строк достаточно? *User-agent: *
Disallow:*
Сообщение в Yandex Webmaster: Не найден файл...