Файл robots.txt

Для каждого сайта автоматически генерируется файл robots.txt.

Данный файл доступен по адресу: http://yoursite.name/robots.txt. (вместо yoursite.name укажите доменное имя вашего сайта)