По-умолчанию, все сайты на запрос файла robots.txt отдают такое содержимое:

User-agent: *
Disallow: /profile*
Disallow: /login*
Disallow: /register*
Disallow: /resetting* 

Это содержимое можно изменять под любые нужды. Для этого зайдите в раздел Система — Ресурсы интерфейса администрирования и создайте там файл с именем "robots.txt.twig". В имени файла присутствует слово "twig" не зря. Это значит, что в этом файле можно использовать функции и синтаксис twig.