robots.txt

https://jamabushi.ru/robots.txt

Цель

Разрешить индексацию полезных страниц сайта и указать поисковым системам расположение sitemap.xml.

Критерии готовности

• файл доступен по /robots.txt
• разрешена индексация публичных страниц
• запрещены технические разделы (если есть)
• указан адрес sitemap.xml