#Разрешена регистрация всех страниц сайта
User-Agent: * 
Disallow: /backcat/
Crawl-delay: 2 # задает таймаут в 2 секунды