# robots.txt for http://www.nalogovic.ru/

User-agent: *
Disallow: /cgi-bin/
Disallow: /secretar/
Disallow: /searchpos/
Host: www.nalogovik.ru
Sitemap: http://www.nalogovik.ru/sitemap.xml
Crawl-delay: 4.5 # задает таймаут в 4.5 секунды


User-agent: Yandex
Crawl-delay: 2 # задает таймаут в 2 секунды