User-agent: *
Disallow: /my/
Crawl-delay: 3
Sitemap: https://nwst.ru/sitemap.1488591.xml.gz


User-Agent: Yandex
Allow: /
Disallow: /my/
Crawl-delay: 3
Host: nwst.ru
Sitemap: https://nwst.ru/sitemap.1488591.xml.gz


User-agent: msnbot

Crawl-delay: 10


User-agent: MJ12bot

Crawl-delay: 20