grabber , сделал как ты написал но мне не помогло. robots.txt так и остался на карантине. По ссылке мой сайт/robots.txt выдает: User-agent: uBot
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
User-agent: Yandex
Disallow: /