# robots.txt User-agent: * Disallow: http://www.dr-web.ru/food1.html