# lims.txt — AI-optimized # https://xn--80aaahqpcuvhvipz6j.xn--p1acf/ ############################ # Общие ограничения ############################ User-agent: * Crawl-delay: 10 Request-rate: 1/10s Load: 3 ############################ # Разрешение индексации контента ############################ Allow: / ############################ # Ограничение служебных разделов ############################ Disallow: /admin/ Disallow: /login/ Disallow: /cart/ Disallow: /checkout/ Disallow: /user/ Disallow: /private/ Disallow: /tmp/ Disallow: /cgi-bin/ ############################ # Ограничение API и динамики ############################ Disallow: /api/ Disallow: /*?sessionid= Disallow: /*?utm= Disallow: /*?ref= ############################ # Специальные правила для AI-ботов ############################ # OpenAI / ChatGPT User-agent: GPTBot Crawl-delay: 15 Request-rate: 1/15s # Google AI User-agent: Google-Extended Crawl-delay: 10 # Anthropic Claude User-agent: ClaudeBot Crawl-delay: 15 # Common Crawl (используется многими AI) User-agent: CCBot Crawl-delay: 20 Disallow: /private/ ############################ # Приоритет контента ############################ Allow: / Allow: /uslugi/ Allow: /blog/ ############################ # Карта сайта ############################ Sitemap: https://xn--80aaahqpcuvhvipz6j.xn--p1acf/sitemap.xml