# ai.txt — политика для AI-агентов и LLM-краулеров
# Сайт: https://redlg.ru/
# Компания: ООО «Редлайн» (Redline) — IT-компания и digital-агентство
# Контакт: info@redlg.ru
#
# Этот файл описывает правила доступа AI-краулеров и ботов больших языковых
# моделей к контенту сайта. Краткое структурированное описание сайта для
# моделей доступно в /llms.txt, расширенная версия — в /llms-full.txt
# (также доступны под именами /llm.txt и /llm-full.txt).

LLM-Content: https://redlg.ru/llms.txt
LLM-Full-Content: https://redlg.ru/llms-full.txt
LLM-FAQ: https://redlg.ru/faq.md
LLM-Cases: https://redlg.ru/cases.md
Sitemap: https://redlg.ru/sitemap.xml

# Markdown-зеркала страниц сайта для ИИ доступны по пути <страница>.md
# (например /index.md, /about.md, /services.md, /services/{slug}.md, /cases.md,
# /cases/{slug}.md). Полный перечень зеркал — в sitemap.xml.

# Разрешаем индексацию и использование публичного контента сайта для ответов
# и цитирования с указанием источника. Закрытые служебные разделы запрещены.

User-Agent: *
Allow: /
Disallow: /bitrix/
Disallow: /local/
Disallow: /upload/
Disallow: /*?

# Известные AI-краулеры (поисковые ассистенты и ответы)

User-Agent: GPTBot
Allow: /

User-Agent: OAI-SearchBot
Allow: /

User-Agent: ChatGPT-User
Allow: /

User-Agent: ClaudeBot
Allow: /

User-Agent: Claude-Web
Allow: /

User-Agent: anthropic-ai
Allow: /

User-Agent: PerplexityBot
Allow: /

User-Agent: Google-Extended
Allow: /

User-Agent: Applebot-Extended
Allow: /

User-Agent: Bingbot
Allow: /

User-Agent: YandexAdditional
Allow: /

# Контакт по вопросам использования контента: info@redlg.ru