# robots.txt - tender-winner-search.ru (Tender Winner Search)
#
# ПРАВИЛА ИСПОЛЬЗОВАНИЯ МАТЕРИАЛОВ САЙТА
# Индексация публичных страниц поисковыми системами (Яндекс, Google, Bing и др.),
# ИИ-поиском и ИИ-ассистентами разрешена; материалы публичных страниц можно
# использовать в ответах ИИ и для обучения моделей ИИ ботами, перечисленными ниже
# как разрешённые. Массовое копирование, парсинг и скрейпинг сайта прочими
# роботами без письменного согласия правообладателя запрещены. Личный кабинет,
# API и служебные разделы закрыты для всех.
# Правообладатель сохраняет авторские права на материалы и базы данных сайта
# (часть 4 ГК РФ). Условия: https://tender-winner-search.ru/offer . Для ИИ: https://tender-winner-search.ru/ai.txt , https://tender-winner-search.ru/llms.txt
# Content-Signal: search=yes, ai-input=yes, ai-train=yes - поиск, использование во
# входных данных ИИ (RAG, ответы ИИ-поиска) и обучение ИИ на публичных страницах разрешены.
#
# As a condition of accessing this website, you agree to abide by the following content signals:
# (a) If a content-signal = yes, you may collect content for the corresponding use.
# (b) If a content-signal = no, you may not collect content for the corresponding use.
# (c) If the website operator does not include a content signal for a corresponding use, the website operator neither grants nor restricts permission via content signal with respect to the corresponding use.
#
# The content signals and their meanings are:
# search: building a search index and providing search results (e.g., returning hyperlinks and short excerpts from your website's contents). Search does not include providing AI-generated search summaries.
# ai-input: inputting content into one or more AI models (e.g., retrieval augmented generation, grounding, or other real-time taking of content for generative AI search answers).
# ai-train: training or fine-tuning AI models.
#
# ANY RESTRICTIONS EXPRESSED VIA CONTENT SIGNALS ARE EXPRESS RESERVATIONS OF RIGHTS UNDER ARTICLE 4 OF THE EUROPEAN UNION DIRECTIVE 2019/790 ON COPYRIGHT AND RELATED RIGHTS IN THE DIGITAL SINGLE MARKET.

# --- Поисковые системы и прочие роботы: только публичные страницы ---
User-agent: *
# Content-Signal: search=yes, ai-input=yes, ai-train=yes
# Content-Usage: search=y, train-ai=y
Allow: /$
Allow: /ai-analiz$
Allow: /kalkulyator-bg$
Allow: /kalkulyator-bg/44-fz$
Allow: /kalkulyator-bg/223-fz$
Allow: /kalkulyator-bg/ispolnenie-kontrakta$
Allow: /kalkulyator-bg/kp$
Allow: /proverka-zakupki$
Allow: /search$
Allow: /pobediteli-tenderov$
Allow: /ii-assistent$
Allow: /pricing$
Allow: /blog$
Allow: /o-servise$
Allow: /contacts$
Allow: /karta-sajta$
Allow: /offer$
Allow: /offer/changes$
Allow: /privacy$
Allow: /personal-data-consent$
Allow: /cookies$
Allow: /consent-bank-guarantee$
Allow: /robots.txt$
Allow: /sitemap.xml$
Allow: /ai.txt$
Allow: /llms.txt$
Allow: /manifest.webmanifest$
Allow: /favicon.ico$
Allow: /offer/
Allow: /static/
Allow: /blog/
Allow: /yandex_3a76c38c1a0e7814.html$
Allow: /zen_WCn7HumbItjzDSsB0fmv9dnZzvjBB1Kv10JeT9uj1wbLcy3uvO7NpR6rhs6CgcEu.html$
Disallow: /cabinet
Disallow: /admin
Disallow: /api/
Disallow: /webhooks/
Disallow: /login
Disallow: /logout
Disallow: /register
Disallow: /verify
Disallow: /invite/
Disallow: /ai-analiz/
Disallow: /proverka-zakupki/
Disallow: /kalkulyator-bg/kp/
Disallow: /search?
Disallow: /offer?
Disallow: /health
Disallow: /metrics
Disallow: /docs
Disallow: /redoc
Disallow: /openapi.json
Disallow: /
Clean-param: utm_source&utm_medium&utm_campaign&utm_content&utm_term&utm_referrer&yclid&ysclid&gclid&fbclid&_openstat&roistat&from&ref

# --- ИИ: массовые сборщики данных для обучения моделей и датасетов - запрещено ---
User-agent: anthropic-ai
User-agent: Claude-Web
User-agent: GoogleOther
User-agent: GoogleOther-Image
User-agent: GoogleOther-Video
User-agent: Google-CloudVertexBot
User-agent: meta-externalagent
User-agent: FacebookBot
User-agent: Amazonbot
User-agent: CCBot
User-agent: Bytespider
User-agent: TikTokSpider
User-agent: cohere-ai
User-agent: cohere-training-data-crawler
User-agent: Diffbot
User-agent: AI2Bot
User-agent: Ai2Bot-Dolma
User-agent: PanguBot
User-agent: Timpibot
User-agent: ImagesiftBot
User-agent: img2dataset
User-agent: omgili
User-agent: omgilibot
User-agent: Webzio-Extended
User-agent: YouBot
User-agent: Brightbot
User-agent: magpie-crawler
User-agent: VelenPublicWebCrawler
Disallow: /

# --- ИИ-агенты, действующие по запросу пользователя ассистента - запрещено ---
User-agent: meta-externalfetcher
User-agent: MistralAI-User
User-agent: Amzn-User
User-agent: Google-NotebookLM
Disallow: /

# --- ИИ-поиск, ИИ-ассистенты и обучение ИИ: только публичные страницы (SEO_ALLOW_AI_SEARCH_BOTS=1, SEO_ALLOW_AI_TRAINING=1) ---
User-agent: OAI-SearchBot
User-agent: Claude-SearchBot
User-agent: PerplexityBot
User-agent: YandexAdditional
User-agent: YandexAdditionalBot
User-agent: meta-webindexer
User-agent: Amzn-SearchBot
User-agent: DuckAssistBot
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: ChatGPT-User
User-agent: Claude-User
User-agent: Perplexity-User
# Content-Signal: search=yes, ai-input=yes, ai-train=yes
# Content-Usage: search=y, train-ai=y
Allow: /$
Allow: /ai-analiz$
Allow: /kalkulyator-bg$
Allow: /kalkulyator-bg/44-fz$
Allow: /kalkulyator-bg/223-fz$
Allow: /kalkulyator-bg/ispolnenie-kontrakta$
Allow: /kalkulyator-bg/kp$
Allow: /proverka-zakupki$
Allow: /search$
Allow: /pobediteli-tenderov$
Allow: /ii-assistent$
Allow: /pricing$
Allow: /blog$
Allow: /o-servise$
Allow: /contacts$
Allow: /karta-sajta$
Allow: /offer$
Allow: /offer/changes$
Allow: /privacy$
Allow: /personal-data-consent$
Allow: /cookies$
Allow: /consent-bank-guarantee$
Allow: /robots.txt$
Allow: /sitemap.xml$
Allow: /ai.txt$
Allow: /llms.txt$
Allow: /manifest.webmanifest$
Allow: /favicon.ico$
Allow: /offer/
Allow: /static/
Allow: /blog/
Allow: /yandex_3a76c38c1a0e7814.html$
Allow: /zen_WCn7HumbItjzDSsB0fmv9dnZzvjBB1Kv10JeT9uj1wbLcy3uvO7NpR6rhs6CgcEu.html$
Disallow: /cabinet
Disallow: /admin
Disallow: /api/
Disallow: /webhooks/
Disallow: /login
Disallow: /logout
Disallow: /register
Disallow: /verify
Disallow: /invite/
Disallow: /ai-analiz/
Disallow: /proverka-zakupki/
Disallow: /kalkulyator-bg/kp/
Disallow: /search?
Disallow: /offer?
Disallow: /health
Disallow: /metrics
Disallow: /docs
Disallow: /redoc
Disallow: /openapi.json
Disallow: /

Sitemap: https://tender-winner-search.ru/sitemap.xml