# Kurník Profi — veřejný je marketing, provozní části ne.
#
# Tenhle soubor se GENERUJE (SeoEndpoints.cs). Ručně psaná verze měla
# seznam zákazů dvakrát a doménu u `Sitemap:` natvrdo, takže z testovacího
# prostředí posílala robota na produkci.
#
# Roboti jazykových modelů jsou uvedení VÝSLOVNĚ, i když jim obecné
# pravidlo níž stejně nic nezakazuje. Důvod: „nikde to nezakazuju" a
# „výslovně to povoluju" jsou pro provozovatele robota dvě různé věci.
#
# POZOR na past: jakmile robot najde skupinu se svým jménem, obecnou
# skupinu `User-agent: *` UŽ NEČTE. Proto obě skupiny nesou KOMPLETNÍ
# seznam zákazů — v kódu je jen jednou, tady se vypíše dvakrát.

# --- roboti jazykových modelů: vyhledávání i trénink ---
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Claude-User
User-agent: Claude-SearchBot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: Meta-ExternalFetcher
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
Allow: /
Disallow: /account/
Disallow: /api/
Disallow: /files/
Disallow: /downloads/

# --- plošný sběr bez uvedeného účelu ---
# Plní korpusy a databáze, ze kterých čerpá kdokoli. Na rozdíl od robotů
# výš u nich není nikdo, komu by šlo napsat, ani odkaz zpět. Kategorie
# je zakázaná CELÁ — strategie ji tak deklaruje a jeden vyjmenovaný bot
# (dřív jen CCBot) ještě není vymáhaná kategorie.
User-agent: CCBot
User-agent: Bytespider
User-agent: omgili
User-agent: Diffbot
User-agent: Timpibot
User-agent: ImagesiftBot
Disallow: /

# --- všichni ostatní včetně běžných vyhledávačů ---
User-agent: *
Allow: /
Disallow: /account/
Disallow: /api/
Disallow: /files/
Disallow: /downloads/

Sitemap: https://kurnik-profi.cz/sitemap.xml