# Link zu aktuellen Sitemap(s) oder Index-Sitemap Sitemap: https://www.oekolandbau.de/sitemap.xml User-agent: * Allow: / Allow: *sitemap.xml*cHash* # Allow cHash for sitemap.xml Disallow: */typo3/* # Disallow typo3 backend Disallow: */bio-rezepte/?tx_solr%5Bq* # Disallow bio-rezept-suche (aktiv seit 03-06) Disallow: /*?id=* # Disallow index.php # Disallow: *tx_news* # Disallow tx_news params (deaktiv seit 05-08) # Disallow: */termine/?tx_solr* # Disallow termine (deaktiv seit 03-06) # Disallow: */rechtsgrundlagen/recherchetool-2021/erweiterte-suche/?tx_solr* # Disallow erweiterte suche (deaktiv seit 28-10) Disallow: */suche/?tx_solr* # Disallow interne suche Disallow: *recipeTypeCategory* # Disallow bio-rezepte nach kategorie Disallow: *recipeCookCategory* # Disallow bio-rezepte nach koch Disallow: *cHash* # Disallow cHash # Core AI Training & Search Bots User-agent: Anthropic-AI User-agent: AWSBedrockBot User-agent: Claude-SearchBot User-agent: Claude-User User-agent: cohere-ai User-agent: Diffbot User-agent: FacebookBot User-agent: Google-Extended User-agent: GPTBot User-agent: ImagesiftBot User-agent: Meta-ExternalAgent User-agent: Meta-ExternalFetcher User-agent: Meta-WebIndexer User-agent: OAI-SearchBot User-agent: PerplexityBot User-agent: PetalBot User-agent: Scrapy User-agent: Timpibot User-agent: VelenPublicWebCrawler User-agent: YouBot # Emerging & Specialized AI Bots User-agent: aiHitBot User-agent: Applebot-Extended User-agent: Bytespider User-agent: CCBot User-agent: ChatGPT-User User-agent: DeepSeekBot User-agent: Google-NotebookLM User-agent: MistralAI User-agent: MoonshotBot User-agent: omgili User-agent: Omgilibot User-agent: Reflectio User-agent: ClaudeBot Disallow: /aktuelles/veranstaltungskalender/