# robots.txt - netzhandwerker.de # Stand: 2026-10-26; gemeinsame Regeln für Suche und KI-Crawler. User-agent: * User-agent: Google-Extended User-agent: GPTBot User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: ClaudeBot User-agent: Claude-Web User-agent: anthropic-ai User-agent: PerplexityBot User-agent: Perplexity-User User-agent: Applebot-Extended User-agent: Applebot User-agent: FacebookBot User-agent: Meta-ExternalAgent User-agent: MistralAI-User User-agent: Amazonbot User-agent: CCBot User-agent: cohere-ai User-agent: DuckAssistBot User-agent: YouBot User-agent: Bytespider User-agent: Diffbot User-agent: Bravebot User-agent: x402-agent User-agent: cdp-agent Disallow: /cdn-cgi/ Disallow: /deploy-gateway.php Disallow: /_snapshots/ Disallow: /config.php Disallow: /includes/ Disallow: /backend/ Disallow: /private/ Disallow: /send.php Disallow: /send-bewerbung.php Disallow: /media-track.php Disallow: /track.php Disallow: /sprit/track.php Disallow: /sprit/history.php Disallow: /audio/ Disallow: /wm2026/ # /kontakt?… ist crawlbar (28.10.2026), damit Google die 301 auf die saubere Adresse sieht. # Blogfilter, noindex-Endpunkte und entfernte Testseiten sind crawlbar, damit Google # die bestehenden noindex- bzw. HTTP-410-Antworten verarbeiten kann. Sitemap: https://netzhandwerker.de/sitemap-index.xml Sitemap: https://netzhandwerker.de/sitemap.xml Sitemap: https://netzhandwerker.de/sitemap-images.xml Sitemap: https://netzhandwerker.de/sitemap-video.xml # Maschinenlesbare Ressourcen (Stand 26.08.2026) # LLM kompakt: https://netzhandwerker.de/llms.txt # LLM Langfassung: https://netzhandwerker.de/llms-full.txt # Agent-Meta: https://netzhandwerker.de/.well-known/agent.json # Sicherheit: https://netzhandwerker.de/.well-known/security.txt # Shop-Katalog: https://netzhandwerker.de/shop/katalog.json