Am 1. Juni 2026 veröffentlichte Cloudflare die Mai-Daten seines globalen Bot-Radars — und die Rangfolge der grössten KI-Crawler hat sich verschoben: GPTBot von OpenAI führt jetzt mit 11,48% des gesamten KI-Bot-Traffics, während ClaudeBot von Anthropic auf 9,73% zurückfiel. Im April war die Reihenfolge noch umgekehrt (ClaudeBot 11,69%, GPTBot 9,84%). Für Schweizer KMU, die in ChatGPT, Claude oder Perplexity sichtbar sein wollen, ist das ein wichtiges Signal: welche Plattformen indexieren aktiv, und wen sollten Sie in Ihrer KI-Sichtbarkeit und GEO-Optimierung priorisieren?
11,48%
GPTBot-Anteil Mai 2026
9,73%
ClaudeBot-Anteil Mai 2026
+2,64pp
Monatliche Verschiebung
Die Zahlen stammen aus Cloudflares eigenem Radar-Dashboard, das HTTP-Requests über 330 Städte und 18 Millionen Origins hinweg aggregiert. TechnologyChecker.io hat die Daten am 1. Juni 2026 gezogen und bestätigt: GPTBot hat ClaudeBot zum ersten Mal in 2026 überholt (Quelle: TechnologyChecker.io, ChatGPT Statistics 2026, 1. Juni 2026).
Warum diese Verschiebung für Schweizer KMU relevant ist
KI-Crawler sind die Brücke zwischen Ihrer Website und den Antworten, die ChatGPT, Claude, Perplexity und Google AI Overviews generieren. Wenn GPTBot mehr crawlt, bedeutet das: OpenAI indexiert mehr Inhalte für ChatGPT Search, GPT-5.5 Instant und künftige Modelle. Wenn ClaudeBot zurückfällt, indexiert Anthropic weniger neue Inhalte.
Für ein Schweizer KMU mit spezialisiertem Fachwissen ist die Frage nicht abstrakt: wird Ihr Unternehmen in der KI-Antwort zitiert, wenn ein potenzieller Kunde fragt «Welche Schweizer Anbieter für X gibt es?» Wenn GPTBot Ihre Seite im Mai 2026 nicht besucht hat, ist die Wahrscheinlichkeit niedrig, dass ChatGPT Sie im Juni zitiert.
GPTBot, ClaudeBot, PerplexityBot. Wenn keiner davon Ihre wichtigsten Seiten besucht, fehlt entweder eine Allow-Regel in robots.txt oder Ihr CDN/Firewall blockiert sie versehentlich.Die drei grössten KI-Crawler im Mai 2026 — und was sie tun
| Crawler | Anbieter | Mai-2026-Anteil | Zweck |
|---|---|---|---|
| GPTBot | OpenAI | 11,48% | Training + ChatGPT Search Retrieval |
| Bytespider | ByteDance | 10,25% | Training (hauptsächlich Douyin/TikTok-Modelle) |
| ClaudeBot | Anthropic | 9,73% | Training + Claude Retrieval |
Wichtig: GPTBot ist nicht dasselbe wie OAI-SearchBot. GPTBot crawlt für Training und allgemeine Indexierung, OAI-SearchBot holt Inhalte in Echtzeit für ChatGPT Search. Beide sollten Sie erlauben, wenn Sie in ChatGPT-Antworten auftauchen wollen. Gleiches gilt für ClaudeBot vs. Claude-SearchBot bei Anthropic (Quelle: Digital Applied, AI Crawler Reference 2026).
Crawl-to-Referral-Ratio: Wer schickt Traffic zurück?
Die Traffic-Analyse von Cloudflare zeigt ein unbequemes Verhältnis: ClaudeBot crawlt 11’122 Seiten pro einzelnem Referral, den es zurückschickt — die schlechteste Ratio aller grossen KI-Crawler. OpenAI liegt bei 857:1, Perplexity bei 190:1 (Quelle: TechnologyChecker.io, Mai 2026).
Das heisst: ClaudeBot indexiert massiv, schickt aber fast keinen Klick-Traffic zurück. GPTBot hat sich von 1’252:1 im April auf 857:1 im Mai verbessert — ein Zeichen dafür, dass ChatGPT Search mehr Nutzer hat und mehr Outbound-Klicks generiert.
Für KMU bedeutet das: Perplexity ist der Kanal mit der besten Referral-Qualität (LLM-Referral-Traffic konvertiert laut aggregierten Studien 11-mal besser als klassischer organischer Traffic, Quelle: Leapd.ai 2026), aber alle drei Plattformen sollten crawlen dürfen, um Ihre Marke in den Antworten sichtbar zu machen.
Achtung: CDN-Firewall-Regeln überschreiben robots.txt
Viele Schweizer KMU nutzen Cloudflare, Fastly oder ähnliche CDNs mit aggressiven Bot-Blocking-Presets. Diese blockieren oft GPTBot, ClaudeBot und PerplexityBot zusammen mit Scrapern — auch wenn robots.txt ein «Allow» enthält. Prüfen Sie die Firewall-Events in Ihrem CDN-Dashboard und erstellen Sie explizite Allow-Regeln für die drei User-Agents.
Was Schweizer KMU jetzt tun sollten
Robots.txt überprüfen und KI-Crawler explizit erlauben
Die Retrieval-Bots (OAI-SearchBot, Claude-SearchBot, PerplexityBot) sind nicht verhandelbar — diese zu blockieren schaltet Ihre KI-Referral-Pipeline ab. Die Training-Bots (GPTBot, ClaudeBot, Google-Extended) können Sie je nach Datenschutz-Policy blockieren, aber dann erscheinen Ihre Inhalte nicht in den Modellen.
| Bot-Typ | User-Agent | Zweck | Empfehlung |
|---|---|---|---|
| Retrieval | OAI-SearchBot | ChatGPT Search | ✅ Allow |
| Retrieval | Claude-SearchBot | Claude Abruf | ✅ Allow |
| Retrieval | PerplexityBot | Perplexity Search | ✅ Allow |
| Training | GPTBot | OpenAI Training | ✅ Allow (oder Block) |
| Training | ClaudeBot | Anthropic Training | ✅ Allow (oder Block) |
Strukturierte Daten und llms.txt pflegen
KI-Crawler extrahieren strukturierte Information besser, wenn Sie Schema.org-Markup nutzen. Für Schweizer KMU besonders relevant:
- LocalBusiness (Adresse, Öffnungszeiten, Kontakt)
- Organization (Firmenname, Logo, Gründungsjahr)
- FAQPage (häufige Kundenfragen — werden oft 1:1 in KI-Antworten übernommen)
- Product oder Service (Angebote mit konkreten Beschreibungen)
Zusätzlich: eine llms.txt-Datei auf Ihrer Root-Domain, die den Crawlern klar sagt, was Ihr KMU macht und welche Seiten prioritär sind. llms.txt ist kein Zugriffskontroll-Mechanismus (robots.txt macht das), sondern ein Positiv-Signal: «Das sind unsere wichtigsten Seiten, bitte indexiert sie zuerst.»
Echtzeitprüfung: Werden Ihre Seiten tatsächlich besucht?
Viele KMU setzen robots.txt korrekt, sehen aber trotzdem keine Crawler-Besuche. Häufige Ursachen:
| Problem | Symptom | Lösung |
|---|---|---|
| CDN/WAF blockiert Bots | Crawler im Log, aber HTTP 403/401 | Firewall-Allow-Regel |
| Keine interne Verlinkung | Seite existiert, wird nie besucht | Sitemap.xml + interne Links |
| Kein frischer Content | Alte Seiten, selten aktualisiert | Content regelmässig aktualisieren |
Test: Verwenden Sie Server-Logs oder spezialisierte Tools (nicht Google Analytics — KI-Bots erscheinen dort meist nicht), um zu sehen, ob GPTBot, ClaudeBot, PerplexityBot Ihre wichtigsten Seiten besucht haben. Wenn nicht, ist entweder der Zugriff blockiert oder die Seiten sind für Crawler nicht auffindbar.
GEO vs. SEO: Die neue Realität für Schweizer KMU
Klassisches SEO zielt auf Google-Rankings ab — Position 1-3 für ein Keyword bringt Traffic. GEO (Generative Engine Optimization) zielt darauf ab, in der KI-Antwort zitiert zu werden — unabhängig davon, ob Ihre Seite auf Google Platz 1 oder Platz 15 steht.
Eine Studie von Ahrefs aus dem Mai 2026 zeigt: nur noch 38% der Google AI Overviews zitieren Seiten aus den Top-10-Suchergebnissen (2025 waren es noch 76%). Das heisst: Ranking allein genügt nicht mehr. Sie brauchen:
- Semantic Completeness: direkte Antworten auf Fragen
- E-E-A-T-Signale: Experten-Autorität, Quellenangaben, Impressum
- Multi-Channel-Präsenz: YouTube-Videos, Fachforen, LinkedIn
Für Schweizer KMU mit Nischen-Expertise ist das eine Chance: Sie müssen nicht gegen grosse Brands um Position 1 kämpfen. Sie müssen nur die beste direkte Antwort auf eine spezifische Frage liefern — und strukturiert genug sein, dass GPTBot, ClaudeBot oder PerplexityBot sie extrahieren können.
Unsere Empfehlung
Erlauben Sie GPTBot, OAI-SearchBot, ClaudeBot, Claude-SearchBot und PerplexityBot explizit in robots.txt. Überprüfen Sie Ihre CDN-Firewall-Regeln. Pflegen Sie llms.txt und strukturierte Daten. Messen Sie monatlich, ob die Crawler Ihre Seiten tatsächlich besuchen.
Fazit
GPTBot überholt ClaudeBot im Mai 2026 — ein Signal dafür, dass OpenAI aktuell mehr Web-Inhalte indexiert als Anthropic. Für Schweizer KMU, die in ChatGPT, Claude oder Perplexity sichtbar sein wollen, ist die wichtigste Massnahme: sicherstellen, dass alle relevanten Crawler Ihre Website besuchen dürfen. Robots.txt erlauben, CDN-Firewalls prüfen, strukturierte Daten pflegen, llms.txt setzen — und monatlich kontrollieren, ob GPTBot, ClaudeBot und PerplexityBot tatsächlich vorbeikommen. Nur dann werden Ihre Inhalte in den KI-Antworten auftauchen.
Die vollständigen Cloudflare-Daten finden Sie unter Cloudflare Radar, die TechnologyChecker-Analyse unter ChatGPT Statistics 2026 (beide abgerufen am 1. Juni 2026). Für eine strukturierte GEO-Strategie helfen wir Ihnen, Ihre KI-Sichtbarkeit messbar zu steigern.
