KI-Sichtbarkeit

Sperrst du gerade die Crawler aus, die dich zitieren sollen?

Bevor ein Modell deine Seite zitieren kann, muss es sie lesen dürfen. Über den Zugang entscheidet eine Datei, die die meisten Teams zuletzt beim Projektstart angefasst und nie wieder geprüft haben.

Wer da anfragt

Die Crawler, um die es geht.

Jeder ist ein eigener User-Agent mit eigener Regel in der robots.txt. Einen zu erlauben sagt nichts über die anderen.

User-Agent Betrieben von Wofür
GPTBot OpenAI Training und Antworten in ChatGPT
ClaudeBot Anthropic Antworten und Browsing in Claude
PerplexityBot Perplexity Suchergebnisse in Perplexity
Google-Extended Google Grundlage für Googles KI-Antworten
CCBot Common Crawl Offener Datensatz, den viele Modelle nutzen

Die Liste ändert sich. Neue Agents kommen dazu, bestehende teilen sich in eigene Namen auf — deshalb veraltet ein Regelsatz, den niemand pflegt, still und leise.

Fünf Minuten, ohne Account

Was du sofort selbst prüfen kannst.

  1. 1

    Dürfen sie rein?

    Öffne deine robots.txt und suche die Agents von oben. Kein Eintrag heißt: Es wurde nie entschieden.

  2. 2

    Gibt es eine Zusammenfassung?

    Rufe /llms.txt auf. Ein 404 heißt, ein Modell muss deine Seite aus der Navigation ableiten.

  3. 3

    Sagt die Seite, was sie ist?

    Seitenquelltext deiner Preisseite öffnen und den Title suchen. Steht dort dasselbe wie auf der Startseite, sind beide nicht unterscheidbar.

  4. 4

    Steht der Inhalt im HTML?

    JavaScript abschalten und neu laden. Was verschwindet, sehen manche Crawler nie.

Warum Seiten unsichtbar bleiben

Es ist selten ein großer Fehler.

Und morgen wieder

Eine Prüfung ist eine Momentaufnahme. Ein Deploy ändert alles.

Die Tests oben sagen dir, wo du heute stehst. Der Web-Ready-Bericht führt sie bei jedem Scan aus, behält den Verlauf und schickt dir eine Mail, wenn etwas kippt — denn die Änderung, die dich Sichtbarkeit kostet, ist fast nie die, die du absichtlich gemacht hast.

Was Web Ready prüft

Fragen

Soll ich alle KI-Crawler erlauben?
Das ist deine Entscheidung, und beide Antworten sind vertretbar. Nicht vertretbar ist, nicht zu wissen, welche du gerade hereinlässt.
Schützt Sperren meine Inhalte?
Es stoppt Crawler, die sich an Regeln halten — das sind die meisten der genannten. Wer robots.txt ignoriert, wird davon nicht aufgehalten: Die Datei ist eine Bitte, kein Schloss.
Erscheine ich in ChatGPT, wenn ich alles erlaube?
Nicht automatisch. Zugang ist die Voraussetzung, nicht das Ergebnis. Ob du als Quelle taugst, entscheidet sich daran, ob du lesbar und unterscheidbar bist.
Lesen KI-Crawler auch noindex-Seiten?
noindex spricht über Suchindexierung, nicht über Agent-Zugang — das sind getrennte Regeln. Genau diesen Widerspruch prüfen wir mit.
Loslegen

Web Ready gibt es mit Trust.

Ein Tarif, ein Preis. Kein eigenes Web-Ready-Abo, das du erst durchrechnen musst.

Trust
24 € alle 4 Wochen
  • Öffentliches Security-Badge, aktualisiert sich selbst
  • Täglicher Re-Scan deiner Seite
  • Web-Ready-Bericht — SEO und AEO, nur für dich
  • KI-Fix-Prompts — direkt in Claude oder GPT einfügen
  • Scan auf Knopfdruck auslösen (rate-limited)
Trust abonnieren — 24 € Alle Tarife vergleichen
✓ EU-gehostet · DSGVO ✓ Jederzeit kündbar ✓ Keine Kreditkarten-Trial-Falle

Preis exkl. MwSt. — wird im Checkout ergänzt, wo zutreffend. Nur B2B.