Dein KI-Agent klopft an. Lässt die Website ihn rein?

Die Website erlaubt dem Lese-Agenten des Anbieters (ChatGPT-User, Claude-User, Google-Agent, meta-externalfetcher) in ihrer robots.txt den Zugriff auf die Startseite, und unser echter Abruf mit dieser Kennung wurde nicht abgewiesen. Dann kann der Chatbot die Seite in der Regel lesen, wenn du ihn darum bittest.

Lesen im Chat ist der Abruf, den du selbst auslöst, etwa „fasse diese Seite zusammen“. Suche ist der Index, aus dem der Chatbot Quellen nennt (OAI-SearchBot, Claude-SearchBot, Googlebot, meta-webindexer). Training betrifft, ob Inhalte zum Trainieren von Modellen genutzt werden dürfen (GPTBot, ClaudeBot, Google-Extended, meta-externalagent).

Google und Meta schreiben, dass ihre vom Nutzer ausgelösten Abrufe (Google-Agent, meta-externalfetcher) robots.txt in der Regel nicht beachten. Wir zeigen trotzdem, was die Website dort festlegt, und ob ihr Server die Kennung abweist. Das ist der Teil, der wirklich wirkt.

Agenten, die deinen Browser steuern (ChatGPT Agent, Claude in Chrome, Gemini in Chrome), sehen die Website wie du. Die robots.txt gilt dort nicht, aber Bot-Schutz schon. Erkennen wir Cloudflare, Akamai, DataDome, HUMAN, Imperva oder AWS WAF, oder blockt die Seite schon einen normalen Chrome-Abruf, zeigen wir „Captcha droht“. Das ist ein Hinweis, kein Beweis: Ob wirklich ein Captcha kommt, entscheidet die Website bei jedem Besuch neu.

Die 500 Websites jeden Morgen um 4:30 Uhr. Eine Änderung zählt erst, wenn eine zweite Prüfung im selben Lauf sie bestätigt. Einzelprüfungen laufen live und gelten 6 Stunden.

Wir haben sie nach Reichweite in Deutschland zusammengestellt, gestützt auf öffentliche Ranglisten (Similarweb, Semrush, agof, IVW). Die ersten 250 Plätze sind nach Reichweite sortiert, danach ist die Reihenfolge innerhalb der Kategorien geschätzt. Fehlt dir eine Website, prüf sie einfach einzeln.

Ja. Unter jedem Ergebnis kannst du einen kostenlosen Alarm für diese Website einrichten. Du bekommst eine Mail, wenn sich der Zugang für einen der vier Agenten ändert, sonst nichts. Abmelden mit einem Klick.