Agent Analytics
Von der Crawler-Anfrage bis zur Conversion — die komplette Kette.
Agent Analytics wertet deine Server-Logs aus und erkennt jeden KI-Crawler: GPTBot, OAI-SearchBot, PerplexityBot, ClaudeBot, Google-Extended und weitere. Du siehst, welche Seiten wie oft geholt werden, welche Antworten dabei fehlschlagen (404, 403, Timeouts) und ob die Aktivität am Ende in Zitate, Referral-Besuche und Conversions mündet.
Was du damit gewinnst
- Vollständige Übersicht aller KI-Crawler auf deiner Domain — getrennt nach Trainings- und Live-Search-Bots
- Seiten-Ebene: Welche URLs Modelle wirklich lesen und welche sie nie erreichen
- Fehler sichtbar machen: 404, 403, Timeouts und robots.txt-Blockaden, die dich unsichtbar machen
- Attribution: AI-Referral-Traffic und Conversions je Engine statt Blindflug im Analytics-Tool
In drei Schritten
- 1Logs oder Tracking verbinden
Server-Logs, CDN-Logs oder das Tracking-Snippet anbinden. Bot-Signaturen und IP-Bereiche werden automatisch verifiziert, damit gefälschte User-Agents nicht mitgezählt werden.
- 2Crawl-Verhalten auswerten
Du siehst pro Bot Frequenz, Seitenabdeckung, Statuscodes und Antwortzeiten — inklusive der Seiten, die trotz hoher Priorität nie abgerufen werden.
- 3Wirkung messen
Crawl-Daten werden mit Zitaten und Referral-Traffic verknüpft. So erkennst du, an welcher Stufe die Kette abreißt und welche Seite als nächstes Arbeit braucht.
So sieht Agent Analytics aus
Zeitraum und Engine-Auswahl gelten für beide Ansichten und aktualisieren sie gemeinsam.
Woher kommen die Crawler-Daten?
Aus deinen Server- oder CDN-Logs bzw. dem Tracking-Snippet. Bots werden über User-Agent und verifizierte IP-Bereiche erkannt, damit gefälschte Zugriffe nicht in die Auswertung laufen.
Warum crawlt ein Bot viel, aber ich werde nicht zitiert?
Crawling heißt nur, dass Inhalte geholt wurden. Ob sie als Quelle genannt werden, hängt von Struktur, Aktualität und Autorität ab — genau diese Lücke macht der Funnel sichtbar.
Kann ich einzelne Bots aussperren?
Ja. Agent Analytics zeigt dir die Auswirkung: Welche Zitate und welcher Referral-Traffic an einem Bot hängen, bevor du ihn per robots.txt blockierst.
Wie wird AI-Traffic von normalem Traffic getrennt?
Über Referrer-Domains der Engines sowie optionale UTM-Parameter. Besuche ohne Referrer lassen sich zusätzlich über Zeitfenster und Landingpage-Muster zuordnen.