Integrationen
Der einzige Ort, der weiß, was dem Crawler ausgeliefert wurde
Eine Sitemap sagt, was Sie angeboten haben; Cloudflare weiß, was tatsächlich zurückkam - einschließlich der Seite, die für den Googlebot ein 404 ist.
Crawl-Budget, gemessen statt geraten
Jedes Werkzeug in diesem Markt redet über Crawl-Budget und schätzt es. Cloudflare hat die Anfragen bereits gezählt, die Frage hört also auf, theoretisch zu sein: Wie oft kam der Googlebot, und wie viel von dem, was er geholt hat, war das Holen wert?
Gegen Ihr eigenes Seiteninventar gelegt wird daraus ein Anteil - Anfragen, die auf URLs entfallen, die als indexable = false markiert sind, in der Sitemap fehlen oder mit einer Weiterleitung antworten. Verschwendung in Anfragen, nicht in Adjektiven.
- Seiten, die Sie indexiert haben wollen61 %
- Noindex, Weiterleitungen, Parameter26 %
- Assets und URLs, die der Crawl nie fand13 %
Eine Veranschaulichung der Form. Der Nenner ist absichtlich nicht jede Anfrage, die ein Crawler stellt - die meisten davon sind Assets, und sie zu zählen würde jede Website verschwenderisch aussehen lassen.
Ankommen und abgewiesen werden ist nicht lesen
Ein Crawler, der so oft kommt wie immer und 4xx ausgeliefert bekommt, sieht in jedem Werkzeug gesund aus, das Besuche zählt. Die Anfragezahl verbirgt den Fehler vollständig.
Dieses Produkt hat schon einmal eine Website mit 88 von 100 bewertet, während sie hinter einem Cloudflare-Zwischenbildschirm saß - der Crawl sah eine Seite, und was der Googlebot sah, war eine Challenge. Der Statuscode ist der Unterschied, und er lebt hier.
Was eine Besuchszählung sagt
1.480 Anfragen, gleichbleibend
Was die Statuscodes sagen
286 davon antworteten mit 404
Die erste Zahl steht in jedem Werkzeug. Die zweite in einem.
Ob die KI-Crawler Sie überhaupt lesen können
GPTBot, ClaudeBot, PerplexityBot, OAI-SearchBot, Google-Extended und die übrigen kommen unter eigenem Namen und bekommen eigene Antworten. Ob ein Assistent Sie zitieren kann, beginnt damit, ob er Sie holen durfte, und diese Frage hat eine sachliche Antwort in Ihren eigenen Edge-Logs statt einer Meinung.
Das zählt mit jedem Monat mehr und ist die Hälfte der KI-Sichtbarkeit, die sich tatsächlich messen lässt - siehe KI-Sichtbarkeit für die andere Hälfte.
Wir bewahren die Historie auf, die Cloudflare nicht aufbewahrt
Eine kostenlose Zone bewahrt acht Tage Anfrage-Analytics auf, und die zwei Befunde, die sich lohnen - der Googlebot bekommt Fehler auf Seiten, die Sie sauber crawlen, und der Anteil seines Budgets, der auf URLs entfällt, von denen Sie wissen, dass sie wertlos sind - brauchen mehr Historie als das, um vertrauenswürdig zu sein.
Eine nächtliche Stichprobe sammelt deshalb ab dem Tag der Verbindung Historie je Pfad. Die Befunde bleiben still, bis vierzehn Tage davon vorliegen, denn eine Rate über drei Tage Stichprobe und achtundzwanzig Tage Traffic ist keine Rate, sondern ein Artefakt - und genau dieser Fehler wurde einmal gemacht, an genau dieser Stelle, bevor es die Sperre gab.
Was die Verbindung hinzufügt
Crawler-Traffic nach Tag
Welche Bots kamen und wie oft, benannt statt in 'Bot-Traffic' zusammengeworfen - Googlebot, Bingbot, GPTBot, ClaudeBot, PerplexityBot, AhrefsBot.
Statuscodes je Crawler
Was jedem ausgeliefert wurde. Ankommen und abgewiesen werden ist nicht dasselbe wie lesen, und nur eines davon ist in einer Anfragezahl sichtbar.
Verschwendetes Crawl-Budget
Der Anteil der Googlebot-Anfragen, der auf URLs entfällt, von denen Ihr eigener Crawl schon weiß, dass sie nicht indexiert gehören.
Zugang der KI-Crawler
Ob die Crawler der Assistenten Sie erreicht haben und was sie bekamen - dort muss jede Aussage über KI-Sichtbarkeit beginnen.
Fragen
- Eine Berechtigung - Zone · Analytics · Read - auf einer Zone, aus einem Token, das Sie selbst in Ihrem eigenen Cloudflare-Dashboard erstellen. Es kann nichts ändern, sieht keine anderen Zonen und wird vor dem Speichern verschlüsselt. Der Verbindungsbildschirm zeigt den genauen Weg mit Bildern, denn Cloudflares Vorlagen enthalten Analytics nicht, und genau dort bleiben Menschen hängen.
- Acht Tage im kostenlosen Cloudflare-Plan, mehr in bezahlten. Wir fragen tageweise und hören dort auf, wo Ihre Zone aufhört, Sie bekommen also, was Ihr Plan aufbewahrt, ohne etwas zu konfigurieren - und wir bewahren die Historie je Pfad von da an auf, was Cloudflare selbst nicht tut.
- Ja. Das liest die Anfrage-Analytics Ihrer eigenen Zone, funktioniert also nur für Websites, die über Cloudflare ausgeliefert werden. Nichts anderes im Produkt hängt davon ab.
- Es ist dieselbe Art von Antwort ohne die Logdatei. Nichts zu exportieren, nichts zu parsen und keine Stichprobenentscheidung von wem auch immer das Logging eingerichtet hat - die Zahlen kommen von der Edge, die die Anfrage ausgeliefert hat.
Kostenlos starten
Eine Website und 100 Credits - bis zu 200 Seiten pro Scan, etwa 5 Scans, dazu der vollständige Bericht. Ohne Kreditkarte. Bezahlte Pläne bringen mehr Websites, größere Crawls und die KI-Textvorschläge.