Zum Hauptinhalt springen

Wie oft ist es Dir selber schon passiert, dass Du auf einer Website als erstes einmal ein ReCapcha ausfüllen musstest, um zur eigentlichen Website "durchzukommen"? CloudFlare und auch andere CDNs bieten dies in Form einer SpamBot- Protection ihren Kunden an und dies kann unter Umständen auch für Deine Website wichtig sein, wenn Du mit vielen DDOS-Attacken zu kämpfen hast. Gary Illyes von Google hat jetzt noch einmal darauf hingewiesen, dass Du dabei unbedingt sicherstellen solltest, dass Google Bots (und ich denke, dass wir das auf alle anderen, uns wichtigen, Bots ausweiten können) diese so genannten Interstitial niemals zu Gesicht bekommen sollten.

Cloudflare ReCaptcha

Vielleicht fragst Du Dich wieso? Wenn wir uns die Funktionsweise eines Crawlers anschauen, dann ruft dieser eine beliebige URL aus seiner Verarbeitungs-Warteschlange ab und versucht den Inhalt für diese URL abzurufen. So zumindest die stark vereinfachte Annahme der Funktionsweise des Googlebot Schedulers, der uns hier für unsere Zwecke ausreicht 😉.

Antwortet nun ein CDN mit einem Interstitial, so nimmt der Crawler an, dass dies der Inhalt für die angeforderte URL wäre, schließlich wurde der Inhalt mit einem StatusCode 200 ausgeliefert. Nach dem Aufbau würde Google diesen Inhalt vermutlich als "Thin Content" bzw. "Duplicate Content" klassifizieren. Passiert dies nur ab und zu, so werden Deine Inhalte vermutlich immer mal wieder ranken, dann wieder nicht und Du wirst Dich fragen, weshalb Deine doch so guten Inhalte nicht auf den vordersten Plätzen gerankt werden.

Aus diesem Grund solltest Du sicherstellen, dass alle Bots aller Dir wichtigen Suchmaschinen alle wichtigen Inhalte zu jeder Zeit abrufen können und auch wirklich ausgeliefert bekommen.

Aber auch regionsbezogene Blockierungen solltest Du, wenn es Dir möglich ist, vermeiden. So gehen Dir nicht nur potentielle Neukunden verloren, sondern Du blockierst ggf. aus Versehen auch andere wichtige Bots der Suchmaschinen.

Cloudflare regionsbezogener Blocker

CDNs wie z.B. Cloudflare bieten Dir dafür Sicherheitseinstellungen an, die Du Dir unbedingt nach diesem Artikel einmal anschauen und verstehen solltest. Um die Einstellungen des Cloudflare Security Levels zu verstehen, empfehle ich Dir einmal die Dokumentation von Cloudflare direkt.

Das ist ein Artikel aus unserem Newsletter. Wenn Du jeden Dienstag Morgen schlauer werden möchtest, melde jetzt kostenfrei für den SEO-Newsletter an

Kurze, praxisnahe SEO-Tipps – maximal 1× pro Woche. Keine Werbung, kein Spam.

Deine Daten sind bei uns in guten Händen und werden ausschließlich für diesen Newsletter genutzt.