Nach meinem Aufreger letzte Woche um das SGE-Vorhersagemodell%20vorhersagen) bin ich diese Woche angehalten, Dir ein paar meiner Beobachtungen zu offenbaren. Ohne dabei zu behaupten, dass das, was ich schreibe, allgemeingültig ist.
Im Fokus: Wie stark verändern sich die Ergebnisse über den Tag verteilt (Volatilität)?
Die Keyword-Auswahl
Um zu demonstrieren, wie volatil die SGE eigentlich ist, habe ich insgesamt 11 Keywords beobachtet:
-
3x YMYL
-
3x E-Commerce Category
-
2x E-Commerce Product
-
2x Know
-
1x Local
YMYL-Themen wurden viel diskutiert, weil unklar war, ob es überhaupt einen AI Overview für derartige Keywords geben würde. Und die letzten Monate waren die Beobachtungen durchaus variabel. Mein letzter Eindruck ist aber: Das hat sich eingependelt und es wird häufig ein AI Overview generiert.
Für den E-Commerce sehe ich große Chancen, vor allem im Produktbereich. Auch hier habe ich sehr unterschiedliche Beobachtungen gemacht, daher habe ich 3 Suchanfragen für Kategorien und 2 für Produkte in mein Monitoring für diesen Test mit aufgenommen.
Da die informationalen Keywords in dem Framework von letzter Woche stark thematisiert wurden, habe ich auch hier 2 Varianten aufgenommen. Eine, bei der durch das Keyword nicht sofort klar wird, was die Suchintention ist und ein anderes Beispiel, wo dies eindeutig ist.
Die Beobachtungen bei lokalen Keywords fand ich bis auf 3-Pack vs. 4-Pack vs. 5-Pack vor dem Test eher weniger interessant und jeweils sehr ähnlich. Daher habe ich für diesen Test nur ein Keyword dieser Art inkludiert.
Die Stichproben
Was mir deutlich aufgefallen ist: Der AI Overview verändert sich mehrmals am gleichen Tag. Daher wollte ich nicht nur 3 Beobachtungen machen. Insgesamt habe ich pro Keyword 6 unterschiedliche Zeiten geprüft.
8 Uhr, 11 Uhr, 14 Uhr, 17 Uhr, 20 Uhr und 8 Uhr am Folgetag. So kann relativ gut beurteilt werden, wie volatil die SGE für ein und die gleiche Suchanfrage über einen Tag ist.
Meine Prüfkriterien
Was genau habe ich geprüft?
-
Gibt es einen AI Overview?
-
Wurde dieser automatisch generiert?
-
Sind die 3 sichtbaren Quellen identisch zur vorherigen Beobachtung?*
-
Ist der Inhalt zur vorherigen Beobachtung identisch?
-
Wie groß ist der inhaltliche Unterschied zur vorherigen Beobachtung?**
\* Identische Quellen = in aufeinanderfolgenden Beobachtung X und Beobachtung Y sind die identischen 3 Quellen direkt sichtbar (unabhängig von der Reihenfolge)
** Wie groß ist der inhaltliche Unterschied?
-
Klein = der Inhalt unterscheidet sich nicht in der Formatierung und nur minimal im eigentlichen Inhalt
-
Mittel = der Inhalt unterscheidet sich leicht in der Formatierung und dem eigentlichen Inhalt
-
Groß = der Inhalt unterscheidet sich maßgeblich in der Formatierung und dem eigentlichen Inhalt
Die Ergebnisse
Hier sind ein paar Key Insights meiner Beobachtungen:
-
In über 92% der Beobachtungen (61 von 66 Fällen) gibt es einen AI Overview – lediglich 5 Ergebnisse haben kein AI Overview generiert
-
In mehr als 50% der Beobachtungen wird der AI Overview nicht automatisch generiert, muss also durch Anklicken des xy Buttons manuell ausgelöst werden
-
Gerade mal ⅓ der Beobachtungen haben identische Quellen zur jeweils vorherigen Beobachtung (unabhängig von deren Reihenfolge)
-
Mehr als 80% der Beobachtungen haben sich unterscheidende Inhalte
-
Die inhaltlichen Unterschiede sind in den meisten Fällen klein (dann mittel und dann groß) – aber alle 3 Levels waren deutlich vertreten
Das muss man sich differenzierter anschauen. Was sich aber auf jeden Fall sagen lässt: Für fast alle Beobachtungen gibt es einen AI Overview, der aber nicht immer (<50%) direkt generiert wird, *sondern durch eine Interaktion der Nutzer\innen.
Warum ist das spannend? Weil ein großer Kritikpunkt von KI-gestützter Suche und Antworten seit Anbeginn ist, dass die Antwortzeit häufig relativ lang ist. Man ist es gewöhnt, dass schnell ein Ergebnis ausgespielt wird. Wenn dann direkt eine KI-Antwort generiert wird, wartet man länger, oder wird gestört, wenn man gerade einen Link klicken möchte und es zu einem massiven Layout Shift kommt.
Wenn eine Wahlmöglichkeit besteht, wird man nicht bevormundet und gewöhnt sich möglicherweise mehr an das Feature und wie es sich von der normalen Suche unterscheidet. Außerdem wird nicht jede\*r klicken. Wie häufig das passiert, kann außer Google (die fleißig testen) niemand beantworten.
Das Interaktionsverhalten jetzt zum Beginn wird sicherlich ein anderes sein, als in einem Jahr. Die, die sich bewusst anmelden, um die SGE auszuprobieren, verhalten sich anders (These: interagieren mehr), als die breite Masse es tun würde. Menschen brauchen Zeit, um ihr Verhalten anzupassen.
Auch spannend: Bei einem einzigen Keyword wurde in jedem AI Overview eine nahezu identische Antwort ausgespielt (in 5 von 6 Fällen) mit jeweils den gleichen Quellen zur vorherigen Beobachtung. Das werde ich mir anhand des Keyword-Formats nochmal anschauen.
Bei meinen Beobachtungen wurden bei den Kategorie-Keywords keine AI Overview mehr automatisch generiert. Die Unterscheidung im Inhalt war bei den Kategorie-Keywords insgesamt im Durchschnitt immer kleiner als bei den anderen Keywords. Das gilt nicht nur für den generierten Text, sondern auch für die vorgeschlagenen Produkte, die jeweils bei aufeinanderfolgenden Beobachtungen immer sehr ähnlich waren.
Da ich 3 Kategorie-Keywords im Gepäck habe und hier aktuell jeweils keine AI Overviews automatisch generiert werden (Ausnahme 1 Beobachtung!), wird das Bild aus dem zweiten Graphen oben etwas verzerrt. Der reale Wert wird eher bei 50/50 liegen.
Was wir daraus (nochmal) lernen
SGE = Volatil.
Mit manuellen Beobachtungen kommt man hier nicht weit.
Sie helfen, einen Überblick zu bekommen, reichen aber nicht, um verlässliche Daten zu bekommen. Am entscheidendsten ist folgendes: Der Zeitraum der Beobachtung ist zu klein.
Wachsam sein ist erneut das Stichwort. Wir sind gespannt, ob, wann und in welcher Form die SGE erstmals in Deutschland verfügbar gemacht wird. Und die Frage, die wir uns alle stellen: Werden wir Daten in der GSC bekommen, oder nicht? Microsoft hat es mit den versprochenen Daten zu Bing ja leider nicht so eilig.\ Du möchtest die SGE selbst mal ausprobieren? Dann schau Dir Anitas hilfreiche Anleitung an!