Shopify hat kürzlich SimGym veröffentlicht, eine neue kostenlose App, die nativ von Shopify entwickelt wurde. Sie wurde ursprünglich bei den letzten Winter Editions angekündigt und ist nach einigen Monaten nun endlich für die Öffentlichkeit verfügbar.
Das Beste an Apps von Shopify? Sie sind kostenlos. Sie können SimGym ohne zusätzliche Kosten installieren, unabhängig von Ihrem Shopify-Tarif (wir haben es mit unserem Shopify Grow-Tarif getestet).
Wir haben die App selbst getestet, um zu sehen, ob sie wirklich nützlich ist. Hier erfahren Sie, wie sie funktioniert, was unser Test ergeben hat und wie unser ehrliches Fazit ausfällt.
Was ist Shopify SimGym?
Das wichtigste Wort hier ist "Simulation".
Im Gegensatz zu herkömmlichen A/B-Test-Tools wie Intelligems, die Ihren tatsächlichen Shop-Traffic aufteilen, erlaubt SimGym keine Tests zwischen zwei Versionen mit echten Besuchern. Stattdessen setzt Shopify KI-Agenten (Bots) ein, um Traffic für jede Theme-Variante zu simulieren.
Unser Testaufbau: Bundles vs. keine Bundles
Um die KI zu testen, haben wir eine Simulation erstellt, die zwei Versionen unseres Shops vergleicht:
- Das Champion-Theme (Standard): Kunden können auf der Produktseite ein 1er-, 3er- oder 5er-Bundle wählen, um einen zusätzlichen Rabatt zu erhalten.
- Das Challenger-Theme (Variante): Mengenrabatte wurden deaktiviert und Kunden konnten lediglich zwischen einer halben oder einer ganzen Packung wählen.
Abgesehen davon gab es keine weiteren Änderungen am Theme. Wir haben den Test benannt, als Zeitplan "so schnell wie möglich" gewählt und wurden in die Warteschlange eingereiht.
Durchführung der Simulation
Sobald der Test startet, ist es ziemlich beeindruckend. Man kann sehen, wie die KI-Agenten eingesetzt werden und ihr Echtzeit-Feedback lesen, während sie den Shop durchsuchen. Es wirkt fast so, als würden echte Besucher Ihre Seite nutzen.
Unser Test dauerte genau 30 Minuten. Er verlief anfangs sehr schnell, blieb dann aber eine Weile bei 96-97 % hängen.
Die Ergebnisse: Liegt die KI richtig?
Nach Abschluss des Tests haben wir die Ergebnisse und Empfehlungen genau unter die Lupe genommen.
Das Positive:
- Die Bots generieren Feedback, das echtes Kundenverhalten täuschend echt nachahmt – ein wirklich gelungener Aspekt.
Das Negative:
- SimGym kam zu dem Schluss, dass der Champion besser abschnitt, und gab an, dass der Challenger eine um 36 % niedrigere In-den-Warenkorb-Rate aufwies. Das erscheint uns nicht plausibel, da wir lediglich die Mengenrabatte entfernt hatten.
- Die spezifischen Empfehlungen ergeben selten Sinn, es sei denn, dem Shop mangelt es an grundlegenden UX-Prinzipien.
- Die Bots testeten das Theme als Ganzes, nicht nur die von uns geänderten Elemente. Daher gaben die KI-Agenten Feedback zu Bereichen, die gar nicht verändert wurden, und behaupteten beispielsweise, die „Preise seien schwer zu finden“, was schlichtweg nicht stimmte.
Fazit
Insgesamt ist SimGym eine großartige Idee. Händlern die Möglichkeit zu geben, A/B-Test-Simulationen ohne teure Tools oder riesige Traffic-Mengen durchzuführen, ist ein bedeutender Fortschritt.
Im aktuellen Zustand gibt es jedoch noch Verbesserungsbedarf. Ich würde den KI-Empfehlungen derzeit nicht zu viel Bedeutung beimessen und mich für eine strikte Conversion-Optimierung noch nicht darauf verlassen.
Ich empfehle stattdessen, es als Validierungstool zu nutzen. Wenn Sie Ihren Shop komplett neu gestalten und ein neues Theme einführen, ist SimGym ideal, um es gegen das alte Theme zu testen und sicherzustellen, dass vor dem Livegang nichts Wichtiges vergessen wurde.
Da ich Shopify kenne, bin ich mir sicher, dass sie das Tool kontinuierlich weiterentwickeln und genau dorthin bringen werden, wo es sein muss.
