Experiment-Design: die riskanteste Annahme testen, bevor Sie bauen

Verfasst von der IdeaHone-Redaktion · · 5 Min. Lesezeit

Pipette, die eine Reihe kleiner Reagenzgläser befüllt

Diese Methode in IdeaHone durchführen

Legt einen Space mit den Entitäten und Bewertungskriterien dieser Methode an, bereit für Ihre nächste Session.

In IdeaHone starten

Die meisten Innovationstests sind keine Tests. Ein Team „probiert die Nachfüllstation mal eine Weile in einer Filiale aus“, schaut nach einem Monat drauf und entscheidet nach Gefühl. Sind die Zahlen gut, war es ein Erfolg. Sind sie schlecht, war es zu früh, das Wetter falsch, die Beschilderung zu klein. Nichts hätte die Idee je gestoppt, weil niemand vorher gesagt hat, was sie stoppt. Ein echtes Experiment legt drei Dinge fest, bevor es beginnt: was Sie glauben, woran Sie es merken und was Sie mit jedem möglichen Ergebnis tun.

Die Experiment-Karte

Schreiben Sie eine Karte pro Annahme. Sie passt auf einen Bildschirm und dauert 20 Minuten mit den Menschen, die auf das Ergebnis hin handeln werden.

  • Wir glauben, dass Stammkunden ihre eigene Flasche mitbringen.
  • Wir wissen es, wenn sie an der Station nachfüllen.
  • Zielgruppe: Stammkunden der Filiale Mitte.
  • Methode: Concierge, eine Mitarbeiterin füllt zwei Wochen lang von Hand nach.
  • Messgröße und Schwelle: mindestens 20 Nachfüllungen pro 100 Kassenbons.
  • Erreichen wir sie, dann rollen wir in drei Filialen aus.
  • Verfehlen wir sie, dann stoppen wir die Station.
  • Verantwortlich und Datum: Anna prüft es am 31. März.

Die letzten beiden Zeilen überspringen Teams am häufigsten, und sie zählen am meisten. Sobald Schwelle und Folgen aufgeschrieben sind, entscheidet das Ergebnis. Hinterher kann niemand die Linie verschieben.

Der Entwurf in 20 Minuten

  1. Beginnen Sie mit der riskantesten Annahme. Der, die wichtig ist und die wenigsten Belege hat: oben rechts in einem Annahmen-Mapping. Eine sichere Annahme zu testen fühlt sich produktiv an und lehrt nichts.
  2. Schreiben Sie den Glaubenssatz als Satz über Verhalten. „Kunden mögen Nachfüllen“ kann nicht scheitern. „Stammkunden bringen ihre eigene Flasche mit“ schon.
  3. Nennen Sie das Signal, das Sie beobachten könnten. Was würden Sie sehen, zählen oder hören, wenn der Glaubenssatz stimmt? Lässt es sich nicht beobachten, formulieren Sie den Satz um.
  4. Wählen Sie die günstigste Methode, die das Signal liefert. Sprechen Sie mit Menschen, wenn Sie wissen müssen, warum; nutzen Sie eine Landingpage oder Concierge, wenn Sie wissen müssen, ob sie handeln. Gebaut wird zuletzt.
  5. Legen Sie die Schwelle fest, bevor jemand ein Ergebnis sieht. Eine Zahl und eine Richtung: mindestens 20, höchstens 5 Minuten. Wählen Sie die Zahl, bei der Sie ehrlich Ihren Plan ändern würden.
  6. Schreiben Sie auf, was Sie auf jeder Seite tun. Darüber: der nächste Schritt, meist ein größerer Test. Darunter: stoppen oder die Idee ändern. Die Zeile für darunter wird zum Abbruchkriterium der Entscheidung.
  7. Geben Sie ihm eine verantwortliche Person und ein Enddatum. Zwei Wochen sind ein guter Standard. Die Person trägt an diesem Datum den gemessenen Wert ein, und die Karte sagt, was als Nächstes passiert.

Die Methode wählen

MethodeBeantwortetAufwand
KundeninterviewsWarum Menschen tun, was sie tunEin paar Tage
UmfrageWie viele Menschen etwas sagenTage, aber gesagt, nicht getan
LandingpageOb sich Menschen anmelden, bevor es das gibtEin Tag und etwas Besucherverkehr
PrototypWo Menschen hängen bleibenTage bis eine Woche
ConciergeOb der Nutzen funktioniert, von Hand erbrachtEin bis zwei Wochen
Wizard of OzOb sie es nutzen, wenn es echt aussiehtEin bis zwei Wochen
A/B-TestWelche von zwei Versionen besser wirktBraucht genug Besucher
PilotOb es unter echten Bedingungen funktioniertWochen, und echtes Geld

Wenn zwei Methoden die Frage beantworten könnten, nehmen Sie die, mit der Sie diese Woche anfangen können. Ein kleiner Test, der läuft, schlägt einen perfekten, der auf ein Budget wartet.

Wo Experimente schiefgehen

  • Die Schwelle kommt nach dem Ergebnis. „11 Nachfüllungen sind für den Anfang eigentlich nicht schlecht.“ Wenn sich die Linie verschieben lässt, war es nie ein Test. Schreiben Sie sie zuerst auf und halten Sie fest, warum Sie sich trotzdem anders entscheiden.
  • Die bequeme Annahme testen. Teams testen, was voraussichtlich besteht. Die Annahme, die die Idee zu Fall bringen würde, gehört zuerst getestet, weil die Antwort das meiste Geld spart.
  • Keine Entscheidung daran. Ein Ergebnis ohne „dann“ ist ein Bericht. Jede Karte sagt, was über und unter der Schwelle passiert.
  • Kurswechsel ohne Aufzeichnung. Die Idee nach einer verfehlten Schwelle zu ändern ist oft richtig. Halten Sie es als Entscheidung mit Ergebnis und Grund fest und entwerfen Sie dann die nächste Karte, damit das Team später sieht, warum es den Kurs gewechselt hat.

Ideen gemeinsam bewerten und priorisieren

IdeaHone bewertet Ideen nach Ihren Kriterien, zeigt sie in einer Matrix und hält die Gründe fest. So ist die Entscheidung klar und nachvollziehbar.

Demo anfragen

Was ist Experiment-Design in der Produktinnovation?

Eine Annahme in einen kleinen Test verwandeln, mit fester Hypothese, beobachtbarem Signal, Methode, Messgröße mit Schwelle und einer Entscheidung für jede Seite der Schwelle, alles festgelegt, bevor der Test beginnt.

Wie sieht eine gute Hypothese aus?

„Wir glauben, dass [Verhalten einer bestimmten Gruppe]. Wir wissen es, wenn [beobachtbares Signal].“ Der Glaubenssatz muss falsch sein können, sonst lohnt der Test nicht.

Wie legt man die Schwelle fest?

Fragen Sie, welches Ergebnis Ihren Plan ehrlich ändern würde. Nehmen Sie die Zahl, bei der Sie aufhören würden, nicht die, auf die Sie hoffen, und schreiben Sie sie vor den ersten Daten auf.

Was ist ein Kurswechsel (Pivot)?

Die Entscheidung, die aktuelle Form einer Idee nicht weiter zu testen und für dasselbe Problem eine andere zu versuchen. Halten Sie ihn wie jede Entscheidung fest, mit gemessenem Ergebnis und Grund, und entwerfen Sie sofort das nächste Experiment.

Alle Ressourcen