Experiment-Design: die riskanteste Annahme testen, bevor Sie bauen

Diese Methode in IdeaHone durchführen
Legt einen Space mit den Entitäten und Bewertungskriterien dieser Methode an, bereit für Ihre nächste Session.
Die meisten Innovationstests sind keine Tests. Ein Team „probiert die Nachfüllstation mal eine Weile in einer Filiale aus“, schaut nach einem Monat drauf und entscheidet nach Gefühl. Sind die Zahlen gut, war es ein Erfolg. Sind sie schlecht, war es zu früh, das Wetter falsch, die Beschilderung zu klein. Nichts hätte die Idee je gestoppt, weil niemand vorher gesagt hat, was sie stoppt. Ein echtes Experiment legt drei Dinge fest, bevor es beginnt: was Sie glauben, woran Sie es merken und was Sie mit jedem möglichen Ergebnis tun.
Die Experiment-Karte
Schreiben Sie eine Karte pro Annahme. Sie passt auf einen Bildschirm und dauert 20 Minuten mit den Menschen, die auf das Ergebnis hin handeln werden.
- Wir glauben, dass Stammkunden ihre eigene Flasche mitbringen.
- Wir wissen es, wenn sie an der Station nachfüllen.
- Zielgruppe: Stammkunden der Filiale Mitte.
- Methode: Concierge, eine Mitarbeiterin füllt zwei Wochen lang von Hand nach.
- Messgröße und Schwelle: mindestens 20 Nachfüllungen pro 100 Kassenbons.
- Erreichen wir sie, dann rollen wir in drei Filialen aus.
- Verfehlen wir sie, dann stoppen wir die Station.
- Verantwortlich und Datum: Anna prüft es am 31. März.
Die letzten beiden Zeilen überspringen Teams am häufigsten, und sie zählen am meisten. Sobald Schwelle und Folgen aufgeschrieben sind, entscheidet das Ergebnis. Hinterher kann niemand die Linie verschieben.
Der Entwurf in 20 Minuten
- Beginnen Sie mit der riskantesten Annahme. Der, die wichtig ist und die wenigsten Belege hat: oben rechts in einem Annahmen-Mapping. Eine sichere Annahme zu testen fühlt sich produktiv an und lehrt nichts.
- Schreiben Sie den Glaubenssatz als Satz über Verhalten. „Kunden mögen Nachfüllen“ kann nicht scheitern. „Stammkunden bringen ihre eigene Flasche mit“ schon.
- Nennen Sie das Signal, das Sie beobachten könnten. Was würden Sie sehen, zählen oder hören, wenn der Glaubenssatz stimmt? Lässt es sich nicht beobachten, formulieren Sie den Satz um.
- Wählen Sie die günstigste Methode, die das Signal liefert. Sprechen Sie mit Menschen, wenn Sie wissen müssen, warum; nutzen Sie eine Landingpage oder Concierge, wenn Sie wissen müssen, ob sie handeln. Gebaut wird zuletzt.
- Legen Sie die Schwelle fest, bevor jemand ein Ergebnis sieht. Eine Zahl und eine Richtung: mindestens 20, höchstens 5 Minuten. Wählen Sie die Zahl, bei der Sie ehrlich Ihren Plan ändern würden.
- Schreiben Sie auf, was Sie auf jeder Seite tun. Darüber: der nächste Schritt, meist ein größerer Test. Darunter: stoppen oder die Idee ändern. Die Zeile für darunter wird zum Abbruchkriterium der Entscheidung.
- Geben Sie ihm eine verantwortliche Person und ein Enddatum. Zwei Wochen sind ein guter Standard. Die Person trägt an diesem Datum den gemessenen Wert ein, und die Karte sagt, was als Nächstes passiert.
Die Methode wählen
| Methode | Beantwortet | Aufwand |
|---|---|---|
| Kundeninterviews | Warum Menschen tun, was sie tun | Ein paar Tage |
| Umfrage | Wie viele Menschen etwas sagen | Tage, aber gesagt, nicht getan |
| Landingpage | Ob sich Menschen anmelden, bevor es das gibt | Ein Tag und etwas Besucherverkehr |
| Prototyp | Wo Menschen hängen bleiben | Tage bis eine Woche |
| Concierge | Ob der Nutzen funktioniert, von Hand erbracht | Ein bis zwei Wochen |
| Wizard of Oz | Ob sie es nutzen, wenn es echt aussieht | Ein bis zwei Wochen |
| A/B-Test | Welche von zwei Versionen besser wirkt | Braucht genug Besucher |
| Pilot | Ob es unter echten Bedingungen funktioniert | Wochen, und echtes Geld |
Wenn zwei Methoden die Frage beantworten könnten, nehmen Sie die, mit der Sie diese Woche anfangen können. Ein kleiner Test, der läuft, schlägt einen perfekten, der auf ein Budget wartet.
Wo Experimente schiefgehen
- Die Schwelle kommt nach dem Ergebnis. „11 Nachfüllungen sind für den Anfang eigentlich nicht schlecht.“ Wenn sich die Linie verschieben lässt, war es nie ein Test. Schreiben Sie sie zuerst auf und halten Sie fest, warum Sie sich trotzdem anders entscheiden.
- Die bequeme Annahme testen. Teams testen, was voraussichtlich besteht. Die Annahme, die die Idee zu Fall bringen würde, gehört zuerst getestet, weil die Antwort das meiste Geld spart.
- Keine Entscheidung daran. Ein Ergebnis ohne „dann“ ist ein Bericht. Jede Karte sagt, was über und unter der Schwelle passiert.
- Kurswechsel ohne Aufzeichnung. Die Idee nach einer verfehlten Schwelle zu ändern ist oft richtig. Halten Sie es als Entscheidung mit Ergebnis und Grund fest und entwerfen Sie dann die nächste Karte, damit das Team später sieht, warum es den Kurs gewechselt hat.
Ideen gemeinsam bewerten und priorisieren
IdeaHone bewertet Ideen nach Ihren Kriterien, zeigt sie in einer Matrix und hält die Gründe fest. So ist die Entscheidung klar und nachvollziehbar.
Was ist Experiment-Design in der Produktinnovation?
Eine Annahme in einen kleinen Test verwandeln, mit fester Hypothese, beobachtbarem Signal, Methode, Messgröße mit Schwelle und einer Entscheidung für jede Seite der Schwelle, alles festgelegt, bevor der Test beginnt.
Wie sieht eine gute Hypothese aus?
„Wir glauben, dass [Verhalten einer bestimmten Gruppe]. Wir wissen es, wenn [beobachtbares Signal].“ Der Glaubenssatz muss falsch sein können, sonst lohnt der Test nicht.
Wie legt man die Schwelle fest?
Fragen Sie, welches Ergebnis Ihren Plan ehrlich ändern würde. Nehmen Sie die Zahl, bei der Sie aufhören würden, nicht die, auf die Sie hoffen, und schreiben Sie sie vor den ersten Daten auf.
Was ist ein Kurswechsel (Pivot)?
Die Entscheidung, die aktuelle Form einer Idee nicht weiter zu testen und für dasselbe Problem eine andere zu versuchen. Halten Sie ihn wie jede Entscheidung fest, mit gemessenem Ergebnis und Grund, und entwerfen Sie sofort das nächste Experiment.