Vorher abschließenEntscheidungsrelevante Hypothese
Eine einzelne widerlegbare Annahme und die daran hängende Investition sind benannt.
Ohne Entscheidungsbezug misst das Team Aktivität statt Risikoreduktion.
MethodenanleitungProduct Discovery
Experiment Canvas
Die Anleitung zur Methode: Voraussetzungen und Materialien klären, den gesamten Ablauf verstehen und Ergebnisse, Stolperfallen sowie Abbruchkriterien nachschlagen.
KomplexitätNiedrig
Zeit30-60 min
Teilnehmende1-5
FormatWorkshop + Async
ReifegradEstablished
01
Vorbedingung
Was vorher fertig sein muss
Vorher abschließenMess- und Ethikzugang
Population, Datenerfassung, Datenschutz und Abbruchrecht sind geklärt.
Ohne Zugang oder Guardrails ist der Test nicht verantwortbar.
02
Vorbereitung
Was vor Start vorliegen muss
Materialien
Canvas, Hypothesenquelle, Baseline, Zielgruppenzugang, Eventdefinitionen, Datenschutzprüfung und Decision Log.
Personen / Rollen
Experiment Owner · Product · Research/Analytics · Fachperson für Risiken
Vorabinfos
Hypothese, Investitionsentscheidung, verfügbare Population, Baseline und relevante Guardrails vorbereiten.
Zeitbedarf
30–45 Minuten für das Design; Durchführung separat
Setup
Hypothese, Test, Hauptmetrik und Schwelle im Experiment Canvas festhalten; Datenerfassung und Abbruchgrenze vor Start prüfen. Die Test Card bietet für einfache Tests dieselben vier Kernangaben. Eine führende Planung genügt.
03
Kernfrage
Die eine Frage, die diese Methode beantwortet
Welche kritische Annahme prüfen wir mit welchem beobachtbaren Verhalten, und welche vorab gesetzte Schwelle entscheidet?
04
Ablauf
Phasen mit Ziel, Durchführung, Ergebnis und Stolperfalle
Ein Experiment Canvas zwingt ein Team, vor der Durchführung zu sagen, was wahr sein muss, wie es die Annahme prüft, was gemessen wird und welche Schwelle eine Entscheidung auslöst. Aktivität zählt nicht als Evidenz; die Messung muss zur Hypothese passen.
Experiment Canvas
Fiktives Arbeitsbeispiel
Acht Felder verbinden Annahme, Test, Messung, Schutz und Entscheidung.
Hypothese
Was muss für die Idee wahr sein?
Mindestens 30 % der exponierten aktiven Projektleiter starten einen CSV-Export.
Entscheidung
Welche Investitionsentscheidung hängt daran?
Ab Schwelle einen interaktiven Prototyp bauen; darunter Nutzenversprechen überarbeiten.
Testaufbau
Wer sieht was, wie lange und unter welchen Bedingungen?
Fake Door für 200 berechtigte aktive Accounts über 7 Tage.
Hauptmetrik
Zähler, Nenner, Segment und Fenster
Eindeutige Exportstarts / exponierte aktive Accounts in 7 Tagen.
Schwelle
Welche Grenze gilt vor Teststart?
Erfolg ≥30 % bei mindestens 150 exponierten aktiven Accounts.
Guardrail
Wann pausieren oder abbrechen?
Abbruch bei mehr als 3 % Supportbeschwerden zur nicht verfügbaren Funktion.
Evidenz
Welche Rohdaten und Qualitätschecks werden gesichert?
Expositions- und Klickevents, Accountsegment, Botfilter, Abweichungslog.
Lernen und nächster Schritt
Was ergab die Regel und was folgt?
32 % bei n=181; Guardrail 1,1 %. Prototyp bauen und Nutzbarkeit testen.
- 1
Hypothese
Annahme diskret formulieren
Ziel
Eine einzelne, entscheidungsrelevante und widerlegbare Annahme festlegen.
Voraussetzungen für diesen Schritt
- Produkt- oder Geschäftsmodell
- Bekannte Unsicherheiten
- Anstehende Investitionsentscheidung
Durchführung
- Formulieren, was für die Idee wahr sein muss.
- Zielgruppe, Verhalten oder Ergebnis und Kontext konkretisieren.
- Nur eine Annahme pro Experiment wählen.
Ergebnis
Testbare Hypothese
Zielgruppe · Verhalten · Kontext · erwartetes Ergebnis
Qualitätscheck
Kann ein Ergebnis die Aussage klar schwächen?
Stolperfalle
Mehrere Annahmen werden in einen Satz gepackt, sodass kein Ergebnis eindeutig interpretierbar ist. Hypothese in diskrete Aussagen teilen und die risikorelevanteste auswählen.
Zeitlicher Rahmen: 5–10 Minuten
- 2
Design
Minimalen Test entwerfen
Ziel
Den kleinsten ethisch vertretbaren Test wählen, der ausreichend starke Evidenz für die Entscheidung erzeugt.
Voraussetzungen für diesen Schritt
- Testbare Hypothese
- Verfügbare Zielgruppe und Kanäle
- Zeit-, Kosten- und Compliancegrenzen
Durchführung
- Beobachtbares Verhalten statt bloßer Meinung wählen.
- Population, Exposition, Ablauf und Datenerfassung definieren.
- Täuschung, Datenschutz und operative Nebenwirkungen prüfen.
Ergebnis
Testaufbau
Population · Intervention · Dauer · Datenerfassung · Ethik
Qualitätscheck
Kann der Test genau die Hypothese adressieren?
Stolperfalle
Das Team wählt einen schnellen Test, der nur Interesse abfragt, obwohl die Hypothese tatsächliches Verhalten betrifft. Evidenzstärke an die Entscheidung anpassen und gegebenenfalls Verhaltensdaten erfassen.
Zeitlicher Rahmen: 10–15 Minuten
- 3
Messen
Metrik und Schwelle vorab festlegen
Ziel
Eine berechenbare Hauptmetrik, Datengrundlage und Entscheidungsschwelle definieren.
Voraussetzungen für diesen Schritt
- Testaufbau
- Baseline oder Referenzwert
- Entscheidungsbedarf
Durchführung
- Zähler, Nenner, Segment und Messfenster definieren.
- Erfolgsschwelle und Mindestdatenmenge vor Start festlegen.
- Schutzmetriken und Abbruchgrenzen ergänzen.
Ergebnis
Mess- und Entscheidungsregel
Metrik · Formel · Schwelle · Mindestdaten · Guardrail
Qualitätscheck
Lässt sich aus Rohdaten eindeutig Erfolg oder Misserfolg bestimmen?
Stolperfalle
Die Schwelle wird erst nach Sichtung der Ergebnisse gewählt oder Aktivität wird mit Wirkung verwechselt. Vor Start Schwelle, Nenner und Auswertungsregel einfrieren und versionieren.
Zeitlicher Rahmen: 10–15 Minuten
- 4
Lernen
Durchführen, auswerten und entscheiden
Ziel
Beobachtete Daten gegen die vorab definierte Regel auswerten und eine nächste Entscheidung treffen.
Voraussetzungen für diesen Schritt
- Freigegebenes Testdesign
- Messdaten
- Vorab gesetzte Schwelle
Durchführung
- Test gemäß Protokoll durchführen und Abweichungen notieren.
- Datenqualität und Guardrails vor der Hauptmetrik prüfen.
- Persevere, adapt, retest oder stop mit Begründung entscheiden.
Ergebnis
Lernkarte
Daten · Abweichungen · Ergebnis · Entscheidung · neue Annahme
Qualitätscheck
Folgt die Entscheidung der vorab gesetzten Regel und Evidenzstärke?
Stolperfalle
Ein überraschendes Ergebnis wird nachträglich durch geänderte Segmente oder Schwellen passend gemacht. Explorative Analysen separat markieren und für neue Hypothesen einen neuen Test anlegen.
Zeitlicher Rahmen: Durchführung separat; 15–30 Minuten Auswertung
05
Artefakt
Was am Ende rauskommt
Skizze: so sieht das Artefakt aus
Form
Versioniertes Experiment Canvas als führender Testplan; Auswertung und nächste Handlung mit Rohdatenlink im Canvas oder in einer verknüpften Learning Card festhalten.
Versionierung / Ownership
Datum, Autor, Quellenstand und Entscheidungsstatus je Revision erhalten; frühere Ergebnisse nicht überschreiben.
Tool-Alternativen
- Experiment Canvas oder Test Card
- Analytics- oder Beobachtungsprotokoll
- Learning Card und Decision Log
experiment-canvas-working-template.md
Plane Experiment Canvas mit realem Scope, passenden Rollen und einem klaren Entscheidungsziel.
Experiment Canvas: Arbeitsvorlage
Fragestellung
Noch zu klären
Gewünschtes Ergebnis
Noch zu klären
Rahmen
Vollständiger Lernzyklus Zeit: 30–45 Minuten für das Design; Durchführung separat
Diese Vorlage während der Arbeit auf Papier oder in einem eigenen Dokument ausfüllen.
Vorbereitung für diesen Umfang
Methodische Grundausstattung
- Materialien: Canvas, Hypothesenquelle, Baseline, Zielgruppenzugang, Eventdefinitionen, Datenschutzprüfung und Decision Log.
- Rollen: Experiment Owner · Product · Research/Analytics · Fachperson für Risiken
- Vorab-Infos: Hypothese, Investitionsentscheidung, verfügbare Population, Baseline und relevante Guardrails vorbereiten.
- Gesamter Zeitbedarf: 30–45 Minuten für das Design; Durchführung separat
- Setup: Hypothese, Test, Hauptmetrik und Schwelle im Experiment Canvas festhalten; Datenerfassung und Abbruchgrenze vor Start prüfen. Die Test Card bietet für einfache Tests dieselben vier Kernangaben. Eine führende Planung genügt.
Für die Arbeitsschritte bereitstellen
Hypothese: Annahme diskret formulieren
- Produkt- oder Geschäftsmodell
- Bekannte Unsicherheiten
- Anstehende Investitionsentscheidung
Design: Minimalen Test entwerfen
- Testbare Hypothese
- Verfügbare Zielgruppe und Kanäle
- Zeit-, Kosten- und Compliancegrenzen
Messen: Metrik und Schwelle vorab festlegen
- Testaufbau
- Baseline oder Referenzwert
- Entscheidungsbedarf
Lernen: Durchführen, auswerten und entscheiden
- Freigegebenes Testdesign
- Messdaten
- Vorab gesetzte Schwelle
Experiment Canvas
Hypothese
Was muss für die Idee wahr sein?
...
Entscheidung
Welche Investitionsentscheidung hängt daran?
...
Testaufbau
Wer sieht was, wie lange und unter welchen Bedingungen?
...
Hauptmetrik
Zähler, Nenner, Segment und Fenster
...
Schwelle
Welche Grenze gilt vor Teststart?
...
Guardrail
Wann pausieren oder abbrechen?
...
Evidenz
Welche Rohdaten und Qualitätschecks werden gesichert?
...
Lernen und nächster Schritt
Was ergab die Regel und was folgt?
...
Strategyzer: Validate Your Ideas with the Test Card
Hypothese: Annahme diskret formulieren
Erwartetes Artefakt: Testbare Hypothese
Zielgruppe · Verhalten · Kontext · erwartetes Ergebnis
Eintrag:
...
- Kann ein Ergebnis die Aussage klar schwächen?
Design: Minimalen Test entwerfen
Erwartetes Artefakt: Testaufbau
Population · Intervention · Dauer · Datenerfassung · Ethik
Eintrag:
...
- Kann der Test genau die Hypothese adressieren?
Messen: Metrik und Schwelle vorab festlegen
Erwartetes Artefakt: Mess- und Entscheidungsregel
Metrik · Formel · Schwelle · Mindestdaten · Guardrail
Eintrag:
...
- Lässt sich aus Rohdaten eindeutig Erfolg oder Misserfolg bestimmen?
Lernen: Durchführen, auswerten und entscheiden
Erwartetes Artefakt: Lernkarte
Daten · Abweichungen · Ergebnis · Entscheidung · neue Annahme
Eintrag:
...
- Folgt die Entscheidung der vorab gesetzten Regel und Evidenzstärke?
Offene Fragen und nächste Schritte
...
Methodenanleitung: https://methodatlas.meierhoff-systems.de/de/methods/experiment-canvas/run-sheet
06
Beispielausgabe
Konkret gefülltes Szenario, fiktives Beispiel
Fiktives Beispiel zur Orientierung. Die genannten Mengen und Zeiten beschreiben diesen Fall und sind keine allgemeine Vorgabe.
experiment-canvas-beispiel.md
Konkret gefülltes Szenario, fiktives Beispiel
Fiktives Beispiel: Wir glauben, dass mindestens 30 % der wöchentlich aktiven Projektleiter einen CSV-Export starten, wenn er in der Ergebnisansicht angeboten wird. Test: klickbarer Fake Door für 200 berechtigte Accounts über 7 Tage. Hauptmetrik: eindeutige Exportstarts / exponierte aktive Accounts. Erfolg ≥30 %, Abbruch bei Supportbeschwerden >3 %. Danach: Prototyp bauen, sonst Nutzenversprechen überarbeiten.
07
Stolperfallen
Symptome erkennen, gegensteuern
Kurzüberblick, vollständiger Text steht in der jeweiligen Phase im Ablauf
- Annahme diskret formulierenMehrere Annahmen werden in einen Satz gepackt, sodass kein Ergebnis eindeutig interpretierbar ist.In der Phase ansehen
- Minimalen Test entwerfenDas Team wählt einen schnellen Test, der nur Interesse abfragt, obwohl die Hypothese tatsächliches Verhalten betrifft.In der Phase ansehen
- Metrik und Schwelle vorab festlegenDie Schwelle wird erst nach Sichtung der Ergebnisse gewählt oder Aktivität wird mit Wirkung verwechselt.In der Phase ansehen
- Durchführen, auswerten und entscheidenEin überraschendes Ergebnis wird nachträglich durch geänderte Segmente oder Schwellen passend gemacht.In der Phase ansehen
Falle
Annahme diskret formulieren
Symptom
Mehrere Annahmen werden in einen Satz gepackt, sodass kein Ergebnis eindeutig interpretierbar ist.
Was tun
Hypothese in diskrete Aussagen teilen und die risikorelevanteste auswählen.
Falle
Minimalen Test entwerfen
Symptom
Das Team wählt einen schnellen Test, der nur Interesse abfragt, obwohl die Hypothese tatsächliches Verhalten betrifft.
Was tun
Evidenzstärke an die Entscheidung anpassen und gegebenenfalls Verhaltensdaten erfassen.
Falle
Metrik und Schwelle vorab festlegen
Symptom
Die Schwelle wird erst nach Sichtung der Ergebnisse gewählt oder Aktivität wird mit Wirkung verwechselt.
Was tun
Vor Start Schwelle, Nenner und Auswertungsregel einfrieren und versionieren.
Falle
Durchführen, auswerten und entscheiden
Symptom
Ein überraschendes Ergebnis wird nachträglich durch geänderte Segmente oder Schwellen passend gemacht.
Was tun
Explorative Analysen separat markieren und für neue Hypothesen einen neuen Test anlegen.
08
Abbruchkriterien
Wann du anhalten, Voraussetzungen klären oder einen anderen Ansatz wählen solltest
Jeder Eintrag ist methodengerecht formuliert und mit Evidenz oder offen markierter Unsicherheit verbunden.
Nächste Entscheidung, Owner und Prüftermin sind soweit erforderlich sichtbar.
Wie geht es weiter?
Product Discovery
Opportunity Solution Tree
Aktualisiert den Lösungsbaum mit dem Lern- und Entscheidungsergebnis des Tests.
Product Discovery
Assumption Mapping
Ordnet die nächste riskante Annahme nach dem Testergebnis neu ein.
Product Discovery
Learning Card
Verdichtet die vorliegende Testauswertung in Beobachtung, Erkenntnis und nächste Handlung; verweist auf die bestehende Planung.
Methodenanleitung durchgearbeitet?
Zum Steckbrief für Zweck, ähnliche Methoden und Quellen oder direkt zur nächsten Methode im Katalog.