Meine Session planen

# Session Brief: A/B Testing

## Ziel
Artefakt: Experiment Result

## Arbeitsfrage
Liefert die Variante einen statistisch signifikanten Effekt auf die Erfolgsmetrik ohne Counter-Metrik zu verschlechtern?

## Kontext
Baseline-Conversion und Varianz; bekannte saisonale Effekte; minimum detectable effect (MDE) als Ziel; Tracking-Plan fuer Erfolgs- und Counter-Metriken; bereits laufende Tests, um Interferenz zu pruefen.

## Setup
- Format: Async-Arbeitslauf
- Dauer: 24 bis 72 h
- Modus: asynchron
- Teilnehmende: Ein Experiment-Owner (Product oder Growth); Engineer fuer Implementierung; Datenanalyst fuer Auswertung; Reviewer fuer Brief-Freigabe; Stakeholder fuer Go-Live-Entscheidung.
- Owner: Ein Experiment-Owner (Product oder Growth)
- Beteiligungsmodus: Teamrunde, gemeinsames Arbeiten und Alignment
- Ergebnislogik: Artefakt fertigstellen

## Beteiligungslogik
Nutze die Session für gemeinsames Verständnis. Beiträge werden sichtbar gesammelt, Annahmen werden abgeglichen und offene Unterschiede bleiben im Artefakt nachvollziehbar.

## Ergebnislogik
Die Session arbeitet direkt auf Experiment Result hin. Das Artefakt soll nach der Session teilbar, reviewbar oder weiterverwendbar sein.

## Input
Experimentier-Tool mit Bucketing und statistischer Auswertung; Vorlage fuer Experiment-Brief (Hypothese, Varianten, Metriken, Sample, Dauer, Stop-Regel); Sample-Size-Rechner.

## Vorbereitung
Experiment-Brief schreiben, von Reviewer freigeben lassen. Sample-Size-Berechnung mit MDE, Alpha (0.05) und Power (0.8). Variant-Implementierung hinter Feature-Flag. Dry-Run mit interner Gruppe vor Rollout.

## Agenda
1. Brief vorbereiten (15-30 min)
   Owner: Owner
   Aktion: Arbeitsfrage, Input, Zielartefakt und Reviewfrist für A/B Testing vorbereiten. Verlinke relevante Daten, Quellen und bestehende Artefakte. Sammle Beiträge sichtbar, gleiche Annahmen im Team ab und halte Dissens nicht nur mündlich fest. Arbeite direkt im Zielartefakt, statt nur über das Artefakt zu sprechen.
   Output: Session Brief

2. Asynchron bearbeiten (24 bis 72 h)
   Owner: Teilnehmende
   Aktion: Teilnehmende arbeiten die Methode entlang der Vorlage durch. Fokus: Beiträge direkt am Artefakt ergänzen, Annahmen markieren und Belege verlinken. Sammle Beiträge sichtbar, gleiche Annahmen im Team ab und halte Dissens nicht nur mündlich fest. Arbeite direkt im Zielartefakt, statt nur über das Artefakt zu sprechen.
   Output: Experiment Result

3. Review bündeln (20-30 min)
   Owner: Facilitator
   Aktion: Kommentare, Widersprüche und offene Fragen clustern. Unklare Punkte als Entscheidungen, Risiken oder Follow-ups einsortieren. Sammle Beiträge sichtbar, gleiche Annahmen im Team ab und halte Dissens nicht nur mündlich fest. Arbeite direkt im Zielartefakt, statt nur über das Artefakt zu sprechen.
   Output: Review Notes

4. Artefakt finalisieren (15-30 min)
   Owner: Owner
   Aktion: Eingearbeitete Version erstellen, Status setzen und nächsten Review oder Entscheidungspunkt terminieren. Sammle Beiträge sichtbar, gleiche Annahmen im Team ab und halte Dissens nicht nur mündlich fest. Arbeite direkt im Zielartefakt, statt nur über das Artefakt zu sprechen.
   Output: Decision Log

5. Artefakt veröffentlichen (10 min)
   Owner: Owner
   Aktion: Artefakt auf Vollständigkeit prüfen, Ablageort festlegen, Version oder Status setzen und Review-Empfänger benennen.
   Output: Experiment Result

## Abschluss
- Ergebnisartefakt aktualisieren: Experiment Result
- Ablageort, Version und Review-Empfänger festlegen.
- Owner, nächster Schritt und Reviewtermin festlegen.

# Experiment Result: A/B Testing

## Arbeitsfrage
Liefert die Variante einen statistisch signifikanten Effekt auf die Erfolgsmetrik ohne Counter-Metrik zu verschlechtern?

## Kontext
Baseline-Conversion und Varianz; bekannte saisonale Effekte; minimum detectable effect (MDE) als Ziel; Tracking-Plan fuer Erfolgs- und Counter-Metriken; bereits laufende Tests, um Interferenz zu pruefen.

## Beteiligte
- Owner: Ein Experiment-Owner (Product oder Growth)
- Teilnehmende: Ein Experiment-Owner (Product oder Growth); Engineer fuer Implementierung; Datenanalyst fuer Auswertung; Reviewer fuer Brief-Freigabe; Stakeholder fuer Go-Live-Entscheidung.

## Input
Experimentier-Tool mit Bucketing und statistischer Auswertung; Vorlage fuer Experiment-Brief (Hypothese, Varianten, Metriken, Sample, Dauer, Stop-Regel); Sample-Size-Rechner.

## Vorlage
# A/B Testing Arbeitsvorlage

## Ziel

Vergleicht zwei oder mehr Varianten anhand definierter Erfolgsmetriken.

## Kontext

Wann und wofür nutzen wir diese Methode?

## Input

Welche Daten, Beobachtungen, Entscheidungen oder Materialien liegen vor?

## Durchführung

Kurze Notizen entlang des Run Sheets.

## Ergebnisartefakte
- Experiment Result:
- Decision Log:
- Learning Summary:

## Annahmen und offene Fragen

- ...

## Entscheidung / Nächster Schritt

Owner, Datum und Erfolgssignal.

## Fertigstellungscheck
- Experiment Result ist vollständig genug für Review:
- Ablageort:
- Version / Status:
- Review durch:
- Nächster Schritt:

## Nächster Schritt
- Ergebnis prüfen
- offene Fragen markieren
- Review oder Entscheidung terminieren