methodatlas

Product Strategy Entscheidungsmethode

Counter Metrics

Ergänzt eine Zielmetrik um Schutz- und Gegenmetriken, damit lokale Verbesserung keine relevante Nebenwirkung verdeckt.

Counter Metrics formulieren, was trotz Verbesserung der Primärmetrik nicht schlechter werden darf. Sie entstehen aus Gegenhypothesen, Systemgrenzen und betroffenen Gruppen und brauchen ebenso klare Formeln und Entscheidungsschwellen.

Kernfrage
Welche relevante Verschlechterung könnte unsere Zielmetrik verdecken, und welche Gegenmetrik stoppt oder relativiert die Entscheidung?
Teilnehmende
2-6
Zeit
30-60 min

Counter Metrics verwendet eine Primärmetrik mit expliziten Gegenhypothesen, Guardrails und Stoppschwellen. Bewertungen bleiben begründet und kontextgebunden.

Papierillustration von Counter Metrics mit dem methodenspezifischen Arbeitsmodell.
  1. Risiken

    Gegenhypothesen

    Für jede Zielmetrik plausible Fehlanreize, Verlagerungen und betroffene Gruppen formulieren.

  2. Gegenmetriken

    Gegenmetriken

    Je Schadenshypothese eine messbare Gegenmetrik mit Population, Formel und Fenster definieren.

  3. Schwellen

    Schwellen

    Baseline, Stoppschwelle, Segmentregeln und Entscheidungslogik vor der Optimierung festlegen.

  4. Überprüfen

    Überprüfen

    Primär- und Gegenmetriken gemeinsam auswerten und unbekannte Nebenwirkungen nachtragen.

Nach Fehlanreizen, Segmentverschiebungen oder neuen Wirkpfaden das Set anpassen und historische Definitionen erhalten.

Geeignet, wenn

Geeignet für Experimente und KPI-Steuerung mit Optimierungsrisiken. Sie ersetzen keine ethische oder rechtliche Prüfung.

Ideal für

  • Wachstumsteams mit Experimentation
  • OKR-Begleitung
  • Plattform-Teams

Nicht gut für

  • Sehr frühe Prototypen ohne Datenpipeline

Ergebnisse

  • Counter-Metric-Vertrag

    Counter-Metric-Vertrag mit nachvollziehbaren Quellen, Annahmen und fachlichen Entscheidungen.

  • Entscheidungs- und Prüfspur

    Owner, Termine und nächste Prüfung für Counter-Metric-Vertrag.

Counter-Metric-Vertrag

Fiktives Arbeitsbeispiel

eine Primärmetrik mit expliziten Gegenhypothesen, Guardrails und Stoppschwellen als präzise Arbeitsstruktur mit fiktivem Beispiel.

Counter-Metric-Vertrag
EintragPrimärmetrikGegenhypotheseGegenmetrikGuardrailEntscheidung
Counter-Metric-VertragDurchgearbeitetes BeispielAbgeschlossene Reviews / gestartete Reviews; Ziel +10 %.Schnelle oberflächliche Abschlüsse steigen.Reviews <5 min / abgeschlossene Reviews pro Woche.Stop bei +2 pp; neue Teams separat.Rollout nur bei Primärziel ohne Guardrailverletzung.
  1. 1. Primärmetrik

    Counter-Metric-Vertrag
    Abgeschlossene Reviews / gestartete Reviews; Ziel +10 %.
  2. 2. Gegenhypothese

    Counter-Metric-Vertrag
    Schnelle oberflächliche Abschlüsse steigen.
  3. 3. Gegenmetrik

    Counter-Metric-Vertrag
    Reviews <5 min / abgeschlossene Reviews pro Woche.
  4. 4. Guardrail

    Counter-Metric-Vertrag
    Stop bei +2 pp; neue Teams separat.
  5. 5. Entscheidung

    Counter-Metric-Vertrag
    Rollout nur bei Primärziel ohne Guardrailverletzung.

Das Beispiel zeigt die Fachlogik von Counter Metrics; eigene Vorlagen bleiben leer.

Microsoft Experimentation Platform: Overall Evaluation Criterion

Erster Schritt

Beginne mit der Kernfrage: Welche relevante Verschlechterung könnte unsere Zielmetrik verdecken, und welche Gegenmetrik stoppt oder relativiert die Entscheidung?

Zur Methodenanleitung

Vertiefung

Zweck

Wenn eine Hauptmetrik Nebenwirkungen verdecken könnte, ergänzt sie Schutzsignale gegen unerwünschte Effekte. Sie macht Risiko im Wachstum oder in der Steuerung früh sichtbar.

Funktionsweise

Sie stellt der Leitmetrik passende Gegenanzeigen zur Seite und legt Schwellen für Warnsignale fest. So bleibt Optimierung an Qualität, Sicherheit oder Nutzererlebnis rückgebunden, wenn eine Hauptzahl allein falsche Anreize setzen würde.

Im Detail

Counter Metrics helfen, weil sie die Nebenwirkungen einer Zielmetrik sichtbar machen und damit einseitige Optimierung bremsen. Gute Nutzung fragt, welches unerwünschte Verhalten durch eine Erfolgskennzahl versehentlich belohnt werden könnte. So entsteht ein robusteres Steuerungsbild, das Fortschritt ernst nimmt und zugleich schützt, was durch aggressives Messen leicht beschädigt werden kann.

Durchführung

Lege die Primärmetrik offen und sammle gezielt Risiken, die bei starker Optimierung dieses Ziels plausibel auftreten könnten. Der klärende Augenblick liegt wenn eine Gegenmetrik nicht nur Vorsicht ausdrückt, sondern einen realen Schaden messbar macht. Am Ende genügt ein kleiner Satz aus Primär und Gegenmetriken, die gemeinsam gelesen werden sollen.

Die Methodenanleitung führt mit 4 Phasen, Zeitrahmen, 4 Stolperfallen und klaren Abbruchkriterien durch die Umsetzung.

Methodenanleitung öffnen

Deine Einschätzung

Hilft dir diese Methode für dein Vorhaben?

Mit deinem Feedback hilfst du, den Methodatlas weiterzuentwickeln.

Quellen und Themen

Themen
Artefakt-Vorlagen
Counter Metrics: ArbeitsvorlagePlane Counter Metrics entlang der fachlichen Schritte und der konkreten Entscheidungsfrage.
markdown

counter-metrics-working-template.md

Plane Counter Metrics entlang der fachlichen Schritte und der konkreten Entscheidungsfrage.

Counter Metrics: Arbeitsvorlage

Fragestellung

Noch zu klären

Gewünschtes Ergebnis

Noch zu klären

Rahmen

Praxis einrichten und überprüfen Zeit: 45–60 Minuten initial; je Experiment prüfen

Diese Vorlage während der Arbeit auf Papier oder in einem eigenen Dokument ausfüllen.

Vorbereitung für diesen Umfang

Methodische Grundausstattung

  • Materialien: Primärmetrik und Entscheidung, potenzielle Nebenwirkungen, Segment- und Systemdaten, gemeinsame Arbeitsfläche, Quellenlinks und Entscheidungslog.
  • Rollen: Product · Analytics · betroffene Fachrollen · Risk/Compliance
  • Vorab-Infos: Primärmetrik und Entscheidung, potenzielle Nebenwirkungen, Segment- und Systemdaten vorab zusammentragen und offene Annahmen markieren.
  • Gesamter Zeitbedarf: 45–60 Minuten initial; je Experiment prüfen
  • Setup: eine Primärmetrik mit expliziten Gegenhypothesen, Guardrails und Stoppschwellen sichtbar vorbereiten und Bewertungsbegriffe vor Beginn kalibrieren.

Für die Arbeitsschritte bereitstellen

Risiken: Gegenhypothesen

  • Primärmetrik und Entscheidung
  • potenzielle Nebenwirkungen
  • Segment- und Systemdaten

Gegenmetriken: Gegenmetriken

  • Schadenshypothesen
  • potenzielle Nebenwirkungen
  • Segment- und Systemdaten

Schwellen: Schwellen

  • Metrikverträge
  • potenzielle Nebenwirkungen
  • Segment- und Systemdaten

Überprüfen: Überprüfen

  • Guardrail-Regel
  • potenzielle Nebenwirkungen
  • Segment- und Systemdaten

Counter-Metric-Vertrag

EintragZiel · Formel · gewünschte ÄnderungMöglicher Schaden und WirkpfadFormel · Population · FensterBaseline · Stoppschwelle · SegmentPrimär + Counter · Handlung
Counter-Metric-Vertrag
  • Counter-Metric-Vertrag: Durchgearbeitetes Beispiel

Nur reale Angaben, Quellen und Entscheidungen eintragen.

Microsoft Experimentation Platform: Overall Evaluation Criterion

Risiken: Gegenhypothesen

Erwartetes Artefakt: Schadenshypothesen

Schadenshypothesen · Quelle · Unsicherheit · nächster Entscheid

Eintrag:

...

  • Ist der Wirkpfad von Optimierung zu Schaden nachvollziehbar?

Gegenmetriken: Gegenmetriken

Erwartetes Artefakt: Metrikverträge

Metrikverträge · Quelle · Unsicherheit · nächster Entscheid

Eintrag:

...

  • Misst die Gegenmetrik den Schaden oder nur ein bequemes Proxy?

Schwellen: Schwellen

Erwartetes Artefakt: Guardrail-Regel

Guardrail-Regel · Quelle · Unsicherheit · nächster Entscheid

Eintrag:

...

  • Ist klar, wann ein positives Hauptergebnis trotzdem abgelehnt wird?

Überprüfen: Überprüfen

Erwartetes Artefakt: Ausgewogene Entscheidung

Ausgewogene Entscheidung · Quelle · Unsicherheit · nächster Entscheid

Eintrag:

...

  • Sind Segment- und Langzeiteffekte berücksichtigt?

Offene Fragen und nächste Schritte

...

Methodenanleitung: https://methodatlas.meierhoff-systems.de/de/methods/counter-metrics/run-sheet

Alternativen und Nachbarn

Passende Alternativen mit Entscheidungshilfe, danach weitere verwandte Methoden.

Alle Methoden
Rahmenbedingungen und Herkunft
NiedrigWorkshop + Async30-60 min

Steckbrief

Methodenform
Entscheidungsmethode
Teilnehmende
2-6
Zeit
30-60 min
Reifegrad
Established
Ursprung
Experimentation Platform Community
Arbeitsfläche für A/B Testing: Frage, Beobachtungen und nächste Entscheidung sind sichtbar.
Als Nächstes: A/B Testing