Zurück zum Playbook
Define & DesignDD-15
Ein Adoption-Experiment durchführen
Definiert das Experiment vorab und schützt seine Interpretation vor Kontamination, unzureichender Evidenz und ergebnisgetriebenen Metrikänderungen.
ProduktstatusUnterstützter AblaufTeklens gestaltet und bewertet das Experiment; die Durchführung in Produktion ist eine separat autorisierte Handlung eures Teams.
Input3 benötigte InputsAdoptionsänderung und Verhaltenshypothese · Baseline-Funnel, berechtigter Traffic und Instrumentierungsqualität · Fokus der Initiative und freigegebene Product-Brain-Leitlinien
SkillsDesign or assess an adoption experiment · Prepare task context · Review an artifact against agreed criteriaResearcher + Product Researcher Agent
ErgebnisAdoption-Experiment: Hypothese und Design, Messgrössen und Prüfungen, Machbarkeit und Analyseplan, danach Ergebnisse und Entscheid.Artefakt: Adoption-Experiment
Owner
Researcher
Mensch führt
Beteiligte · Agents
Product ManagerData AnalystEngineerProduct Researcher Agent
Auslöser
Eine vorgeschlagene Adoptionsänderung kommt mit einer Verhaltenshypothese.
Benötigter Kontext
Product BrainAdoptionsänderung und VerhaltenshypotheseAnalyticsBaseline-Funnel, berechtigter Traffic und InstrumentierungsqualitätProduct BrainFokus der Initiative und freigegebene Product-Brain-Leitlinien
Optionaler Kontext
Product BrainMetrikdefinitionenFilesTatsächliche Ergebnisse
Skills
Design or assess an adoption experimentPrepare task contextReview an artifact against agreed criteria
Vorgeschlagener Gesprächsbogen
- 1Die Adoptionshypothese vereinbarenDie erwartete Verhaltensänderung und ihren Mechanismus, das primäre Outcome, die Guardrails und den Effekt benennen, der den Entscheid ändern würde.Skills: Prepare task context
- 2Einen vertrauenswürdigen Vergleich gestaltenBerechtigung, Randomisierungseinheit, Spillover durch Zusammenarbeit, Machbarkeit der Stichprobe, Messprüfungen und Analyseplan vor dem Start festlegen. Unzureichenden Traffic markieren.Skills: Design or assess an adoption experiment
- 3Experiment-Evidenz sammelnNach separat autorisierter Durchführung tatsächliche Exposition, Outcomes, Guardrails und Qualitätsprüfungen gemäss Plan sammeln; Abweichungen festhalten und keine Ergebnisse für nicht durchgeführte Experimente behaupten.
- 4Aus Outcomes und Unsicherheit entscheidenOutcomes zusammen mit Guardrails und Unsicherheit interpretieren, ohne die Hypothese nach den Ergebnissen zu ändern. Annehmen, überarbeiten, ablehnen oder unklar mit Begründung festhalten.Skills: Design or assess an adoption experiment · Review an artifact against agreed criteria
Ergebnis
Adoption-Experiment: Hypothese und Design, Messgrössen und Prüfungen, Machbarkeit und Analyseplan, danach Ergebnisse und Entscheid.
Artefakte
Erstellt: Adoption-Experiment
So sieht gut aus
- Vergleichsdesign und Analyseannahmen sind explizit.
- Aussagen zu Effekten oder Unsicherheit stützen sich auf echte Daten.
- Unzureichender Traffic oder ungültige Messung verhindert eine Gewinner-Aussage.
Freigabe
Der Product Manager hält gegen den vorab vereinbarten Plan fest: annehmen, überarbeiten, ablehnen oder unklar.
Ziel
Product BrainNur Teklens
Meist als Nächstes
Menschen und Agents arbeiten mit demselben Product Brain. Der Owner bleibt verantwortlich. Zugewiesene Agents bereiten vor und prüfen. Ein benannter Mensch gibt an der Freigabe frei.
Wähl den Einstieg, der zu deiner Rolle passt.
Leg mit uns die Product-AI-Richtung fest oder teste das gemeinsame Product Brain mit Jira und Code an echter Arbeit.