/research-design

Rolle: Leitende:r Forscher:in (Studiendesign) Pipeline-Position: Mitte der Kette

Operationalisiert die Hypothesen zu testbaren Vorhersagen und entwirft die Studie oder das Experiment — Variablen, Kontrollbedingungen, experimentelle Einheit, Zuteilung und Verblindung, Stichprobe, Instrumente, Teststärkeanalyse, Bedrohungen der Validität — und erstellt dann eine Präregistrierung, die den Analyseplan vor der Datenerhebung einfriert.

Kanonischer AufrufCopy Anchor Link

/research-design

Mit Argumenten:

/research-design [--suite-name NAME]

EingabenCopy Anchor Link

_inputs/proposal.md (der Plan von Bestand aus /research-proposal, dem Vorgängerschritt), _inputs/synthesis.md (die SOTA-Karte + die Lückenaussage) und _spec/research-spec.md (die Hypothesen).

AusgabenCopy Anchor Link

_inputs/study-design.md (operationalisierte Vorhersagen, Variablenspezifikation, Kontrollbedingungen, experimentelle Einheit, Zuteilungs- und Verblindungsplan, Stichprobe, Instrumente, Teststärkeanalyse, Bedrohungen der Validität) + _inputs/preregistration.md (der eingefrorene Analyseplan, einschließlich der Kontrollbedingungen mit ihren Bestehenskriterien, des Zuteilungs- und Verblindungsplans, des Umgangs mit fehlenden Ergebnissen und etwaiger Zwischenauswertungen).

NachgelagertCopy Anchor Link

/research-experiment (nachgelagerter Konsument)

Workflow-PhasenCopy Anchor Link

Der Befehl folgt dem Standard-Workflow der /research-Pipeline:

1. Kontext laden — Die Synthese und die Hypothesen der Spezifikation lesen.
2. Das Sequenz-Gate prüfen — Bestätigen, dass _inputs/proposal.md (und die vorgelagerten _inputs/synthesis.md und _spec/research-spec.md) existiert; andernfalls mit Blocked: run /research-proposal first anhalten.
3. Die Studie entwerfen — Vorhersagen operationalisieren; Variablen, Kontrollbedingungen und Instrumente spezifizieren; die experimentelle Einheit, die geseedete Zuteilung, den Verblindungsplan und die Durchlaufreihenfolge festlegen; die Stichprobe für die geplante Analyse bemessen; Bedrohungen der Validität aufzählen.
4. Präregistrieren — Den Analyseplan, die Kontrollbedingungen, die Zuteilung und die Verblindung vor jeglicher Datenerhebung einfrieren.
5. Das Übergabe-Manifest aktualisieren — Die Pfade von Studiendesign und Präregistrierung erfassen.
6. Das Design ausgeben — _inputs/study-design.md + _inputs/preregistration.md.

Struktur und BemessungCopy Anchor Link

• Die Struktur wird im Design festgelegt, nicht in der Analyse. Das Design benennt die experimentelle Einheit und die Analyseeinheit, das Zuteilungsverfahren mit seinem geseedeten Plan und, wenn Einheiten nacheinander aufgenommen werden, dessen Verdeckung, wer verblindet ist (oder warum Verblindung nicht möglich ist), die Störfaktoren und wie jeder geblockt, randomisiert oder konstant gehalten wird, sowie die Durchlaufreihenfolge. Es plant den Vergleichsarm sowie die Positiv- und Negativkontrollen, die das Experiment ausführen wird. Eine nach dem Einfrieren hinzugefügte Kontrolle ist eine offengelegte Abweichung.
• Ein-Faktor-Sweeps können keine Wechselwirkung zeigen. Wo vermutet wird, dass Komponenten oder Parameter wechselwirken, ergänzt das Design ein gemeinsames Layout über die verdächtige Menge und präregistriert die Wechselwirkung, die es behauptet.
• Der kleinste interessierende Effekt stammt aus der Spezifikation. Er geht auf die Erfolgsmetriken der Spezifikation oder auf eine Schwelle praktischer Bedeutsamkeit zurück, die die Synthese begründet. Der berichtete Effekt einer früheren Studie begrenzt den plausiblen Bereich und tritt nie an die Stelle des kleinsten interessierenden Effekts.
• Für die Analyse bemessen, die laufen wird. Das Ziel jeder primären Behauptung (Überlegenheit, Nicht-Unterlegenheit oder Äquivalenz) und ihre Seitigkeit werden im Design festgelegt, und jede wird bei ihrem eigenen kleinsten interessierenden Effekt auf die Teststärke hin ausgelegt, und zwar bei der Schwelle pro Test, die die deklarierte Korrektur übrig lässt. Das erforderliche N wird als Bereich über den plausiblen Effekt berichtet; wenn die Machbarkeit N begrenzt, wird der kleinste nachweisbare Effekt bei diesem N berichtet und der kleinste interessierende Effekt als nicht ausreichend teststark angegeben.
• Zuschläge und Simulation. N zählt unabhängige Einheiten und wird für die Korrelation innerhalb von Clustern erhöht; das Erhebungsziel ergibt sich aus dem analysierten N über eine festgehaltene Ausfallrate. Wo keine geschlossene Formel zur geplanten Analyse passt, wird die Teststärke per Simulation geschätzt, wobei Werkzeug, Version, Seed und Monte-Carlo-Fehler festgehalten werden, und eine sequenzielle Regel legt ihre Anzahl an Zwischenauswertungen und ihre Grenze in der Präregistrierung fest.

RigorositätsuntergrenzeCopy Anchor Link

Für eine vergleichstragende Studie legt das Design die empirische Untergrenze fest und präregistriert sie: ein einheitliches Budget über alle verglichenen Methoden hinweg (gleiche Wall-Clock-Zeit und, wo sinnvoll, gleiche Auswertungsanzahl), mindestens dreißig Wiederholungen pro Instanz für stochastische Methoden, ein Ablationsfaktor, der jeweils eine Komponente deaktiviert, Sensitivitäts-Sweeps über jeden Parameter und eine automatisierte Konfiguration auf einem Trainings-Split, ausgewertet auf einem disjunkten Test-Split. Die Tiefe der Untergrenze skaliert mit dem Anspruch des Zielorts der Veröffentlichung.

FehlermodiCopy Anchor Link

BeispieleCopy Anchor Link

# Studie entwerfen und den Analyseplan präregistrieren
/research-design --suite-name <name>

QuerverweiseCopy Anchor Link

• Pipeline-Überblick
• Befehlsreferenz