/research-analysis
/research-analysis — पूर्व-पंजीकृत योजना के अनुसार कच्चे डेटा का विश्लेषण करता है: नियोजित परीक्षण, विश्वास अंतराल सहित प्रभाव आकार, सुदृढ़ता जाँच, और उद्घाटित विचलन।
भूमिका: प्रधान अन्वेषक (विश्लेषण) पाइपलाइन स्थिति: शृंखला-मध्य
पूर्व-पंजीकृत योजना के अनुसार कच्चे डेटा का विश्लेषण करता है — विश्लेषण की स्वतंत्र इकाई पर नियोजित सांख्यिकीय परीक्षण चलाता है, विश्वास अंतराल सहित प्रभाव आकार रिपोर्ट करता है (बायेसियन योजना के अंतर्गत विश्वसनीय अंतराल; केवल p-मान नहीं), जहाँ लागू हो वहाँ बहु-तुलना सुधार लागू करता है, बताता है कि अनुपस्थित डेटा को कैसे संभाला गया, सुदृढ़ता / संवेदनशीलता जाँच चलाता है, और पूर्व-पंजीकरण से प्रत्येक विचलन को उद्घाटित करता है।
विहित आह्वान
/research-analysisतर्कों के साथ:
/research-analysis [--suite-name NAME] [--override] [--correction METHOD] [--alpha LEVEL]इनपुट
प्रयोग चरण द्वारा अभिलेखित, होस्ट-स्वाभाविक स्थान पर कच्चा डेटा, साथ ही _inputs/preregistration.md (जमी हुई विश्लेषण योजना)।
आउटपुट
_outputs/analysis.md (प्रभाव आकार, विश्वास अंतराल, विश्लेषण की इकाई, और प्रत्येक प्रमुख परिणाम के लिए प्रति-क्षेत्र पूर्वाग्रह निर्णय सहित पूर्व-पंजीकृत परीक्षण; बहु-तुलना सुधार; अनुपस्थित-डेटा प्रबंधन; सुदृढ़ता जाँच; और उद्घाटित विचलन) ＋ होस्ट-स्वाभाविक स्थान पर आकृतियाँ / तालिकाएँ।
अनुप्रवाह
/research-paper (अनुप्रवाह उपभोक्ता)
कार्यप्रवाह चरण
यह कमांड मानक /research पाइपलाइन कार्यप्रवाह का अनुसरण करता है:
- संदर्भ लोड करें — कच्चे डेटा और पूर्व-पंजीकरण को पढ़ें।
- अनुक्रम द्वार सत्यापित करें — पुष्टि करें कि प्रयोग आउटपुट मौजूद हैं; अन्यथा
Blocked: run /research-experiment firstके साथ रुकें। - विश्लेषण करें — विश्लेषण की स्वतंत्र इकाई पर पूर्व-पंजीकृत परीक्षण चलाएँ; मान्यताओं का निदान करें पर निदानों को परीक्षण चुनने न दें; प्रभाव आकार ＋ विश्वास अंतराल रिपोर्ट करें; बहु-तुलना के लिए सुधार करें; अनुपस्थित-डेटा प्रबंधन बताएँ; सुदृढ़ता / संवेदनशीलता जाँच चलाएँ।
- विचलन उद्घाटित करें — पूर्व-पंजीकृत योजना से प्रत्येक प्रस्थान को अभिलेखित करें। पूर्व-पंजीकरण द्वारा नामित किसी विकल्प पर जाना एक नियोजित अनुकूलन के रूप में दर्ज किया जाता है; कोई भी अन्य प्रतिस्थापन एक विचलन है।
- हैंडऑफ़ मैनिफ़ेस्ट अद्यतन करें — विश्लेषण पथ और आकृतियाँ / तालिकाएँ अभिलेखित करें।
- विश्लेषण उत्सर्जित करें —
_outputs/analysis.md＋ आकृतियाँ / तालिकाएँ।
सांख्यिकीय अनुशासन
- परीक्षण डिज़ाइन का अनुसरण करता है। पूर्व-पंजीकृत प्राथमिक परीक्षण तब तक बना रहता है जब तक पूर्व-पंजीकरण का अपना विकल्प-ट्रिगर सक्रिय न हो; जो स्क्रीनिंग परीक्षण अस्वीकार करने में विफल रहता है, वह यह नहीं दिखाता कि कोई मान्यता सही है।
- n स्वतंत्र इकाइयों को गिनता है। बार-बार के माप, उप-नमूने, समूह, और सीड इकाई तक समेकित किए जाते हैं या निर्भरता के रूप में मॉडल किए जाते हैं, कभी स्वतंत्र प्रतिकृतियों के रूप में नहीं गिने जाते।
- शून्य परिणाम को तीन तरह से पढ़ा जाता है। प्रभाव-आकार अंतराल, रुचि के सबसे छोटे प्रभाव के विरुद्ध तुल्यता परिणाम, और एक संवेदनशीलता कथन (प्राप्त विश्लेषित n पर पता लगाने योग्य सबसे छोटा प्रभाव) एक साथ रिपोर्ट किए जाते हैं। प्रेक्षित प्रभाव से गणना किया गया सामर्थ्य कभी रिपोर्ट नहीं किया जाता।
- बायेसियन योजनाएँ उनकी अपनी शर्तों पर। पूर्व-पंजीकृत बायेसियन योजना अपने विश्वसनीय अंतराल सहित पश्च सारांश रिपोर्ट करती है, किसी भी पश्च के रिपोर्ट होने से पहले पूर्व-संवेदनशीलता, संगणन-निदान, और पश्च-पूर्वानुमान जाँच चलाती है, और शून्य परिणामों के लिए पूर्व-निर्धारित व्यावहारिक-तुल्यता क्षेत्र का उपयोग करती है।
- परिणाम-स्तरीय पूर्वाग्रह और आकृतियाँ। प्रत्येक प्रमुख परिणाम प्रति क्षेत्र low / some-concerns / high निर्णय वहन करता है, जो डिज़ाइन की वैधता-के-ख़तरों की बही से आरंभ होता है और कभी एक अंक में जोड़ा नहीं जाता, और हर आकृति एन्कोडिंग, अनिश्चितता-प्रकटीकरण, और सुगम्यता की निचली सीमा को पूरा करती है।
कठोरता की निचली सीमा
स्टोकैस्टिक विधि प्रति उदाहरण या स्थिति कम से कम तीस स्वतंत्र पुनरावृत्तियों के लिए चलाई जाती है, और जब पुनरावृत्तियों के बीच फैलाव परीक्षित अंतरों की तुलना में बड़ा हो तो उससे अधिक, जब तक सारांश आँकड़े स्थिर न हो जाएँ। इसके परिणाम पुनरावृत्तियों में सर्वोत्तम, माध्य, माध्यिका, मानक विचलन और सबसे ख़राब के रूप में रिपोर्ट किए जाते हैं, अभिसरण वक्रों और वितरण आलेखों के साथ। तुलनाएँ अप्राचलिक परीक्षणों का उपयोग करती हैं — जोड़ीदार तुलना के लिए एक युग्मित चिह्नित-रैंक परीक्षण, और विधियों के आर-पार पश्च-तदर्थ सुधार वाला एक समग्र रैंक परीक्षण — जिन्हें एक स्टोकैस्टिक-श्रेष्ठता प्रभाव आकार और एक क्रांतिक-अंतर आरेख के साथ रिपोर्ट किया जाता है। कोई परिणाम शोधपत्र तक तभी पहुँचता है जब वह उन्नति द्वार को पार करता है: वह अपने तुलनित्रों को प्रत्ययकारी और सार्थक रूप से पछाड़ता है, और यह उत्तीर्णता एक अंकेक्षण-योग्य रनबुक में दर्ज होती है।
विफलता मोड
| लक्षण | कारण | पुनर्प्राप्ति |
|---|---|---|
| Blocked: run /research-experiment first | कोई कच्चा डेटा नहीं | डेटा ＋ लॉग उत्पन्न करने के लिए /research-experiment चलाएँ |
| प्रभाव आकार के बिना p-मान रिपोर्ट किया गया | अपूर्ण सांख्यिकीय रिपोर्टिंग | प्रभाव आकार ＋ विश्वास अंतराल रिपोर्ट करें |
| निर्भर प्रेक्षणों को प्रतिकृतियों के रूप में गिना गया | बार-बार के माप, उप-नमूने, समूह, या सीड को स्वतंत्र माना गया | स्वतंत्र इकाई तक समेकित करें या निर्भरता को मॉडल करें; n इकाइयों को गिनता है |
| शून्य परिणाम के लिए प्रेक्षित सामर्थ्य रिपोर्ट किया गया | प्रेक्षित प्रभाव से सामर्थ्य की गणना की गई | उसे हटाएँ; अंतराल, तुल्यता परिणाम, और संवेदनशीलता कथन रिपोर्ट करें |
| अनुद्घाटित विश्लेषण विचलन | योजना चुपचाप विचलित हुई | पूर्व-पंजीकरण के विरुद्ध विचलन उद्घाटित करें |
उदाहरण
# पूर्व-पंजीकृत योजना के अनुसार कच्चे डेटा का विश्लेषण करें
/research-analysis --suite-name my-studyपरस्पर संदर्भ
/research-experiment
/research-experiment — डिज़ाइन किए गए अध्ययन को निष्पादित करता है और पूर्ण उद्गम के साथ कच्चा डेटा कैप्चर करता है, साथ ही एक पुनरुत्पादनीयता मैनिफ़ेस्ट (एनवायरनमेंट, सीड, प्रोटोकॉल, वर्शन पिन)।
/research-paper
/research-paper — संश्लेषण, डिज़ाइन और विश्लेषण से एक शीर्ष-स्तरीय शोधपत्र मसौदा (सार से निष्कर्ष तक और संदर्भ सहित) इकट्ठा करता है, जिसमें हर उद्धरण के हल होने की पुष्टि की जाती है।