लगभग 350 रिकॉर्ड्स का मतलब 350 मरीज़ नहीं है: शुरुआती आंकड़ों की रिपोर्टिंग

अस्पताल के एक फ्रंटलाइन प्रोग्राम के कुछ हफ़्तों बाद, बोर्ड को पहली प्रोग्रेस रिपोर्ट भेजी गई। इसमें लगभग 350 ट्रैक किए गए रिकॉर्ड्स और 54% का एक रेट दिखाया गया था। दोनों नंबर वास्तविक थे। लेकिन एक नज़र में दोनों को गलत तरीके से पढ़ा जा सकता था।

बोर्ड का एक सदस्य "350" देखता है और सोचता है कि 350 मरीज़। या 350 सफलताएं। 54% का रेट ऐसा लगता है जैसे "प्रोग्राम आधा पूरा हो चुका है"। इनमें से कुछ भी सच नहीं था, और रिपोर्ट ने उसी पेज पर यह स्पष्ट भी किया था: रिकॉर्ड्स मरीज़ों की संख्या नहीं थे, न ही सफलता की गिनती, और रेट रिकॉर्ड्स का वर्णन कर रहा था, न कि प्रोग्राम की प्रगति का।

हम दावे से पहले प्रमाण से शुरुआत करते हैं। शुरुआती आंकड़ों में इस नियम की सबसे कठिन परीक्षा होती है, क्योंकि हर कोई अच्छी खबर चाहता है और आंकड़े छोटे होते हैं।

आंकड़े क्यों बदलते हैं

1979 में सामाजिक वैज्ञानिक Donald Campbell ने इस समस्या को एक वाक्य में समझाया था: "किसी भी मात्रात्मक सामाजिक संकेतक (quantitative social indicator) का सामाजिक निर्णय लेने के लिए जितना अधिक उपयोग किया जाएगा, वह भ्रष्टाचार के दबावों के प्रति उतना ही संवेदनशील होगा और उन सामाजिक प्रक्रियाओं को विकृत और भ्रष्ट करने के लिए उतना ही प्रवृत्त होगा जिनकी निगरानी के लिए इसे बनाया गया था।" ऐसा होने के लिए किसी को झूठ बोलने की ज़रूरत नहीं है। एक गिनती जिसका बोर्ड जश्न मनाता है, वह ऐसी गिनती बन जाती है जिसे लोग केवल दिखाने के लिए पैदा करते हैं।

UK का Code of Practice for Statistics, जो आधिकारिक आंकड़ों के लिए लिखा गया है, तीन विचारों पर आधारित है जिसे कोई भी संस्था अपना सकती है: भरोसा, गुणवत्ता और मूल्य। गुणवत्ता में यह स्पष्ट होना शामिल है कि कोई आंकड़ा क्या मापता है और आप उस पर कितने आश्वस्त हैं। यह कोड सरकारी सांख्यिकीविदों के लिए है। लेकिन इसमें बताए गए नियम एक वार्ड रिपोर्ट पर भी उतनी ही सटीकता से लागू होते हैं।

पहली रिपोर्ट के लिए छह नियम

• यूनिट का नाम बताएं। बताएं कि एक रिकॉर्ड क्या है। "एक समन्वयक द्वारा, एक स्थिति के बारे में किया गया एक अवलोकन" एक यूनिट है। "Interactions" यूनिट नहीं है।
• प्रत्येक स्रोत को केवल एक बार गिनें। यदि एक ही क्षण को दो लोगों द्वारा या दो स्थानों पर दो बार रिकॉर्ड किया जाता है, तो भी वह एक ही क्षण है। गिनती करने से पहले उन्हें मर्ज करें।
• हर रेट के साथ उसका आधार (denominator) दें। एक प्रतिशत को एक ऐसे आधार की आवश्यकता होती है जो तर्कसंगत हो। किस चीज़ का 54 प्रतिशत, किन हफ़्तों में, किससे? यदि आधार अस्थिर है, तो इसके बजाय गिनती दिखाएं।
• एक खाली हफ़्ता "उपलब्ध नहीं" है। डेटा का न होना और शून्य होना एक समान नहीं है। बिना किसी अवलोकन वाले हफ़्ते का मतलब है कि किसी ने देखा नहीं, या रिकॉर्ड नहीं पहुंचे। ऐसा ही लिखें, और चार्ट पर उस लाइन को खाली छोड़ दें।
• जो बहाल (restore) किया गया है उसे मार्क करें। जब पुराने रिकॉर्ड्स को सिस्टम में वापस लाया जाता है, तो उन्हें 'restored' लेबल दें। पाठकों को पता होना चाहिए कि कौन से नंबर लाइव रिकॉर्ड किए गए थे और कौन से बाद में फिर से बनाए गए थे।
• एक क्रम दिखाएं, कारण नहीं। दिनांकित हस्तक्षेपों (interventions) को परिणामों के साथ एक ही टाइमलाइन पर रखें। उदाहरण के लिए, "गाइड को सप्ताह 5 में संशोधित किया गया था; सप्ताह 6 से अधिक बार स्पष्ट रास्ता दिखाने (wayfinding) के रिकॉर्ड देखे गए" यह ईमानदार है। "गाइड ने रास्ता खोजने की स्पष्टता बढ़ा दी" एक ऐसा दावा है जिसे डेटा साबित नहीं कर सकता।

लक्ष्य (targets) परिणाम नहीं हैं

फ्रंटलाइन सेवा के आठ-हफ़्ते के प्रोग्राम के लिए ऐसे लक्ष्य निर्धारित किए जा सकते हैं: सप्ताह 4 तक देखे गए 60% मामलों में पहले संपर्क बिंदु से स्पष्ट रास्ता मिलना और सप्ताह 8 तक 75%; 60% मामलों में कोई भी आगंतुक बिना उत्तर के न छूटे, फिर 70%; देरी के दौरान 50% आगंतुकों को अपडेट करना, फिर 60%। शिफ्टों में फैले हुए कम से कम 20 स्थितियों का साप्ताहिक सैंपल, आधार को बहुत छोटा होने से रोकता है।

वे लक्ष्य हैं। उन्हें चार्ट पर एक लाइन के रूप में रखें, और उनके बगल में वह रखें जो वास्तव में देखा गया था। जब दोनों अलग हों, तो वह अंतर ही निष्कर्ष (finding) है।

नंबर के बगल में क्या लिखें

किसी भी शुरुआती आंकड़े के नीचे तीन छोटी लाइनें अधिकांश गलतफहमियों को रोक देती हैं।

• वह क्या गिनता है, एक वाक्य में।
• वह क्या नहीं गिनता है।
• क्या चीज़ हमारी रीडिंग को बदल सकती है।

यह प्रक्रिया धीमी लगती है। लेकिन यह उस भरोसे को सुधारने से कहीं तेज़ है जो तब टूट जाता है जब बोर्ड का कोई सदस्य मीटिंग में "350 मरीज़ों की मदद की" जैसे आंकड़े उद्धृत करता है।

Reflection शुरुआती आंकड़ों को ईमानदार कैसे रखता है

Reflection डिज़ाइन के अनुसार इन नियमों का पालन करता है। प्रत्येक स्रोत को एक बार गिना जाता है, रेट केवल एक वैध आधार के साथ दिखाया जाता है, एक खाली हफ़्ता 'उपलब्ध नहीं' के रूप में दिखता है, बहाल किए गए रिकॉर्ड्स को मार्क किया जाता है, और हस्तक्षेप परिणामों के बगल में एक दिनांकित क्रम के रूप में दिखाई देते हैं। टीम के आंकड़े केवल पांच या अधिक के समूहों के लिए ही दिखाए जाते हैं। लोग नंबर पढ़ते हैं और तय करते हैं कि उनका क्या मतलब है।

स्रोत

1. Assessing the Impact of Planned Social Change. Evaluation and Program Planning, 1979.
2. Code of Practice for Statistics. UK Statistics Authority, 2018.

कमेंट्स

आपका नामआपकी टिप्पणी

हमारी टीम द्वारा पढ़ने के बाद ही कमेंट्स दिखाई देंगे। कृपया मरीजों या सहकर्मियों का व्यक्तिगत विवरण शामिल न करें।

कमेंट पोस्ट करें