بیش از حد بزرگ‌نمایی اولین اعداد یک برنامه بهبود آسان است. شش قاعده‌ای که برای گزارش صادقانه آن‌ها به کار می‌بریم و پژوهشی درباره علت تغییرات آماری.
ابراهیم الکوبییسی · · زمان مطالعه: 6 دقیقه ·
Some weeks into a frontline programme in a hospital, the first progress report went to the board. It showed about 350 tracked records and one rate of 54%. Both numbers were real. Both could have been read the wrong way in a single glance.
A board member sees "350" and thinks 350 patients. Or 350 successes. A rate of 54% looks like "the programme is halfway there". None of that was true, and the report said so on the same page: the records were not a patient count, not a success count, and the rate described the records, not the programme's progress.
ما پیش از ادعا، از اثبات شروع می‌کنیم. اعداد اولیه جایی هستند که این قاعده سخت‌ترین آزمون خود را می‌گذراند؛ زیرا همه خواهان اخبار خوب هستند و اعداد نیز کوچک‌اند.
چرا اعداد تغییر شکل می‌دهند
In 1979 the social scientist Donald Campbell put the problem in one sentence: "The more any quantitative social indicator is used for social decision-making, the more subject it will be to corruption pressures and the more apt it will be to distort and corrupt the social processes it was intended to monitor." Nobody has to lie for this to happen. A count that the board celebrates becomes a count people produce.
کد تمرین آمار در بریتانیا که برای آمارهای رسمی نوشته شده، بر سه اصل استوار است که هر سازمانی می‌تواند از آن‌ها بهره بگیرد: اعتماد، کیفیت و ارزش. کیفیت شامل شفافیت در مورد اینکه یک عدد چه چیزی را اندازه‌گیری می‌کند و چقدر از آن اطمینان دارید، می‌شود. این کد برای آمارشناسان دولتی طراحی شده، اما عادتی که توصیف می‌کند، برای گزارش‌های بخش‌های بیمارستانی نیز به همان اندازه مناسب است.
شش قانون برای اولین گزارش
- واحد را مشخص کنید. بگویید یک رکورد چیست. «یک مشاهده توسط یک هماهنگ‌کننده درباره یک موقعیت» یک واحد است، اما «تعاملات» واحد نیست.
- هر منبع را فقط یک بار بشمارید. اگر یک لحظه توسط دو نفر یا در دو مکان، دو بار ثبت شود، باز هم همان یک لحظه است. قبل از شمارش، داده‌ها را ادغام کنید.
- برای هر نرخ، مخرج کسر تعیین کنید. یک درصد به پایه‌ای نیاز دارد که منطقی باشد. ۵۴ درصد از چه چیزی، در کدام هفته‌ها و از چه کسانی؟ اگر پایه ناپایدار است، به جای آن تعداد را نشان دهید.
- یک هفتهٔ خالی «در دسترس نیست» است. نبودِ داده با صفر بودن متفاوت است. هفته‌ای که هیچ مشاهده‌ای نداشته، به این معناست که کسی بررسی نکرده یا رکوردها نرسیده‌اند. این را بنویسید و خط مربوطه را در نمودار خالی بگذارید.
- موارد بازیابی‌شده را مشخص کنید. وقتی رکوردهای قدیمی به سیستم بازگردانده می‌شوند، آن‌ها را با برچسب «بازیابی‌شده» مشخص کنید. خوانندگان باید بدانند کدام اعداد به‌صورت زنده ثبت شده‌اند و کدام‌ها بعداً بازسازی شده‌اند.
- Show a sequence, not a cause. Put dated interventions on the same timeline as the results. For example, "The guide was revised in week 5; clearer wayfinding was recorded more often from week 6" is honest. "The guide raised wayfinding clarity" is a claim the data cannot carry.
هدف‌ها، نتیجه نیستند
An eight-week programme for frontline service might set targets like these: clear wayfinding from the first point of contact in 60% of observed situations by week 4 and 75% by week 8; no visitor left without an answer in 60%, then 70%; a visitor updated during a delay in 50%, then 60%. A weekly sample of at least 20 situations, spread across shifts, keeps the base from shrinking to a handful.
این‌ها هدف هستند. آن‌ها را به صورت یک خط در نمودار قرار دهید و آنچه مشاهده شده است را در کنارشان بنویسید. وقتی این دو با هم تفاوت داشتند، آن تفاوت همان یافته است.
چه چیزی را کنار عدد بنویسیم؟
سه خط کوتاه زیر هر عدد اولیه، از بیشتر سوءبرداشت‌ها جلوگیری می‌کند.
- آنچه را می‌شمارد، در یک جمله.
- آنچه را که نمی‌شمارد.
- آنچه می‌تواند گزارش خوانش ما را تغییر دهد.
It feels slower. It is faster than repairing trust after a board member quotes "350 patients helped" in a meeting.
چگونه Reflection صداقت اعداد اولیه را حفظ می‌کند
Reflection به صورت ساختاری از این قوانین پیروی می‌کند. هر منبع یک بار شمرده می‌شود، نرخ‌ها فقط با یک مخرج معتبر نشان داده می‌شوند، هفته‌های خالی به عنوان «در دسترس نیست» نمایش داده می‌شوند، رکوردهای بازیابی‌شده مشخص می‌شوند و مداخلات به صورت یک توالی تاریخ‌دار در کنار نتایج ظاهر می‌شوند. ارقام تیمی تنها برای گروه‌های پنج نفره یا بیشتر نمایش داده می‌شوند. افراد اعداد را می‌خوانند و خودشان تصمیم می‌گیرند که معنای آن‌ها چیست.
منابع
- Assessing the Impact of Planned Social Change. Evaluation and Program Planning, 1979.
- Code of Practice for Statistics. UK Statistics Authority, 2018.
نظرات
ادغام شده در ROADYOM Reflection
بیشتر بدانید
