Yaklaşık 350 Kayıt, 350 Hasta Değildir: İlk Sayıların Raporlanması

Bir hastanedeki ön saflar programının birkaç haftalık sürecinde, ilk ilerleme raporu yönetim kuruluna sunuldu. Rapor, yaklaşık 350 takip edilen kayıt ve %54'lük bir oran gösteriyordu. Her iki sayı da gerçekti. Ancak her ikisi de tek bir bakışta yanlış anlaşılabilirdi.

Bir yönetim kurulu üyesi "350" rakamını görür ve 350 hasta olduğunu düşünür. Ya da 350 başarı. %54'lük bir oran, "program yolun yarısına geldi" gibi görünür. Bunların hiçbiri doğru değildi ve rapor aynı sayfada bunu açıkça belirtiyordu: kayıtlar bir hasta sayısı veya başarı sayısı değildi; oran ise programın ilerlemesini değil, kayıtları tanımlıyordu.

İddiadan önce kanıtla başlarız. Erken veriler, bu kuralın en çok test edildiği yerdir; çünkü herkes iyi haber almak ister ve sayılar henüz küçüktür.

Sayılar neden sapar?

1979 yılında sosyal bilimci Donald Campbell bu sorunu tek bir cümleyle özetledi: "Herhangi bir nicel sosyal gösterge sosyal karar alma süreçlerinde ne kadar çok kullanılırsa, manipülasyon baskılarına o kadar açık hale gelir ve izlemesi amaçlanan sosyal süreçleri çarpıtma ve bozma eğilimi o kadar artar." Bunun gerçekleşmesi için kimsenin yalan söylemesine gerek yoktur. Yönetim kurulunun kutladığı bir sayı, insanların üretmeye çalıştığı bir sayıya dönüşür.

Birleşik Krallık'ın resmi istatistikler için hazırlanan İstatistik Uygulama Kodu, her kurumun ödünç alabileceği üç fikre dayanır: güvenilirlik, kalite ve değer. Kalite, bir rakamın neyi ölçtüğü ve ne kadar emin olduğunuz konusunda net olmayı içerir. Bu kod hükümet istatistikçileri için tasarlanmıştır; ancak tanımladığı alışkanlık bir servis raporu için de aynı derecede uygundur.

İlk rapor için altı kural

• Birimi tanımlayın. Bir kaydın ne olduğunu söyleyin. "Bir koordinatörün bir durum hakkındaki tek bir gözlemi" bir birimdir. "Etkileşimler" bir birim değildir.
• Her kaynağı yalnızca bir kez sayın. Aynı an, iki farklı kişi veya iki farklı yer tarafından iki kez kaydedilse bile, bu hala tek bir andır. Saymadan önce verileri birleştirin.
• Her orana bir payda verin. Bir yüzde, mantıklı bir temele ihtiyaç duyar. Yüzde elli dört; neyin, hangi haftalarda, kimden? Eğer temel istikrarsızsa, bunun yerine sayıyı gösterin.
• Boş bir hafta "mevcut değil"dir. Veri olmaması, sıfır olmasıyla aynı şey değildir. Hiç gözlem yapılmamış bir hafta, kimsenin bakmadığı veya kayıtların ulaşmadığı anlamına gelir. Bunu yazın ve grafikte o satırı boş bırakın.
• Geri getirilenleri işaretleyin. Eski kayıtlar sisteme geri getirildiğinde, bunları "geri getirildi" olarak etiketleyin. Okuyucular, hangi sayıların canlı olarak kaydedildiğini, hangilerinin daha sonra yeniden oluşturulduğunu bilmelidir.
• Neden değil, bir dizi gösterin. Tarihli müdahaleleri, sonuçlarla aynı zaman çizelgesine yerleştirin. Örneğin, "Rehber 5. haftada revize edildi; 6. haftadan itibaren daha net yön bulma daha sık kaydedildi" ifadesi dürüst bir yaklaşımdır. "Rehber yön bulma netliğini artırdı" ifadesi ise verilerin taşıyamayacağı bir iddiadır.

Hedefler sonuç değildir

Ön saflar hizmeti için sekiz haftalık bir program şu tür hedefler belirleyebilir: 4. haftaya kadar gözlemlenen durumların %60'ında, 8. haftaya kadar %75'inde ilk temas noktasından itibaren net yön bulma; ziyaretçilerin %60'ının, ardından %70'inin yanıtsız bırakılmaması; bir gecikme sırasında ziyaretçilerin %50'sinin, ardından %60'ının bilgilendirilmesi. Vardiyalar arasında dağıtılmış, haftalık en az 20 durumdan oluşan bir örneklem, temel verilerin çok küçük bir sayıya düşmesini engeller.

Bunlar hedeflerdir. Grafikte bunları bir çizgi olarak gösterin ve yanlarına gözlemlenenleri ekleyin. İkisi farklı olduğunda, aradaki fark bulgudur.

Rakamın yanına ne yazılmalı?

Erken verilerin altına eklenecek üç kısa satır, çoğu yanlış okumayı önler.

• Tek bir cümleyle neyi saydığı.
• Neyi saymadığı.
• Okumamızı neyin değiştireceği.

Bu yöntem daha yavaş hissettirebilir. Ancak bir yönetim kurulu üyesi toplantıda "350 hastaya yardım edildi" dediğinde, kaybedilen güveni geri kazanmaya çalışmaktan çok daha hızlıdır.

Reflection erken verileri nasıl dürüst tutar?

Reflection, bu kuralları tasarım gereği takip eder. Her kaynak bir kez sayılır, bir oran yalnızca geçerli bir payda ile gösterilir, boş bir hafta mevcut değil olarak görünür, geri getirilen kayıtlar işaretlenir ve müdahaleler sonuçların yanında tarihli bir dizi olarak görünür. Ekip verileri yalnızca beş veya daha fazla kişilik gruplar için gösterilir. İnsanlar sayıları okur ve ne anlama geldiklerine kendileri karar verir.

Kaynaklar

1. Assessing the Impact of Planned Social Change. Evaluation and Program Planning, 1979.
2. Code of Practice for Statistics. UK Statistics Authority, 2018.

Yorumlar

AdınızYorumunuz

Yorumlar ekibimiz tarafından incelendikten sonra görünür. Lütfen hastaların veya meslektaşlarınızın kişisel bilgilerini paylaşmayın.

Yorum yap