Cerca de 350 Registros Não São 350 Pacientes: Como Reportar Números Iniciais

Após algumas semanas de um programa de linha de frente em um hospital, o primeiro relatório de progresso foi enviado à diretoria. Ele mostrava cerca de 350 registros monitorados e uma taxa de 54%. Ambos os números eram reais. Ambos poderiam ter sido interpretados de forma errada em um único olhar.

Um membro da diretoria vê "350" e pensa em 350 pacientes. Ou 350 sucessos. Uma taxa de 54% parece dizer que "o programa está na metade do caminho". Nada disso era verdade, e o relatório dizia isso na mesma página: os registros não eram uma contagem de pacientes, nem de sucessos, e a taxa descrevia os registros, não o progresso do programa.

Começamos com a prova antes da afirmação. Os números iniciais são onde essa regra é testada com mais rigor, porque todos querem boas notícias e os números são pequenos.

Por que os números se curvam

Em 1979, o cientista social Donald Campbell resumiu o problema em uma frase: "Quanto mais qualquer indicador social quantitativo for usado para a tomada de decisões sociais, mais sujeito estará a pressões de corrupção e mais propenso a distorcer e corromper os processos sociais que pretendia monitorar." Ninguém precisa mentir para que isso aconteça. Uma contagem que a diretoria celebra torna-se uma contagem que as pessoas produzem.

O Código de Prática para Estatísticas do Reino Unido, escrito para estatísticas oficiais, baseia-se em três ideias que qualquer instituição pode adotar: confiança, qualidade e valor. A qualidade inclui ser claro sobre o que um dado mede e o quão seguro você está. O código é destinado a estatísticos governamentais. O hábito que ele descreve se aplica perfeitamente a um relatório de ala hospitalar.

Seis regras para o primeiro relatório

• Nomeie a unidade. Diga o que é um registro. "Uma observação feita por um coordenador sobre uma situação" é uma unidade. "Interações" não é.
• Conte cada fonte apenas uma vez. Se o mesmo momento for registrado duas vezes, por duas pessoas ou em dois lugares, ainda é um único momento. Consolide antes de contar.
• Dê a cada taxa o seu denominador. Uma porcentagem precisa de uma base que faça sentido. Cinquenta e quatro por cento de quê, em quais semanas, de quem? Se a base for instável, mostre a contagem em vez disso.
• Uma semana vazia é "não disponível". A ausência de dados não é o mesmo que zero. Uma semana sem observações significa que ninguém olhou ou que os registros não chegaram. Escreva isso e deixe a linha em branco no gráfico.
• Marque o que foi restaurado. Quando registros antigos são reintegrados a um sistema, rotule-os como restaurados. Os leitores devem saber quais números foram registrados ao vivo e quais foram reconstruídos posteriormente.
• Mostre uma sequência, não uma causa. Coloque intervenções datadas na mesma linha do tempo que os resultados. Por exemplo, "O guia foi revisado na semana 5; uma sinalização mais clara foi registrada com mais frequência a partir da semana 6" é honesto. "O guia aumentou a clareza da sinalização" é uma afirmação que os dados não podem sustentar.

Metas não são resultados

Um programa de oito semanas para um serviço de linha de frente pode estabelecer metas como estas: sinalização clara desde o primeiro contato em 60% das situações observadas até a semana 4 e 75% até a semana 8; nenhum visitante sem resposta em 60%, depois 70%; um visitante atualizado durante um atraso em 50%, depois 60%. Uma amostra semanal de pelo menos 20 situações, distribuída entre os turnos, evita que a base diminua para apenas alguns casos.

Essas são metas. Coloque-as no gráfico como uma linha e coloque o que foi observado ao lado delas. Quando os dois diferirem, a diferença é a constatação.

O que escrever ao lado do número

Três linhas curtas abaixo de qualquer número inicial evitam a maioria das interpretações erradas.

• O que ele conta, em uma frase.
• O que ele não conta.
• O que mudaria nossa leitura sobre ele.

Parece mais lento. Mas é mais rápido do que recuperar a Confiança após um membro da diretoria citar "350 pacientes ajudados" em uma reunião.

Como o Reflection mantém a honestidade dos números iniciais

Reflection segue essas regras por design. Cada fonte é contada uma vez, uma taxa é mostrada apenas com um denominador válido, uma semana vazia aparece como não disponível, registros restaurados são marcados e as intervenções aparecem como uma sequência datada ao lado dos resultados. Números de equipe aparecem apenas para grupos de cinco ou mais. As pessoas leem os números e decidem o que eles significam.

Fontes

1. Assessing the Impact of Planned Social Change. Evaluation and Program Planning, 1979.
2. Code of Practice for Statistics. UK Statistics Authority, 2018.

Comentários

Seu nomeSeu comentário

Os comentários aparecem após a leitura da nossa equipe. Por favor, não inclua dados pessoais de pacientes ou colegas.

Publicar comentário