ROADYOM
ZH
立即开始

医院在线评论:它们能告诉你什么,不能告诉你什么

患者评论仅能部分追踪正式调查,并会提出调查中忽略的问题。研究揭示了评论的真实价值、误导之处以及如何进行有效的解读报告。

Ibrahim Elkobeissi · · 阅读时长 6 分钟 ·

傍晚灯光下空荡荡的医院候诊区

评论并非杂音

多年来,许多医院将在线评论视为少数大声抱怨者的投诉。但研究表明,评论具有更高的实用价值。公开评论携带了关于患者体验的真实信号,但也包含容易被忽视的偏差。一家能够同时理解这两点的医院,可以从患者的文字中学习,而不被其误导。

我们通过两面 Mirror 来解读评论。一面是机构对自身的描述;另一面是人们的真实经历。两者之间的差距即为图像。评论是少数能将“第二面 Mirror”公开记录下来的地方,因此它们值得进行仔细的解读报告,而非防御性的对待。

研究发现

最有价值的研究是将评论网站与正式调查进行对比,后者使用抽样、标准问题和统计调整。在美国,正式工具是 HCAHPS(全国医院患者体验调查);在英国,则是 NHS 住院调查。

评论可以追踪调查,但并不完美。 Bardach 及其同事研究了报告 HCAHPS 分数的 3,796 家美国医院。其中仅有 962 家(约四分之一)拥有 Yelp 评分。在拥有 5 条以上 Yelp 评分的医院中,高分比例与 HCAHPS 分数比例的相关系数为 0.49。这是一种中度相关,而非完全一致。

这一模式在另一个医疗体系中同样成立。 Greaves 及其同事研究了 2009 年至 2010 年间,英国 146 家急性医院信托机构在 NHS Choices 网站上发布的 9,997 条评分。这些评分与全国调查指标相关,系数在 0.31 到 0.49 之间。其中“清洁度”的一致性最高。

评论与医疗结果之间似乎存在联系。 在两项研究中,在线评分越高,死亡率或再入院率越低。相关性较弱,作者将其视为关联而非因果关系。在英国的数据中,这种联系至少与正式调查的联系一样强。

评论涵盖了调查无法触及的领域。 Ranard 及其同事对 1,352 家美国医院的 16,862 条 Yelp 评论进行了语言分析。他们发现了 12 个 HCAHPS 未涵盖的体验维度,包括就诊费用、保险与账单、员工的同理心以及对家属的照顾。在对 244 条在线评论进行的另一项深度解读报告中,Bardach 团队发现仅有 57% 的评论提到了 HCAHPS 的维度。安全感感知出现在 41% 的评论中,而账单或意外费用出现在 11.5% 的评论中。其中 38% 的评论由亲友撰写,这是患者调查无法捕捉到的视角。

评论的误导之处

这些研究都指出了自身的局限性。相比相关性,这些局限性更为重要。

  • 自我选择偏差。 人们是主动选择撰写的。那些经历过极端体验(无论好坏)的人更有可能写评论。在 Ranard 的数据中,31% 的评论给了 1 星,33% 给了 5 星。
  • 样本量过小。 该研究中的中位数医院仅有 4 条评论。面对服务数千人的医院,4 个声音无法提供全面描述。Bardach 团队将其主要对比对象限制在拥有 5 条以上评分的医院;而 Ranard 团队发现,随着评论最低数量的增加,与 HCAHPS 的一致性也随之增强。
  • 缺乏分母。 评论显示某人发生了某事,但并未显示发生的频率。在 100 名患者中出现 10 起账单投诉,与在 10 万名患者中出现 10 起投诉,其意义完全不同。
  • 虚假与激励性评论。 并非所有评论都是真实的。Ranard 团队排除了那些被 Yelp 自身过滤器标记为高比例评论的医院。2024 年,美国联邦贸易委员会通过了一项规则,禁止虚假评论、付费购买特定倾向的评论、未披露的内部人员评论以及压制评论的行为。
  • 缺乏代表性。 评论者并非患者样本。他们的观点不能被视为某个城市、国家或社区的意见。它们只是记录了某些人选择在公开场合表达的内容。

这些并不意味着评论毫无价值。它们只是众多信息源之一,在阅读时需考虑到其局限性。

评论带来的增量

正式调查旨在进行比较。它们在固定周期内、在任何地方都询问相同的问题。这是它们的优势,也是它们无法洞察的盲点。

Patient experience online reviews fill three gaps. First, topics: billing, parking, waiting beside a relative, the tone of a phone call. Surveys rarely ask. Patients raise them anyway. Second, timing: a review can appear days after a visit, while survey results often arrive months later. Third, public image: reviews are what prospective patients actually read. Whatever their accuracy, they shape how the institution is seen.

最后一点往往被忽视。调查问卷告诉医院患者对其的评分,而评价则展示了医院在他人眼中的样子。如果医院声誉管理仅从 Star 平均分开始,最终只会陷入关于平均分的争论。请从人们描述的内容开始。

一种解读报告的方法

做好患者评价分析主要靠自律。六个习惯能带来质的改变。

  • 解读主题,而非评分。 平均分会掩盖原因。请按主题对评论进行归类:沟通、等待、清洁度、账单、安全性。某个主题的恶化会告诉你该去哪里寻找问题,而平均分的下降则不会。
  • 保留原始出处。 每一个发现都应链接回其来源的公开帖子。没有出处的说法无法核实,而无法核实的说法不应作为决策依据。
  • 对比官方发布与公众反馈。 将医院的官方声明与公开提及的内容并列对比。如果网站承诺等待时间短,而评价却描述等待时间长,那么这种差距就是发现所在。
  • 追踪随时间的变化。 一个月的评价只是个案。而一年内持续上升的同一主题则是信号。在与其他机构对比之前,请先对照自身的历史数据进行衡量。
  • 研究模式,而非个人。 分析大量帖子中的主题。不要对个体评论者进行画像、追踪或纠缠。目标是了解机构,而非监控批评者。
  • 公开回复时务必谨慎。 感谢撰写者,承认其顾虑,并提供私下沟通渠道。切勿确认某人是否为患者,或提及其实际诊疗情况。2022 年,美国卫生与公众服务部与一家牙科诊所达成和解,原因是该诊所在回复评价时泄露了患者信息。
"医疗服务提供者在回复负面在线评价时,不得泄露患者受保护的健康信息。” Melanie Fontes Rainer,HHS 民权办公室主任

通过这种方式解读,评价可以补充调查问卷和临床数据。它们不能取代这些数据,且仅凭评价本身很难证明任何问题。当证据不足时,诚实的回答是证据不足。

Mirror 的处理方式

Mirror 会读取机构发布的内容以及公众对该机构的评价,然后将两者并列对比。它展示的每一个差距都附带公开出处,以便任何人都可以查看原文并进行判断。它解读的是大量帖子中的主题,而非追踪个人,并且会在证据不足以支持结论的地方进行标注。

来源

  1. Yelp 上的医院护理评价可以补充并为传统的患者体验调查提供信息 (Ranard BL, Werner RM, et al.), Health Affairs 35(4):697–705。Health Affairs, 2016。
  2. 美国商业网站评分与传统医院绩效指标之间的关系 (Bardach NS, Asteria-Peñaloza R, Boscardin WJ, Dudley RA), BMJ Quality & Safety 22(3):194–202。BMJ Quality & Safety, 2013。
  3. 互联网患者评分与英国 NHS 传统患者体验调查之间的关联:一项观察性研究 (Greaves F, Pape UJ, King D, et al.), BMJ Quality & Safety 21:600–605。BMJ Quality & Safety, 2012。
  4. 来自患者护理最贴近观察者的视角:医院在线叙述性评价的主题分析 (Bardach NS, Lyndon A, et al.), BMJ Quality & Safety 25(11):889–897。BMJ Quality & Safety, 2016。
  5. FTC 发布关于消费者评论和证言的最终规则。Morgan Lewis, 2024。
  6. HHS 民权办公室就泄露患者受保护健康信息一事与牙科诊所达成和解。U.S. Department of Health and Human Services, 2022。

评论

    评论将在我们的团队审核后显示。请勿包含患者或同事的个人隐私信息。

    Built into ROADYOM Mirror

    了解更多