夜雨聆风我知道，一看到「Nature Medicine」这四个字，很多人已经开始划走了——又是那种读不懂的论文，关我什么事。
先别划。
这篇论文干了一件很 rare 的事：它把 AI 医疗助手拉到真实世界里，做了一次大规模的随机对照试验（RCT）。
1298 名真实参与者。
GPT-4o、Llama 3 等主流大模型。
测试的是一件每个人都会遇到的事：你身体不舒服，去问 AI，它给你的答案，到底靠不靠谱？
结果出来，所有人都该愣一下。
94.9%
这是 LLM 独自回答时的准确率。
研究给大模型出了 220 道真实的医疗健康问题，覆盖急救、用药、症状判断等日常场景。大模型自己答，正确率接近 95%。
如果只看这个数字，结论是显而易见的：AI 已经可以当医疗助手了，而且表现惊人。
但研究没有停在这里。
他们做了一组对比——把大模型放在真实的使用场景里：让普通人先提出自己的问题（就像你在 ChatGPT 对话框里敲字那样），然后大模型来回答。
你猜，准确率变成了多少？
34.5%。
跟不用 AI 的对照组——没有统计学差异。
问题不出在 AI
这个发现最值得说的地方在于：AI 没有变差。
94.9% 和 34.5% 之间，模型是同一个模型，参数没有变，知识没有丢。
变的是人介入之后，整个交互垮掉了。
研究团队在论文里写了一段话，值得全文背诵：
"The deployment bottleneck for LLMs as public health assistants may not be model capability, but human-AI interaction."
翻译过来：LLM 作为公共卫生助手的部署瓶颈，可能不是模型能力，而是人机交互。
说人话就是：
AI 很厉害，但你不会用。
你是怎样把 AI 用废的
研究里观察到了几种典型的「人机协作翻车模式」，看完之后我对着屏幕点了三次头。
第一种：过度信任
你问 AI「我这个皮疹是不是梅毒」，AI 给了你一个很自信的答案，你直接信了。
问题在于，你输入给 AI 的信息本身是残缺的——你没有说你最近有没有高危行为，没有说皮疹长了几天，没有上传照片。AI 基于残缺信息给出了一个看似完整的答案，你却把它当真理。
第二种：放弃独立思考
有了 AI 之后，你不再自己权衡选项，直接把判断权交给它。
研究里有一个细节：使用 LLM 辅助的参与者，在回答问题时自信心显著提升——但正确率没有提升。
这不就是医疗版的 Dunning-Kruger 效应吗？
第三种：问法不对
你问「我肚子痛怎么办」，AI 给了你一个涵盖 20 种可能性的长篇回答。
你看了前面三点，觉得「哦好像说的对」，然后就不看了。
你得到的不是答案，是信息的噪音。
那还能不能用 AI 看病
这篇论文没有直接回答「能不能」，但它把问题拆开了。
AI 能做的：
给你提供信息线索（「持续性胸痛可能需要考虑哪些疾病」） 帮你梳理问题（「去医院前你应该准备好这些资料」） 解释专业术语（「医生说的'非特异性炎症'是什么意思」）
AI 不能做的：
替代你做判断（「你应该去不去医院」） 替代体格检查（「这个肿块是良性还是恶性」） 替代你的医生（「这个方案适合我的具体情况吗」）
论文作者在讨论部分写了一段话，我 paraphrasing 一下：
LLM 应该是一个起点，而不是终点。它帮你准备问题、理清思路，但最终的判断，仍然应该在你和你的医生之间完成。
这件事为什么重要
我在门诊里，已经遇到过好几次这样的情况：
患者进来，坐下来，第一句话是：「黄医生，我在网上查了，我这个是×××。」
然后他开始背 ChatGPT 给他的答案。
我问他：「你有没有把你的完整情况输入进去？」
他说：「我就把症状打进去了。」
这就是论文里说的问题——不是 AI 不准，是你给它的信息不够，你却对它的输出过度信任。
这篇 Nature Medicine 论文的价值，不在于它「打脸 AI」，而在于它第一次用严格的 RCT 数据告诉我们：AI 医疗助手的效果，取决于你怎么用它。
用得好，它是你的信息导航员。
用不好，它是给你错误信心的放大镜。
如果一定要用，怎么用
论文里没有直接给使用指南，但从「哪些情况下参与者答对了」可以反推出来几条：
1. 把 AI 当「准备工具」，不当「判断工具」
去医院前，用 AI 帮你梳理：我有哪些症状？我需要带哪些资料？我应该问医生哪些问题？
但诊断和治疗方案，交给医生。
2. 输入足够的信息
AI 的输出质量，上限取决于你输入的信息质量。
你只说「我肚子痛」，它只能给你泛化的回答。你加上「痛了三天、集中在右上腹、吃完油腻的更痛」，它给出的可能性名单会缩小很多。
3. 保持怀疑
AI 给出的答案，如果和你已知的情况矛盾，信你已知的。
它的训练数据截止在某个时间点，它不知道你最近用了什么药、你有哪些只有你的医生才清楚的情况。
以上，既然看到这里了，如果觉得有收获，随手点个赞、在看、转发三连吧，如果想第一时间收到推送，也可以给我个星标⭐～
谢谢你看我的文章，我们，下次再见。
/ 作者：黄晓龙 / 黄晓龙皮肤科严选工作室