CNMO从外媒获悉,由亚当·马迪博士领导的研究吸引了近1300名参与者参与,每个人都会收到一个详细的病例情景,包括症状、病史和个人背景。研究的目的是看普通人能否使用人工智能来判断问题所在,并决定寻求什么类型的治疗方式。
参与者要将AI视为真正的医生,提问、描述症状并获得帮助。研究人员在实验中使用了三种不同的大型语言模型,分别是:ChatGPT-4o、Llama 3和Command R+。
研究人员发现,使用大型语言模型的参与者在34.5%的案例中至少能识别出一个相关条件;完全不使用AI的对照组表现更好,达到了47%;而在选择正确行动方案时,大型语言模型用户只有44.2%的概率能答对;当AI模型独自决定时,正确率为56.3%。
问题在于:有些人提供的信息不完整或不清楚;有些人忘记提及关键症状;有些人则是遗漏了严重程度或时间点。导致AI误解或错过了重要线索。即使人工智能给出了正确的诊断,用户也不一定执行,这部分不是机器所特有的,人们也会忽视医生的建议。
据CNMO了解,一些AI工具已经在实际的医疗流程中获得了关注。例如,OpenEvidence被医生用来搜索和验证临床文献。它不是用来取代医生,而是增强他们的能力。