患者安全推理不再只靠语言模型:去掉知识图谱,F1掉0.047且三项指标均显著变差
患者安全推理系统把知识图谱、检索增强生成与LLaMA模型组合起来,从MIMIC-III和MIMIC-IV的临床记录中抽取安全概念并给出可追溯的解释。完整系统在概念抽取上取得0.89的F1;去掉知识图谱后F1下降0.047、AUROC下降0.084、AUPRC下降0.110,三项差异均显著。去掉检索增强或LoRA微调带来的下降较小且未达统计显著,检索证据的相关性仅由专家定性确认。
患者安全推理系统把知识图谱、检索增强生成与LLaMA模型组合起来,从MIMIC-III和MIMIC-IV的临床记录中抽取安全概念并给出可追溯的解释。完整系统在概念抽取上取得0.89的F1;去掉知识图谱后F1下降0.047、AUROC下降0.084、AUPRC下降0.110,三项差异均显著。去掉检索增强或LoRA微调带来的下降较小且未达统计显著,检索证据的相关性仅由专家定性确认。
已读完全部报道