AB
AiBoss
ニュース

医疗健康AI独立评测平台InclusionMed上线,首期覆盖22个模型

InclusionMed医疗健康AI独立评测与分析平台上线,同步推出评测图谱Atlas与首期评测指数Index,首期纳入五项基准、1034项任务,比较11家厂商的22个模型。

核心事实

据量子位转载InclusionMed提供的信息,医疗健康AI独立评测与分析平台InclusionMed已正式上线,并同步推出医疗AI评测图谱InclusionMed Atlas与首期医疗AI评测指数InclusionMed Index。该平台由来自斯坦福大学、哈佛大学、北京协和医学院、蚂蚁集团、InclusionMed.AI等29家机构的研究人员共同建设,被描述为医疗健康领域的Artificial Analysis(AA)。

据素材介绍,InclusionMed Atlas按“面向谁”和“考察什么能力”两个维度,将患者与公众、医疗专业人员、医疗管理人员三类角色,与知识、推理、任务执行三类能力交叉,形成九宫格评测图谱;InclusionMed Index则汇集纳入基准的评测结果,呈现模型综合表现及在不同任务中的优势与不足。

背景与影响

素材指出,业内针对具体医疗任务的评测基准已有多种,但单项测试成绩难以完整反映模型在不同医疗任务中的表现,该平台意在提供更系统的评估依据。首期评测聚焦临床诊疗与医疗管理两大方向,纳入五项评测基准、1034项任务,对11家厂商的22个模型进行系统比较,并经过独立复测,最终选出四项公开评测基准,与团队自建的InclusionMed-DxFiles共同构成首期指数。其中InclusionMed-DxFiles基于医学期刊刊载的疑难病例构建,考察模型结合病例线索进行临床判断的能力。项目组还表示,正与医疗机构和研究团队合作,拟围绕医患共同决策、资源约束下的诊疗调度等场景开发新的评测任务。

限制与来源

上述内容来自InclusionMed提供的稿件,量子位获授权转载,观点归原作者所有。素材未披露各模型的具体得分、排名、平台访问方式与地区可用范围,相关评测结果与后续更新请以InclusionMed官方渠道当前信息为准。本文仅作信息转述,不构成任何投资、法律或医疗建议。