北京启动医疗领域人工智能应用评测服务

北京市卫生健康委员会7日发布《关于开展医疗领域人工智能应用评测工作的通知》，正式向各企业、研究机构提供评测服务。该服务通过70多项任务，评测AI诊疗是否安全、专业、适用、准确。

近年来，医疗AI正在加速向辅助医生、承担部分医生技术劳动的方向发展。如何确保医疗AI应用规范安全有效，成为公众关注和行业关心的问题。北京市卫生健康委员会委托北京市卫生健康大数据与政策研究中心，联合全国重点医院与专家团队，打造了北京医疗人工智能应用评测中心。

在评测内容上，评测中心形成了6个核心维度的评测指标体系，包含70多项具体评测任务，全面覆盖了看“安全”，查有没有泄露隐私、有没有违背医学伦理；看“专业”，测会不会用最新的医学教材、诊疗指南；看“适用”，查是否符合医生的思考逻辑和日常工作流程；看“准确”，看AI诊断对不对，给出的治疗建议合不合理。

在评测数据上，评测中心联合重点医院、科研机构及专家团队，用临床案例、国内外权威医学教材和最新临床诊疗指南，共同构建高质量评测数据集。

在评测方法上，评测中心严格实施用户申请、系统评测、专家复核三个环节，系统根据应用类型自动匹配评测任务并生成评测报告，由临床专家进行复核。除采用国际通用基础评测指标外，还创新引入了基于人工智能的评分机制，用一个“裁判模型”综合“考生”的诊疗思路、推理逻辑、答题结果进行量化打分，避免只看最终结果的片面性。

本次评测服务主要聚焦胸外科诊疗领域开展专项评测。后续，评测中心将陆续开展更多医学领域的评测服务，覆盖内科、外科、儿科等专业领域，助力医疗人工智能产业健康发展。