病理是疾病诊断的“金标准”，而我国面对病理诊断人才严重匮乏困境。近年来癌症发病率赓续攀升，若何借助AI赋能大夫精准诊断，进步工作效力及医疗质量，成为当前世界病理学科的前沿热点。近日，浙江大年夜学宣布了视觉与说话模型融合的人机交互AI病理全能助手-OmniPT，该模型已在浙江大年夜学医学院从属第一病院(以下简称“浙大年夜一院”)病理科进行临床应用验证，病理诊断技巧进入了智能化与个性化的新时代。浙江大年夜学在AI+医学交叉范畴开展的技巧冲破、技巧转化、临床验证等系列成果，以实际施动有力响应了科技立异引领卫生健康事业新成长的国度计谋。

OmniPT由浙大年夜计算机学院宋明黎传授团队结合浙大年夜一院合营开辟，两边自2020年开展深度合作，2022年6月结合申请到数字病理人工智能医疗器械临床实验中间(工信部&国度药监局结合审批)。在浙江大年夜学和浙大年夜一院两边引导的大年夜力支撑下，2024年8月该中间获批人工智能医疗器械立异义务揭榜挂帅优胜单位。

2024年12月13日，在第十七届中国病理医师年会上，浙大年夜一院病理科章京传授具体介绍了人机交互AI病理全能助手-OmniPT。面向临床病理诊断真实需求，依托数字病理人工智能医疗器械临床实验中间丰富数据和算力资本，经由过程多项关键技巧冲破，助力病理大年夜模型在胃癌、结直肠癌和宫颈癌等高发病率癌种上开展临床应用，有效解决数字病理AI临床应用难题。

世界卫生组织(WHO)宣布《医疗卫生中人工智能的伦理治理》指南中指出，AI应用安排落地临床须要知足人工智能伦理共鸣，肯定大夫决定计划和道德主体地位，大夫须要确认诊断成果的安然与精确性。OmniPT的研发以临床落地应用为目标，环绕交互便捷性、诊断效力、诊断精准性、诊断可托性等痛点需求开展技巧攻关，以病理科大夫为主导，经由过程人机交互情势，大年夜幅晋升诊断效力及质量，有效缓解了病理人才匮乏的困境。

浙大年夜一院章京传授在2024年中国病理医师年会上初次对外展示OmniPT的功能

精准与高效：技巧冲破解决临床应用难题

超大年夜尺寸病理图蕴含多层级丰富信息，若何精准、快速给出可托诊断成果是病理大年夜模型须要解决的核心难题。研发团队经由过程跨层级高效特点锁定、提示引导细节特点补全等关键技巧冲破，解决GB级超大年夜尺寸病理图秒级推理、精准分析难题;进一步地，经由过程多义务协同分析技巧，将文本语义与视觉特点强接洽关系，初次实现分类、瓜分、检测等多类型诊断义务全覆盖，为病理申报一键生成供给支撑。经由过程集成上述核心技巧，病理全能诊断助手OmniPT有效知足临床人机交互诊断分析及时、精准、可托需求。

技巧负责人冯尊磊副传授介绍：“以往大夫在分析病理切片时，须要消费大年夜量时光一一不雅察微不雅细节，而OmniPT可以在不影响推理速度的情况下，1~3秒内精确锁定病灶区域，十余个癌种上取得95%以上诊断精确性。此外，OmniPT支撑文本输入、视觉框选等多种便捷交互方法，可以或许实现从全局到局部多标准病变特点精准锁定，给文本诊断成果供给视觉特点根据，有效解决临床应用可托诊断难题”。这一成果将进一步推动智能化病理诊断的临床应用过程，为患者供给更高质量的医疗办事。

人机交互病理全能助手OmniPT应用平台

前沿范畴摸索：从癌症诊断到肿瘤标记物发掘

OmniPT今朝已在癌症分型、分级、血管及神经侵犯辨认、预后标记物发明等多项核心义务中取得冲破性进展。在肿瘤病理诊断中，OmniPT可精准辨认肿瘤微情况的各类细胞及组织，并进行精细化分析;进一步地，OmniPT衍生预后分析才能，在多个癌种上达到80~90%预后精准猜测，并从病理表型层面智能化发掘预后接洽关系多个新型标记物，有效帮助临床个别化治疗。实验数据显示，OmniPT的整体机能明显优于今朝国际上宣布的主流病理模型，为复杂病理诊断分析、肿瘤预后标记物发掘供给了靠得住的智能化解决筹划。

总结而言，人机交互AI病理全能助手环绕可托性、及时性、精准性等临床痛点需求取得的核心技巧立异，推动人机交互AI在病理临床实践场景从0到1的冲破。研发团队积极开源共享研发核心技巧，促进范畴协同合作成长，晋升我国AI聪明病理国际竞争力。

将来愿景：构建智能化病理生态

数据质控负责人张秀明大夫表示：“高质量病理数据是OmniPT构建的基石，跟着算力范围的晋升和更多癌种数据样本的扩充，OmniPT将在更广泛的临床场景中应用，为病理大夫减负的同时，为患者带来更精准和高效的医疗体验。”

依托数字病理人工智能医疗器械临床实验中间，OmniPT已在浙大年夜一院病理科多个高发病率癌种率先应用，同步在精神病理(如阿尔茨海默病)等重大年夜慢病范畴开展结合液体活检、基因组学的多模态转化研究，将来将拓展到更多癌种及非肿瘤疾病中的应用。进一步地，经由过程结合底层数字病理扫描设备以及病理长途诊断场景，OmniPT将成为病理科高效、精准诊断智能助手，加快推动AI技巧在真实临床场景应用扶植过程。

Tags： 浙江大学发布人机交互AI病理诊断大模型OmniPT，推动数字病理智能化临床应用