国产眼科AI大模型落地临床,据说还能提供情绪价值

国产眼科人工智能(AI)医疗大模型有新进展。 1月3日,记者从中山大学中山眼科中心获悉,由该院与华为技术有限公司联合研发的眼科AI大模型ChatZOC已在临床落地,在湖南、新疆、海南等地试点应用。基于此大模型,已研发出增强版眼科“数字医生”,为患者提供有温度的眼健康咨询服务。

眼科AI大模型ChatZOC界面。

眼科AI大模型ChatZOC界面。

自主研发预问诊系统与眼科“数字医生”

2024年6月,中山大学中山眼科中心联合华为技术有限公司正式发布眼科大模型ChatZOC。该大模型融合语言大模型及医学图像视觉模型,基于大量眼科专科数据构建而成,能用于眼科疾病诊断、预防、医学教学与研究等领域。

1月3日,中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲介绍,历经半年时间,科研人员通过模型优化与国产化部署,提升大模型的精准性、实用性与安全性,拓展应用场景。目前,ChatZOC已实现从科研到临床落地,为数千名患者提供服务。

中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲。

中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲。

“研发团队攻克超100个技术难题,版本已更新迭代十次,将模型能力提升了数倍。”他说。

南方+记者了解到,科研人员基于该大模型研发了手机端预问诊系统。使用时,患者在对话框输入症状信息、拍摄眼部照片,系统便能进行初步诊断并提出就诊建议。同时,这一系统还具有眼底图像质控、病变风险判断等功能,能自动解读视力、眼压、裂隙灯照相和眼底照相等检查结果。

在此基础上,科研人员研发出一款“增强版数字医生”产品,通过问诊系统即可进入交互界面。“数字医生”能与患者进行文字或语音对话,引导患者讲述病情、拍摄眼部照片,识别患者眼部情况,提供就医指导。

“这款数字医生的特点是能充分考虑到患者的感受,体现医疗的温度。”林桢哲举例介绍,人工智能会根据识别到的患者语音、文字信息,自动切换称呼、角色与患者沟通,为患者提供情绪价值。

ChatZOC有望缓解基层眼科医疗资源不足

目前,ChatZOC已在湖南、新疆、海南、马尔代夫等国内外地区试点应用。其中,在新疆喀什地区,已为超3000名患者完成眼病筛查,提升当地眼科医疗水平。

“如今,在ChatZOC的加持下,喀什英买里乡的40余名‘赤脚’村医和20名医护人员具备了标准眼科诊疗能力。”在林桢哲看来,眼科人工智能大模型率先在基层落地应用具有重要意义。

当前,我国眼科医生短缺,且眼科医疗资源分配不均,70%的眼病患者居住在中西部农村地区,然而,70%的医疗资源集中在城市。“若为偏远地区的基层医院提供具备专业医学知识与大模型算力的‘数字医生’,能推动医疗资源下沉,在一定程度上缓解这一现实难题。”林桢哲说。

实际上,人工智能大模型在促进医疗资源流动的同时,也推动建立了新型诊疗模式。

眼科AI大模型ChatZOC界面。

眼科AI大模型ChatZOC界面。

为了保证诊疗的专业性,ChatZOC完成的初步诊断数据将通过系统,同步至当地的更高级医疗机构,进一步明确诊断。同时,系统还能对复杂眼病、罕见眼病做出及时的数据反馈,帮助患者及时向上级医院转诊。

林桢哲表示,基于现阶段的试点应用,科研团队将根据应用情况持续优化、调整技术细节,逐步扩大大模型推广范围与应用场景,与医疗机构信息系统进一步深度融合。“希望未来眼科人工智能能服务更多医院,造福更多患者。”

编辑:庞晓丹 责任编辑:丹梅
国产眼科AI大模型落地临床,据说还能提供情绪价值
南方+ 2025-01-04 09:56

国产眼科人工智能(AI)医疗大模型有新进展。 1月3日,记者从中山大学中山眼科中心获悉,由该院与华为技术有限公司联合研发的眼科AI大模型ChatZOC已在临床落地,在湖南、新疆、海南等地试点应用。基于此大模型,已研发出增强版眼科“数字医生”,为患者提供有温度的眼健康咨询服务。

眼科AI大模型ChatZOC界面。

眼科AI大模型ChatZOC界面。

自主研发预问诊系统与眼科“数字医生”

2024年6月,中山大学中山眼科中心联合华为技术有限公司正式发布眼科大模型ChatZOC。该大模型融合语言大模型及医学图像视觉模型,基于大量眼科专科数据构建而成,能用于眼科疾病诊断、预防、医学教学与研究等领域。

1月3日,中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲介绍,历经半年时间,科研人员通过模型优化与国产化部署,提升大模型的精准性、实用性与安全性,拓展应用场景。目前,ChatZOC已实现从科研到临床落地,为数千名患者提供服务。

中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲。

中山大学中山眼科中心数智化技术研发与应用部负责人林桢哲。

“研发团队攻克超100个技术难题,版本已更新迭代十次,将模型能力提升了数倍。”他说。

南方+记者了解到,科研人员基于该大模型研发了手机端预问诊系统。使用时,患者在对话框输入症状信息、拍摄眼部照片,系统便能进行初步诊断并提出就诊建议。同时,这一系统还具有眼底图像质控、病变风险判断等功能,能自动解读视力、眼压、裂隙灯照相和眼底照相等检查结果。

在此基础上,科研人员研发出一款“增强版数字医生”产品,通过问诊系统即可进入交互界面。“数字医生”能与患者进行文字或语音对话,引导患者讲述病情、拍摄眼部照片,识别患者眼部情况,提供就医指导。

“这款数字医生的特点是能充分考虑到患者的感受,体现医疗的温度。”林桢哲举例介绍,人工智能会根据识别到的患者语音、文字信息,自动切换称呼、角色与患者沟通,为患者提供情绪价值。

ChatZOC有望缓解基层眼科医疗资源不足

目前,ChatZOC已在湖南、新疆、海南、马尔代夫等国内外地区试点应用。其中,在新疆喀什地区,已为超3000名患者完成眼病筛查,提升当地眼科医疗水平。

“如今,在ChatZOC的加持下,喀什英买里乡的40余名‘赤脚’村医和20名医护人员具备了标准眼科诊疗能力。”在林桢哲看来,眼科人工智能大模型率先在基层落地应用具有重要意义。

当前,我国眼科医生短缺,且眼科医疗资源分配不均,70%的眼病患者居住在中西部农村地区,然而,70%的医疗资源集中在城市。“若为偏远地区的基层医院提供具备专业医学知识与大模型算力的‘数字医生’,能推动医疗资源下沉,在一定程度上缓解这一现实难题。”林桢哲说。

实际上,人工智能大模型在促进医疗资源流动的同时,也推动建立了新型诊疗模式。

眼科AI大模型ChatZOC界面。

眼科AI大模型ChatZOC界面。

为了保证诊疗的专业性,ChatZOC完成的初步诊断数据将通过系统,同步至当地的更高级医疗机构,进一步明确诊断。同时,系统还能对复杂眼病、罕见眼病做出及时的数据反馈,帮助患者及时向上级医院转诊。

林桢哲表示,基于现阶段的试点应用,科研团队将根据应用情况持续优化、调整技术细节,逐步扩大大模型推广范围与应用场景,与医疗机构信息系统进一步深度融合。“希望未来眼科人工智能能服务更多医院,造福更多患者。”

编辑:庞晓丹 责任编辑:丹梅