您的位置: 首页 >互联网 >

香港试水医疗多模态大模型(关于医疗大模型的简介)

2024-04-01 19:36:42 编辑:花弘心 来源:
导读 近日中国科学院香港创新院AI中心旗下联合实验室首次公开展示了使用医疗多模态大模型结合的手术成果,借助AI智能,实现了内镜检查的数字化和...

近日中国科学院香港创新院AI中心旗下联合实验室首次公开展示了使用医疗多模态大模型结合的手术成果,借助AI智能,实现了内镜检查的数字化和智能化,ESSENCE可以在微创手术工具的末端部署分布式高密度触点,发挥重要的作用。

1.相比单模态,多模态大模型可以同时处理多个类型的信息,实现更加灵活的人机交互模式。本次使用到的多模态AI大模型CARES Copilot1.0可以在手术阶段自动识别病灶和解剖结构,它实现了图像、语音、视频、文本等多模态的手术数据理解,还能进行关键解剖结构的识别。

2.现在这一模型已经与香港威尔士亲王医院神经外科合作,用于实时分析手术过程,还能对医生作出提示,预计今年4月份这一大模型将会应用于北京协和医院手术室,进行技术临床实验。

3.中国科学院自动化所开发的“紫东·太初”模型将担任手术机器人助手。在传统的手术过程当中,会有一个助手负责拿器械、镜头,助手还要观察主刀医生,预判需要的协助种类,AI可能担任助手这一角色。

4.中国科学院香港创新院AI中心执行主任刘宏斌表示,除了与紫东·太初大模型团队合作以外,还会和香港高校教授、海外AI团队以及开源公司进行合作,寻找新的成果突破出口,创新商业模式,探索可持续研究方向。

5.对比其他的垂类大模型,医疗类大模型的商用标志似乎遥遥无期,在2023年有超过50个平台公布了医疗大模型,但最终没有几个可以真正落地用于临床诊断。本次推出的多模态大模型在未来能否实现全面商业化,还要看开发团队以及临床人员的探索状况。


免责声明:本文由用户上传,如有侵权请联系删除!

最新文章

精彩推荐

图文推荐

点击排行

2016-2022 All Rights Reserved.平安财经网.复制必究 联系QQ   备案号:

本站除标明“本站原创”外所有信息均转载自互联网 版权归原作者所有。

邮箱:toplearningteam#gmail.com (请将#换成@)