爱尔眼科正在联合研发基于大语言模型ChatGPT的爱尔数字人

http://ddx.gubit.cn  2023-05-22 11:22  爱尔眼科(300015)公司分析

近日,爱尔眼科在互动平台回复称,公司与中国科学院计算技术研究所正在联合研发基于大语言模型ChatGPT的爱尔数字人——EYEGPT,建立一个具有超写实风格的数字人模型,具有实时语音、文本交互的导诊与辅诊平台系统,基于算力、算法以及平台敏捷性的不断优化,实现敏捷数字人的开发,助力实现眼科服务模式的数字化、服务技术智能化、眼科医生和医院智慧化。

未来,爱尔数字眼科研究所将基于爱尔眼科数字医生形象,依据知识图谱的内容,将肢体运动、手指手势,表情动作、口型唇动等多模态数据协同展现在数字IP形象——眼科数字医生上,采用自研引擎对数字医生进行建模与渲染。以语音和文本驱动的数字人协同表达方法,对肢体、手势、表情和口型进行高维张量的特征嵌入。最终打造包括视觉、听觉以及实时交互在内的眼科数字医生虚拟辅诊体验。