爱尔眼科数字人“爱科(Eyecho) ”发布  可支持视频、文本和语音等多模态交互

10月26日,由爱尔眼科研发的爱尔数字人“爱科(Eyecho)”在东北大学附属辽宁爱尔眼科医院区域眼科医学中心开诊仪式上正式发布。

作为一款行业领先的科技创新成果,爱尔数字人“爱科(Eyecho)”集合了当今生成式人工智能和计算机图形学领域目前最为前沿的技术——基于AIGC与神经渲染的高真实感数字人合成,通过神经渲染技术刻画高真实感数字人形象;基于检索增强技术RAG,构建了蕴含眼科领域知识的垂类大语言模型AierGPT;基于自注意力网络架构,实时根据文本合成个性化声音;模仿海量自然人体运动的视频序列,通过文本指引合成自然真实人体运动实现亲近互动。

会上发布了可用于多个场景的爱尔数字人,分别是:面向患者术前教育的实时可交互数字人——“爱尔名医患教数字人”,可以转换各医院各科室医生的形象,以专业的爱尔眼科垂类大模型为底座,部署在医院各科室,面向患者提问,实时回复包括白内障、屈光、视光、眼底、青光眼、角膜及眼表等全眼科问题。另一款是用于总部大楼、医院大厅及各类形象展示的虚拟双语数字人。还有一款可部署在手机端、用于患者术后服务的——“爱尔名医陪伴数字人”,可支持视频、文本和语音等多模态交互,也即将投入应用。

“爱科(Eyecho)”的名字既体现爱尔“创新驱动,科技爱尔”的发展战略,也起英文Echo“回音”之意,蕴含爱尔运用最新的人工智能技术,提升临床效率,提高服务质量,给予患者更好服务回报的理念。

爱尔眼科率先提出“数字眼科”行业发展新模式。联合中国科学院计算技术研究所等优质科技创新力量,充分挖掘千万级数据价值,以眼科学及视觉科学融合计算技术与人工智能等交叉学科,布局兼顾前沿性和应用性的关键核心课题,联动遍布全球的眼科医疗场景展开示范应用,形成创新资源聚集、产学研协同、数字化赋能的新型科技创新平台。今日面世发布的爱尔数字人就是数字眼科的重点科技攻关项目。