7月11日消息,蚂蚁集团对外发布了其最新开源成果——EchoMimic项目,该项目聚焦于声音与视觉的融合创新,能够巧妙运用先进的人脸识别技术与音频分析算法,使静态照片中的人物仿佛“开口说话”,通过精准匹配面部表情与给定的语音内容,创造出流畅且逼真的动态视频效果。
该项目具备较高的稳定性和自然度,通过融合音频和面部标志点(面部关键特征和结构,通常位于眼、鼻、嘴等位置)的特征,可生成更符合真实面部运动和表情变化的视频。
其支持单独使用音频或面部标志点生成肖像视频,也支持将音频和人像照片相结合做出“对口型”一般的效果。据悉,其支持多语言(包含中文普通话、英语)及多风格,也可应对唱歌等场景。
文明上网,理性发言,共同做网络文明传播者