科技魔方

阿里云推出数字人视频生成工具Live Portait

大模型

2023年08月17日

  8月16日,阿里云推出数字人视频生成工具Live Portait,上传一张照片和一段文本或语音可生成一段开口说话的数字人视频,可应用于视频直播、聊天机器人、企业营销等场景。目前,该工具已在魔搭社区创空间开放体验。

  据网经社云计算台(CC.100EC.CN)获悉,此次上线的Live Portait工具由运动模块和生成模块组成,其采用阿里云自研的口型预测算法,生成的口型准确度相比传统方法大幅提高;在训练阶段,增加了姿态的显式控制,无需底板视频也可以生成任意动作的视频,大幅提升数字人说话的真实感。

  此外,通过眼神主动控制技术,Live Portait可以为眼球增加一些自然运动,使得生成结果在观感上更接近真人效果。据介绍,Live Portait相关技术已被CVPR、ICCV等国际AI顶会收录。

+1

来源:网经社

延展资讯