阿里云AI新进展：只需图片和文字 就能生成数字人视频
【亿邦原创】阿里云在生成式AI范畴又有新进展。
8月16日，阿里云推出数字人视频生成东西Live Portait，上传一张相片和一段文本或语音即可生成一段开口说话的数字人视频，可使用于视频直播、谈天机器人、企业营销等场景。现在，该东西已在魔搭社区创空间敞开体会，在魔搭社区用手机注册账号，即可免费试用。
自对话大模型和AI绘画模型相继炽热后，业界对生成式AI的研讨逐渐朝更多模态的方向演进，AI视频生成就是抢手技能之一。
这项技能可将文本或音频等信息转换为面部运动信息，从而驱动生成相片人物形象的动画，能有用下降视频拍照和制造门槛。
这次上线的Live Portait东西由运动模块和生成模块组成，选用阿里云自研的口型猜测算法，生成的口型准确度比较传统办法大幅进步。
在练习阶段，Live Portait添加了姿势的显式操控，不需要底板视频也能够生成恣意动作的视频，大幅提高数字人说话的真实感。
此外，经过目光自动操控技能，Live Portait能够为眼球添加一些天然运动，使得生成结果在观感上更挨近真人作用。据介绍，Live Portait相关技能已被CVPR、ICCV等世界AI顶会录入。
依据魔搭社区上的信息显现，在Live Portait上传相片后，用户可挑选文本驱动和音频驱动两种方法，文本驱动形式下，该东西供给了普通话、英语、粤语、童声等28种声响。
此外，Live Portait还供给了轻量模型挑选，协助用户更快速生成视频。
该东西算法负责人张邦表明：“Live Portait集成了团队多项自研立异技能，例如仅需单张图片就能生成传神的面部动画，突破了传统对立生成网络的限制。跟着技能的进一步迭代，图生视频有巨大的使用空间，有望成为企业降本增效的生产东西。”
据悉，该团队研讨方向包括数字人、3D模型AI生成、高真实感烘托、天然人机交互等范畴，现在已宣布50多篇世界顶会论文。
相关文章
前史低点，住宅公积金借款利率要降了？银行房贷利率下限调整至3%
2024年11月7日起，广州区域首要商业银行将一致调整商业性个人住宅借款利率，最低不得低于3%。此前，广州区域首套房贷利率已挨近同期个人住宅公积金借款利率，引发了对公积金借款利率调整的评论。专家以为，...
存款利率“倒挂”VS借款利率下调：银行进入“低利率年代”
近期，又有中小银行再度下调银行存款利率。5月14日，安徽新安银行宣告行将于6月6日再度下调存款利率，2年、3年定期存款利率均下调10个基点。这已是该行近1个月来第2次下调存款利率。调整后，3年定期存款...
冷门男明星100名列表,盘点那些鲜为人知的冷门男明星百人榜
亲爱的读者们，你是否厌倦了那些家喻户晓的明星，想要探索一些隐藏在娱乐圈角落里的宝藏呢？今天，就让我带你走进一个神秘的世界——冷门男明星的100名列表。这些名字可能你没有听过，但他们的才华和魅力绝对值得...
外媒：私家医师否定谋杀马拉多纳
原标题:外媒：私家医师否定谋杀马拉多纳参考消息网6月27日报导据法新社布宜诺斯艾利斯6月26日报导，为马拉多纳供给医治的精神科医师阿古斯蒂纳·科萨乔夫25日否定自己在阿根廷球星去世上的一切职责。报导称...
时刻看得见！从中专生到教授，她说斗争就有时机
“斗争自身便是一种美好，请同学们信赖，常识改变命运，斗争成果愿望。眼中有光，心中有梦，就一定会脚下有路……”4月11日，河南农业大学英语专业副教授余红卫承受采访时说。从中专生一路考到硕士，从村庄教师到...
俄乌“暗战”非洲
乌克兰外长库列巴 视觉我国 材料图8月4-8日，乌克兰外长库列巴敞开俄乌抵触以来第四轮非洲出访行程，连续拜访马拉维、赞比亚和毛里求斯三个非洲国家，这也是乌外长前史上初次到访上述国家。乌克兰交际部在一...