字节跳动展示OmniHuman多模态框架:肖像+音频=逼真动画

字节跳动展示OmniHuman多模态框架:肖像+音频=逼真动画

2 月 6 日消息,字节跳动的研究人员近日展示了一款 AI 模型,可以通过一张图片和一段音频生成半身、全身视频。

字节跳动表示,和一些只能生成面部或上半身动画的深度伪造技术不同,OmniHuman-1 能够生成逼真的全身动画,且能将手势和面部表情与语音或音乐精准同步

字节跳动在其 OmniHuman-lab 项目页面发布了多个测试视频,包括 AI 生成的 TED 演讲和一个会说话的阿尔伯特・爱因斯坦。

在周一发布的一篇论文中,字节跳动指出,OmniHuman-1 模型支持不同的体型和画面比例,从而使视频效果更自然。

据 了解,字节跳动表示,OmniHuman-1 模型基于约 19000 小时的人类运动数据训练而成,能够在内存限制内生成任意长度的视频,并适应不同的输入信号。

研究人员还表示,OmniHuman-1 在真实性和准确性方面,超越了其他同类动画工具。目前,该工具暂不提供下载或有关服务。

特别声明:[字节跳动展示OmniHuman多模态框架:肖像+音频=逼真动画] 该文观点仅代表作者本人,今日霍州系信息发布平台,霍州网仅提供信息存储空间服务。

猜你喜欢

四川犍为县发生4.0级地震 多地震感明显(犍为重大新闻)

中国地震台网正式测定:09月15日16时42分在四川乐山市犍为县(北纬29.40度,东经104.03度)发生4.0级地震,震源深度10千米。成都、德阳、绵阳、遂宁等地网友反馈有震感

四川犍为县发生4.0级地震 多地震感明显(犍为重大新闻)

看到97年『巩俐』与莫妮卡合照,才懂东方美人更抗岁月(『巩俐』2007年)

不是贝鲁奇不美,而是『巩俐』的美,太有“内容”。 我们常说“抗老”,仿佛是在与时间赛跑,用医美、护肤品去“对抗”皱纹。可『巩俐』告诉我们,真正的抗老,不是留住青春,而是让岁月成为加分项。她的美,不是“冻龄”,而是“…

看到97年『巩俐』与莫妮卡合照,才懂东方美人更抗岁月(『巩俐』2007年)

大龄男星牵小鲜肉的手!『刘奕君』辟谣牵的是他儿子,父子俩是演技派(大龄男星牵小孩的手)

『刘奕君』与刘怡潼:演艺世家的传承与突破当『刘奕君』牵手的画面在网络引发热议时,观众惊讶地发现这位常以反派形象示人的实力派演员,生活中竟展现出截然不同的一面。 『刘奕君』的演艺之路始于西安,怀揣表演梦想的他考入北京电影…

大龄男星牵小鲜肉的手!『刘奕君』辟谣牵的是他儿子,父子俩是演技派(大龄男星牵小孩的手)

美科技巨头扎堆投资英国 助力AI基建升级(美股大型科技股普跌,两日内六大巨头蒸发2700亿美元💵)

『美国总统特朗普』对英国进行第二次国事访问当天,多家美国科技公司宣布将在英国投资310亿英镑💷,用于提升英国的人工智能基础设施建设

美科技巨头扎堆投资英国 助力AI基建升级(美股大型科技股普跌,两日内六大巨头蒸发2700亿美元💵)

韩娱重返中国仍有障碍?外交部回应 文化交流需民意基础(韩娱之重生归来当女团)

9月17日,外交部发言人林剑主持例行记者会

韩娱重返中国仍有障碍?外交部回应 文化交流需民意基础(韩娱之重生归来当女团)