微信号:tech5ai

介绍:中国顶尖人工智能与机器人行业新媒体平台,专注国内外人工智能、机器人、AR/VR、无人驾驶等科技前沿的深度报道.

AI附体,四肢不协调秒变舞林高手!

2018-08-28 10:13 人工智能机器人联盟

据the verge消息称,加州大学伯克利分校的四位研究人员开发了一套深度学习系统,能把来源视频的跳舞动作,无违和地与任何对像合成,让其可以有如舞林高手一样起舞。



可以将一位舞林高手的舞蹈复制到一个瞎蹦乱跳的人身上,哪怕使用者四肢不协调,也能秒变舞蹈大师。

戳视频 ↓ ↓ ↓


这个程序由许多连续的步骤组成。首先记录目标也就是舞蹈大师的视频,通过一个子程序将舞蹈大师的运动变成棒图,然后找到一个源视频即使用者的视频,和一个由舞蹈大师的动作组成的简笔画。



然后,交换发生,神经网络基于源的棒图运动合成目标个体的视频。需要注意的是,要想合成一个这样的视频,使用者需要向程序提供很多长度约为20分钟、每秒120帧的视频,才能获得高质量的传输。



除了复制合成舞蹈动作,这个程序也为稳定面部表情做了准备,程序中有一个子程序可以平滑棒图的运动,因此哪怕舞者过多地晃动,也依旧能在合成时保持稳定。



这个子程序是一个完全独立的神经网络,专门用于追踪目标的面部以确保合成视频的真实感。

但是这个系统还存在一定的限制。一是,程序无法准确地模拟各种类型的衣物,因此使用者必须穿紧身衣服。在上图中看到的使用者和源舞者的关节不完全对齐的时刻,就是由于bug导致的视觉异常;二是这个AI程序暂时无法复制复杂动作和特殊位置的动作,如从后向前翻转的手。



值得注意的是,这样的视频曾经需要一整天的时间来制作。但现在,只需要一些源视频和正确的AI软件,它可能会在很长时间之后变成一个应用程序。

 
人工智能机器人联盟 更多文章 能唱歌会写诗,温柔可爱的虚拟智能陪伴机器人了解一下 委内瑞拉少年用硬纸板和瓶盖自制超级玛丽“掌机”游戏 Android 9 发布,满满人工智能元素 李彦宏回应“谷歌返华”传言:非常有信心再赢一次 无人机携炸弹刺杀委内瑞拉总统,经过头顶上方爆炸
猜您喜欢 《极客周刊》第十七期 开源软件的历史和对存储厂商的启示 腾讯网络资深专家推荐开年好文:腾讯云VPC网络架构演进的经验教训 分享图片 重磅!Intel联合了Hyper与OpenStack基金会一起发布了Kata Container项目