《科创板日报》12月20日讯(编辑 邱思雨) 据apple insider最新报道,苹果公司发布了一篇研究论文,讨论了其正在研究的生成式ai技术——hugs。
hugs,全称human gaussian splats。据介绍,hugs能够在约30分钟内从一个简短视频中生成数字人类分身。
苹果研究员兼hugs论文作者之一的anurag ranjan在x平台上发布了有关该技术应用的最新视频。
在其发布的视频中可以看到,画面右方的三个数字分身正在草坪上跳舞。
苹果表示,当前的神经渲染技术相比早期有了显著的进步,但该技术仍然最适合应用在静态场景中,而不是动态场景中自由移动的人类。
而hugs则建立在3dgs(3d gaussian splatting)和smpl身体模型技术的基础上,来创建人类数字分身。ranjan介绍道,hugs仅仅需要约50-100帧的原始视频,这相当于2到4秒24fps的视频。
但是,目前该技术无法捕捉每个细节。对于未能捕捉并建模的细节元素,hugs会自动填充。
目前hugs经过训练,可以在约30分钟内生成数字人类分身。据称,这比neuman、vid2avatar在内的其他方式要快约100倍。
事实上,苹果公司一直致力于有关数字分身的研究。例如在其最新mr头显vision pro里,该设备能够通过前置摄像头扫描用户面部信息,并基于机器学习技术和编码神经网络,为用户生成一个数字分身。当用户使用facetime通话时,数字分身便可以模仿用户的面部及手部动作。
自以chatgpt为代表的生成式ai大模型爆火后,苹果公司在ai技术上开发进度和商业布局一度被市场所诟病。对此,apple insider的报道指出,苹果并没有在生成式ai方面停滞不前,让人类数字分身跳舞就是证明。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
notice: the content above (including the pictures and videos if any) is uploaded and posted by a user of netease hao, which is a social media platform and only provides information storage services.