首页>新闻>苹果资讯>苹果机器学习研究团队展示全新生成式 AI 技术 HUGS

苹果机器学习研究团队展示全新生成式 AI 技术 HUGS

2023-12-20
1266
来源:爱思助手

苹果机器学习研究团队近日发布博文,展示了全新的生成式 AI 技术——HUGS(Human Gaussian Splats)。这项技术能够在 30 分钟内分析短视频,然后映射并创建新的动作和角度,以逼真的人像元素呈现。


苹果机器学习研究团队展示全新生成式 AI 技术 HUGS


苹果研究员 Anurag Ranjan 在推文中表示,HUGS 使用机器学习和计算机视觉技术,在原始输入数据较少的情况下,能够创建出逼真的人像元素。这一技术采用了 3D Gaussian Splatting 的方法,能够在场景中创建可移动的人类形象。



苹果官方介绍中提到,虽然神经渲染技术在静态场景的摄影测量方面已经有了长足的进步,但目前还无法推广到环境中自由移动的人类。而 HUGS 技术则填补了这一空白,为创建逼真的人像元素提供了新的解决方案。


该方法本身需要少量的主体视频,通常在场景中运动,并显示尽可能多的表面供系统工作。在某些情况下,该技术对源输入数据的要求很低,最少可以低至 50 到 100 帧的单目视频,相当于 2 到 4 秒的 24fps 视频。



苹果声称,该系统已经过训练,可以“在 30 分钟内解开静态场景和完全可动画化的人类化身”。此外,苹果表示 SMPL 体模型虽然用于初始化人类高斯模型,但无法捕获每个细节。对于未建模的元素(如布料和头发),该过程可以偏离 SMPL 模型,来填补模型捕获中的空白。




苹果官方表示从训练视频到以 60fps 的渲染速度输出,能够在半小时完成人体建模和“最先进的渲染质量”动画,这比 NeuMan 和 Vid2Avatar 等其他方法快 100 倍。


总的来说,苹果发布的全新生成式 AI 技术 HUGS 为人像元素的创建提供了新的解决方案。这项技术能够在短时间内分析短视频并创建逼真的人像元素,具有广泛的应用前景。


特别声明:本文版权归文章作者所有,仅代表作者观点,不代表爱思助手观点和立场。本文为第三方用户上传,仅用于学习和交流,不用于商业用途,如文中的内容、图片、音频、视频等存在第三方的知识产权,请及时联系我们删除。


标签: AI 苹果
相关文章
  • 苹果布局本地 AI 开启“买买买”模式,大量收购AI领域初创公司

    苹果公司这是想继续通过“买买买”的方法来扩充其 AI 领域实力吗?

  • 苹果发力人工智能:2 亿美元收初创公司 Xnor.ai

    据熟知内情的消息人士透露,苹果公司收购了西雅图初创公司Xnor.ai,后者是一家专业致力于研究设备人工智能(AI)技术的公司。消息人士称,苹果公司以大约2亿美元的价格收购了Xnor.ai。虽然苹果公司和Xnor.ai均拒绝就此消息置评,但Xnor.ai网站基本上已经下线。Xnor.ai的技术能让公司在智能手机和其他便携式设备上本地执行深度学习算法,而不是要求这些计算在云服务中执行。Xnor承诺完全保密数据,且内存负载和能量需求较低。鉴于苹...

  • 消息称苹果将斥资 47.5 亿美元采购 2 万台 AI 服务器

    集邦咨询最新报告显示,超微电脑正在积极拓展苹果公司 AI 服务器订单,这有助于苹果在 AI 领域的布局和发展。据分析师郭明錤透露,苹果预计将在 2024 年斥资 47.5 亿美元购买超过 2 万台服务器以支持其 AI 技术,这一投入远高于 2023 年的 6.2 亿美元。苹果 CEO 蒂姆·库克表示,公司计划 2024 年在生成式 AI 领域“开辟新天地”(break new ground),并强调这将为用户带来变革性的机遇。业界预计,苹果将在今年 6 月的 WWDC 2024 ...

  • 苹果通过一系列收购和招聘布局 AI 技术

    英国《金融时报》报道,为进行人工智能技术的研发,苹果公司在进行一系列收购和招聘。苹果公司一直在致力于解决如何在移动设备上运行人工智能这一技术难题。为此,他们收购了多家 AI 初创公司,最近一次是在去年年初收购了加州公司 WaveOne。该公司提供基于 AI 的视频压缩技术。摩根士丹利最近的研究报告指出,苹果公司近一半的 AI 招聘岗位提到了“深度学习”这一关键词,而深度学习正是生成式 AI 的核心算法之一。早前消息表明,...

  • 郭明錤:预估苹果明年将斥资 47.5 亿美元采购 2 万台 AI 服务器

    郭明錤近日发布市场研究简报,预估苹果公司在 2023 年将采购 2000-3000 台 AI 服务器,在全球 AI 服务器出货量中占比为 1.3%;2024 年将采购 1.8 万-2 万台 AI 服务器,占比达到 5%。郭明錤认为,苹果采购的 AI 服务器主要为最常见、用于训练和推理生成式 AI 的英伟达 HGX H100 8-GPU,明年第 4 季度的采购芯片会加入 B100。H100 一片以 25 万美元(当前约 183 万元人民币)的价格进行计算,预估苹果 2023 年在 AI 服务器上的采购...