首页 > 科技未来 > 内容

2D图像变成3D,微软新的AI框架可能是游戏行业的福音

发布于:2024-06-18 编辑:匿名 来源:网络

雷锋网注:上图为微软模型生成的3D沙发、椅子和浴缸图像。

已经有许多组织将 2D 图像转换为 3D 形式。

已经做出了尝试,包括 Facebook 和 Nvidia 等公司的 AI 研究实验室,或者 Threedy.AI 等初创公司。

最近,微软的一个研究团队也发表了一篇预印本论文,展示了其基于非结构化 2D 图像生成 3D 形状图像的能力。

2D图像变成3D,微软新的AI框架可能是游戏行业的福音

通常,训练这样的框架需要通过光栅化进行差分步骤渲染,因此过去在该领域的工作主要集中在开发自定义渲染模型。

然而,此类模型处理的图像将显得不够真实和自然,并且不适合为游戏和图形行业生成工业渲染图。

微软研究人员这次有了新的突破——他们在论文中详细介绍了一个框架,而该框架中使用的“可扩展”训练技术在该领域尚属首次。

研究人员提到,当使用 2D 图像进行训练时,该框架能够持续生成比现有模型更好的 3D 形状,这对于缺乏创建 3D 模型经验的视频游戏开发商、电子商务公司和动画公司非常有用。

换句话说,它可以称为“福音”。

???具体来说,研究人员试图利用功能齐全的工业渲染器,可以根据显示数据生成图像。

为此,研究人员训练了 3D 形状的生成模型来渲染形状并生成与 2D 数据集分布相匹配的图像。

生成器模型采用随机输入向量(表示数据集特征的值)并生成 3D 对象的连续体素表示(3D 空间中网格上的值)。

然后将体素输入不可微的渲染过程,并在使用现有渲染器进行渲染之前将其阈值降低到离散值。

也就是说,它是代理神经渲染器直接渲染由 3D 形状生成模型生成的连续体素网格的新颖方法。

正如研究人员解释的那样,给定 3D 网格输入,需要对其进行训练以匹配现成渲染器的渲染输出。

生成对抗网络 (GANS) 在生成 2D 图像数据方面具有令人印象深刻的结果,并且许多视觉应用(例如游戏)需要 3D 模型作为输入,而不仅仅是图像。

2D图像变成3D,微软新的AI框架可能是游戏行业的福音

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 一家号称“真相帝”的公司,一个DEMO就能估值2亿

    一家号称“真相帝”的公司,一个DEMO就能估值2亿

    今天刀哥要说的公司,相当具有颠覆性。 他们做的商业调查大数据产品经常刷爆朋友圈。 很多企业在注册商标的时候,都想把能想到的名字都注册一遍。 比如,网友发现老干妈一次性注册了老干娘、神老马、老阿姨等商标……抢注各种商标也是如此。 毁三观,比如有一家历史上名字最长

    06-17

  • iPad mini将为谁“复活”?

    iPad mini将为谁“复活”?

    “即使只是换处理器,也不必要求全面屏。 ”作为多年iPad mini老用户的小志如实说道。 ▲ iPad mini 第五代(年份型号) 其实他用的是“最新”的 iPad mini 第五代(以下简称“iPad mini 5”),但为什么叫“老款”呢?仅仅因为iPad mini 5是2017年发布的,现在已经快三年了。

    06-21

  • MemVerge获1900万美元战略投资,推动数据中心“大内存计算”趋势

    MemVerge获1900万美元战略投资,推动数据中心“大内存计算”趋势

    雷锋网5月12日报道,MemVerge今日宣布完成英特尔等战略投资者1万美元融资、思科、NetApp 和 SK 海力士。 投资者方面,该公司此前的投资者高榕 Capital、Glory Ventures、Jerusalem Venture Partners、LDV、Lightspeed Venture Partners和Northern Light Venture Partners也参

    06-18

  • 全场景互动CEM服务商“小易数智”完成数千万元天使轮融资

    全场景互动CEM服务商“小易数智”完成数千万元天使轮融资

    据投资界(ID:pedaily)7月13日消息,近日,全场景互动CEM服务提供商“小医数智”宣布完成数千万元天使轮融资,由深创投领投,国宏嘉信资本跟投,青通资本跟投。 小蚁数智创始人&CEO宋博表示,本轮融资将主要用于SaaS产研团队的扩充、武汉产研基地的建设以及北京本地市场和

    06-18

  • 《知行合一》已完成近千万元天使轮融资

    《知行合一》已完成近千万元天使轮融资

    《知行合一》近日完成近千万元天使轮融资。 本轮融资由天使投资人黄建个人投资完成。 本次融资所筹资金将主要用于人才储备和补充流动资金。 智行合一成立于2019年10月,是一家总部位于广东珠海、专注于为失能、半失能老年人提供医养结合的服务型企业。 服务范围涵盖老年慢性

    06-17

  • 汽车智能科技公司“美嘉科技”完成超亿美元融资

    汽车智能科技公司“美嘉科技”完成超亿美元融资

    36氪独家获悉,汽车智能科技公司“美嘉科技”近期完成超亿美元融资,领投由超越资本。 湾区共同家园发展基金及南山资本、红点中国、山航资本等老股东也参与投资。 泰合之都充当专属财务顾问。 美嘉科技CEO庄莉透露,本轮融资发生得很快。 该项目于去年12月底启动,今年3月竣工

    06-18

  • 外资资管巨头蜂拥而至

    外资资管巨头蜂拥而至

    10月以来,上海迎来了包括负责人在内的多家知名外资金融机构的到访。 10月19日,上海市地方金融监管局局长周小全会见摩根士丹利投资管理亚洲区首席运营官、摩根士丹利基金管理(中国)有限公司首席运营官托德科尔特曼一行。 10月16日,周小全会见法国农业信贷银行(中国)有限

    06-17

  • 外媒:TikTok讨论不出售美国业务的解决方案

    外媒:TikTok讨论不出售美国业务的解决方案

    当地时间9月10日,据《华尔街日报》报道,TikTok母公司字节跳动正在与美国政府讨论可能的解决方案,以避免TikTok广受欢迎的应用程序短视频正在出售其全部美国业务。 自从中国政府采取措施加大TikTok向微软等美国科技公司巨头出售业务的难度以来,围绕TikTok不出售的讨论就变得

    06-18

  • 集成电路芯片开发商“中科瀚天下”获3000万元C轮融资

    集成电路芯片开发商“中科瀚天下”获3000万元C轮融资

    据投资界11月19日消息,集成电路芯片开发商“中科瀚天下”于今年8月完成万元C轮融资,同心企业、浑璞投资、南京科芯为新股东。 据了解,中科瀚天下成立于2007年,是一家集成电路芯片开发商。 主要从事射频/模拟集成电路和SoC系统集成电路的开发,以及应用解决方案的研究、开

    06-17

  • “易小象”完成Pre-A轮融资,南开大学创新基金注资

    “易小象”完成Pre-A轮融资,南开大学创新基金注资

    据6月10日消息,在线少儿象棋教育公司“易小象”近日完成Pre-A轮融资,获南开大学创新基金注资。 本轮融资之前,公司还获得了北塔资本的天使轮投资。 本轮资金将主要用于产品技术开发、人才引进和教学服务质量提升。 “玩小象”成立于2007年,专注于4-12岁儿童的象棋启蒙教育

    06-17

  • 20亿元专精特新(金华)母基金在金华启动

    20亿元专精特新(金华)母基金在金华启动

    据投资界(ID:pedaily)消息,3月28日下午,浙江省专精特新(金华)基金基金协议签字仪式在金华举行。 继浙江省科技创新专项基金(二期)之后,又一省级“四”专项资金落户金华。 浙江省专精特新(金华)母基金注册在金华市,总规模20亿元。 由浙江省产业基金、金华市产业基

    06-17

  • 天下无贼反信息诈骗联盟升维  大数据构筑新防御体系

    天下无贼反信息诈骗联盟升维 大数据构筑新防御体系

    天下无贼反信息诈骗联盟 升维大数据构筑新防御体系 2020年1月14日,全国首个反信息诈骗联盟——天下无贼反信息诈骗联盟召开新闻发布会,庆祝其成立深圳周年庆。 大会以“大数据天网,新系统防御”为主题,发布了《反信息诈骗大数据报告》(以下简称《报告》),首次对欺诈产业

    06-18