首页 > 科技启迪 > 内容

NVIDIA最新的眼球追踪技术或将改变VR行业

发布于:2024-06-17 编辑:匿名 来源:网络

人眼所能看到的范围是有限的。

如果你看黑板上方的挂钟,那么你的眼睛聚焦的地方就是焦点,除了时钟之外的任何物体都会自动变得模糊。

我们身处一个被度数包围的世界,但人类在任何时候都只能看到度数范围内的事物,而人眼只会聚焦在视野中不超过6度的小区域,而周围区域变得模糊。

这就是我们看待世界的方式。

NVIDIA正在开发上述模拟人类视觉效果的眼动追踪技术,用于虚拟现实,并于昨天公布了该技术的最新进展,这将使虚拟世界更加真实。

VR硬件厂商的痛点 VR硬件厂商目前面临的问题是玩家自己的电脑硬件无法满足显示设备的高清渲染需求。

Oculus Rift仅渲染1k分辨率,需要一台价值超过的电脑才能正常运行。

渲染分辨率必须与现实世界的分辨率匹配,单眼渲染必须达到8K。

光是硬件配置就足以让厂商头疼了。

为了解决这个问题,目前最认可的方式是本地渲染技术结合眼动追踪。

眼动追踪技术将渲染的重点放在用户眼睛真正关注的画面上,因此对GPU的要求大大降低。

在过去的九个月里,Nvidia的David Luebke和研究人员试图在虚拟现实环境中模拟这种现象:设备将完全渲染用户目光聚焦的区域,但会降低失焦区域的分辨率。

当玩家将注意力集中在画面的一小块区域时,眼动追踪系统会不断调整渲染焦点。

为了以 90FPS(可接受的最低帧速率)完全渲染场景,百万像素场景必须每秒渲染近几次。

仅专注于用户视线聚焦的地方的渲染将大大减轻计算任务。

现有眼动追踪技术的应用 眼动追踪技术在虚拟现实研究中并不新鲜。

眼动追踪的常见实现原则是:  1。

基于眼球和眼球周边特征变化的跟踪  2。

基于虹膜角度跟踪的变化  3。

主动将红外光束投射到虹膜上以提取特征。

目前在虚拟现实领域,日本公司FOVE已经开发出首款采用眼动追踪技术的虚拟现实耳机。

FOVE嵌入头盔的眼部位置。

眼镜镜片下方放置了两个红外摄像头,不会影响视野范围,并且可以追踪玩家的瞳孔活动。

另一家正在进一步研究眼动追踪混合技术的公司是Tobii,它与Starbreeze合作,将眼动追踪技术集成到具有5K图像质量和10度视场的StarVR耳机中。

德国眼动追踪技术公司SensoMotoric Instruments(以下简称SMI)在去年的开发者大会上展示了与索尼Magic Lab合作的远程眼动追踪系统。

在与三星合作期间,我们推出了SMI移动眼动追踪HMD Observation,这是一个可以在虚拟环境中定性观察和记录视觉行为的应用程序安装包,以及SMI移动眼动追踪HMD Analysis Pro,可以提供简单的分析以及注视行为分析。

HTC Vive 和 PlayStation VR 目前不使用眼动追踪技术。

NVIDIA最新的眼球追踪技术或将改变VR行业

Oculus创始人Palmer Luckey在接受采访时表示,眼动追踪技术是未来VR技术“最关键的组成部分”,但随后又提到了目前的眼动追踪技术。

解决方案仍然处于低端。

如何解决画面延迟正如Oculus创始人Palmer Luckey所说,虽然很多公司已经拥有这项技术,但眼动追踪技术的速度往往跟不上人眼运动的速度,渲染速度也并不完美。

这导致屏幕显示持续延迟,让用户感觉不舒服。

去年5月,Nvidia推出了MRS(多分辨率着色)来加速渲染,专门解决虚拟现实设备中常见的图像延迟问题。

这项技术使得VR渲染不再是以相同分辨率渲染整个屏幕的问题。

,但分为几个不同的区域。

焦点区域将以全高分辨率渲染;而屏幕边缘将以较低质量渲染。

另外,变形后边缘像素的损失可以节省25%-50%的像素,理论上可以提高Double渲染速度。

近日,NVIDIA与SMI合作推出了最新的眼动追踪虚拟现实显示器,可在Hz帧率下实现精准、低延迟的眼动追踪。

卢克表示,这是他们的眼球追踪设备第一次能够跟上眼球运动。

虽然焦外分辨率协调的延迟问题得到了一定程度的解决,但画面效果仍然有所欠缺。

NVIDIA 团队仍需要花费大量时间来精确计算最佳水平,以降低失焦图像的分辨率,以避免被观众注意到。

在降低分辨率的过程中,任何闪烁都会令人不安,并且可以通过失焦视觉轻松检测到。

如果离焦图像过于模糊,就会产生隧道视觉效果,让人感觉就像通过望远镜看东西一样。

为了解决这个问题,NVIDIA研究人员最近发现,通过增加失焦图像的对比度并降低分辨率,可以“欺骗人眼”。

未来,英伟达希望这一发现能够鼓励主流虚拟现实设备制造商在其产品中加入眼动追踪技术。

NVIDIA最新的眼球追踪技术或将改变VR行业

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 劳力士在二手市场“跳水”

    劳力士在二手市场“跳水”

    以劳力士、百达翡丽为代表的高端品牌在二手市场日益“失宠”,引发二手表商和杠杆炒家叫苦不迭。 来自上海的制表师商奢和小主制表师创始人沈正奇向时代财经透露,“我们年底回收的一只爱彼橡树系列5的价格高达1万元。 今年7月,以1万元的价格出售。 他直接损失了1万元。 “这

    06-17

  • 共享床位关闭现场调查:不合规床位依然存在,专业VC上门检查

    共享床位关闭现场调查:不合规床位依然存在,专业VC上门检查

    才流行不到两周的共享床位因存在“安全隐患”这两天就“封城”了。 新闻话题。 据报道,北京、上海、成都等城市出现了长约2米、宽约1米、形似太空舱的“共享床”,并因火灾隐患相继被关闭。   真相是什么?   猎云网进行了现场调查,并致电拥有“共享床”的公司北京睡眠科

    06-18

  • 中芯国际与ASML签订12亿美元订单

    中芯国际与ASML签订12亿美元订单

    相关消息:中芯国际成熟工艺设备供货许可证获批。 中芯国际宣布,公司已完成2020年3月16日至2020年3月的批量采购协议,2日12个月期间与ASML集团签署采购订单,用于采购ASML产品,订单总金额1 美元,,,.中芯国际目前提供0.35微米至14纳米不同技术节点的晶圆代工和技术服务。 其

    06-06

  • 对外投资合作指南(澳大利亚)——中资企业在澳大利亚开展投资合作应注意的问题及对策

    对外投资合作指南(澳大利亚)——中资企业在澳大利亚开展投资合作应注意的问题及对策

    8.中资企业在澳大利亚开展投资合作应注意的问题及对策 8.1 对澳大利亚投资合作的主要风险 合作面临以下风险: (一)疫情 目前,澳大利亚新冠肺炎(COVID-19)疫情依然严峻。 截至今年7月,澳大利亚仍未完成接近覆盖全体人口的疫苗接种。 澳大利亚于 2018 年 12 月 1 日开放边

    06-18

  • 又一位车企老板濒临破产:匆匆交棒95后孙女

    又一位车企老板濒临破产:匆匆交棒95后孙女

    又一位汽车公司老板濒临破产:1995年出生的孙女匆忙交出大权。 在重庆首富造车的梦想破灭了。 8月27日晚间,力帆股份发布半年报。 上半年,力帆不仅亏损26亿元,净资产降幅也扩大至96.12%,只剩下1亿元。 第二天开盘,力帆的股价就跌停。 这家成立20多年的老牌国产车企濒临破

    06-18

  • 据河北新闻网报道,石家庄市将设立两大产业发展基金,总规模达200亿元

    据河北新闻网报道,石家庄市将设立两大产业发展基金,总规模达200亿元

    投资界(ID:pedaily)9月13日消息,为深入贯彻落实石家庄市第十一次党代会精神石家庄市按照市两会精神,充分发挥政府产业基金促投资、扩投资、稳增长的关键作用,推动新一代电子信息两大产业发展生物医药率先取得突破。 石家庄市将设立石家庄市主导产业发展基金(以下简称“

    06-18

  • 投资界新闻 - SI集团与上海医药集团联合设立500亿生物医药产业基金

    投资界新闻 - SI集团与上海医药集团联合设立500亿生物医药产业基金

    投资界消息(ID:pedaily),上海医药与上海医药集团将联合设立上海生物医药产业基金,规模达1亿第一期1亿多元,最终规模1亿左右。   据财联社报道,上海医药董事长周军表示,产业基金不是简单的投资基金,而是一个平台。 “两家公司未来将打造几个大平台,推动上海医药生物

    06-17

  • 1800亿巨头低价卖,只卖36亿

    1800亿巨头低价卖,只卖36亿

    为什么低价卖? 出奇。 一家市值1亿美元的公司最近被以5亿美元的低价出售。 其股东包括但不限于阿里巴巴、京东、腾讯。 它就是Farfetch,一家成立于2008年的英国奢侈品电商平台,2009年在纽约证券交易所上市。 这次的买家是韩国公司Coupang。 官网显示,其成立于2007年,总部

    06-17

  • 同性恋社交应用Zank是如何冲出红海并获得B轮融资的?

    同性恋社交应用Zank是如何冲出红海并获得B轮融资的?

    就在昨天,同性恋社交软件Zank宣布获得上市公司昆仑万维的数千万元B轮融资。 赞克创始人和首席执行官凌绝顶表示,融资资金将用于完善同志电子商务平台的建设和直播产品的开发。 资本看好“粉色经济” 互联网进入移动时代以来,社交软件层出不穷,充斥着人们的手机。 在以微信

    06-18

  • OpenAI与微软成立1亿美元AI创业基金

    OpenAI与微软成立1亿美元AI创业基金

    》5月27日,OpenAI正式宣布成立OpenAI创投基金,将通过该基金向AI公司投资1亿美元。 OpenAI正在寻找少量早期初创公司,这些公司所在的领域人工智能可以产生变革性影响,例如医疗保健、气候变化和教育,以及基于生产力的人工智能工具。

    06-17

  • B轮融资3180万美元, 2年内已获得4轮融资,营收超15亿元,这家售油公司已经实现全面盈利!

    B轮融资3180万美元, 2年内已获得4轮融资,营收超15亿元,这家售油公司已经实现全面盈利!

    据投资界8月24日消息,找游网宣布公司已完成1万美元B轮融资,由DCM领投,Wagonbang跟投,SIG耀明亚洲、云九等A轮投资方本轮融资,云启资本、GGV纪源资本、Venture Partners均继续跟投。 冲盈资本担任本轮融资独家募资方。   找油网创始人与CEO吕健表示:“未来,找油网将在

    06-18

  • 存储芯片需求放缓,三星电子高管表示没有减产计划

    存储芯片需求放缓,三星电子高管表示没有减产计划

    TechWeb 据报道,目前存储芯片市场形势并不乐观。 由于对全球经济衰退的担忧而导致的需求放缓已经影响了终端产品的开发。 需求反过来又影响存储芯片的需求。 有研究机构预测,NAND闪存和DRAM的价格正在下降,明年市场供过于求的情况将加剧。 存储芯片需求放缓和价格下降将不

    06-06