对VR来说, 眼球追踪技术在里面到底是一个什么角色?

简介:

眼球追踪技术对于VR来说,可能就像鼠标之于windows系统一样。

对VR来说, 眼球追踪技术在里面到底是一个什么角色?1

虚拟现实作为近两年刚刚兴起的行业越来越受到创业者的亲赖,仅仅去年一年,国内宣布进入VR领域的公司就有数百家,其中不乏腾讯、乐视、爱奇艺等互联网巨头。并且大部分从业者都认为2016年将成为VR元年,开始进入高速发展阶段。

VR之所以备受瞩目,主要因为它可以模拟真实的场景,让人在虚拟的世界里得到感官的满足。随着人们对VR体验诉求的提升,这种感官体验会越来越接近现实的感受,在此过程中眼球追踪技术将成为必不可少的应用模块。目前已有先驱者开始尝试通过眼球追踪技术解决VR领域目前所面临清晰度,沉浸感,自然交互等问题。

德国的一家眼球追踪技术公司在今年的CES大会上展示注视点渲染技术,国内的眼球追踪技术公司七鑫易维也在近期发布的视频短片中展示了眼球追踪在VR设备上的应用,其中局部渲染的功能将为VR带来一次质飞跃。目前VR硬件厂商所共同面对的问题便是用户的计算机硬件满足不了显示设备高清渲染的需求,以Oculus Rift为例,用户需要配备1000美金以上的计算机才能正常运行, Nvidia GeForce 970或AMD Radeon 290显卡的成本就达300美金,而这还仅仅是渲染1k的分辨率,要让渲染的分辨率匹配现实世界的分辨率,单眼必须渲染8K的分辨率,仅硬件配置这一项,就够厂商头疼的了。

为了解决这一问题,目前最被认可的方式便是结合眼球追踪的局部渲染技术。

人眼成像的过程中,中央凹视野(Foveal vision area)成像清晰,只覆盖视野1○~2○,视觉敏锐度高;周边视野(Peripheral vision field)成像是模糊的。

对VR来说, 眼球追踪技术在里面到底是一个什么角色?2

如图所示,当人眼在看屏幕H时,虽然整个屏幕都可以看到,但是只有B区域额中央凹视野是清晰的, AC区域成像模糊,因此在画面渲染过程中只需要渲染中央凹视野很小的范围,对周边视野区域进行模糊渲染。眼球转动,高清渲染区域随着注视点的变化而变化,这样既可以得到高清的视觉体验,又可降低GPU负荷,从而可以大幅的降低VR设备对硬件的要求。

除此之外,局部渲染的方案恰好与人眼成像特征相切合,无需人眼去主动适应屏幕,还会避免用眼过度造成的眼疲劳。

对VR来说, 眼球追踪技术在里面到底是一个什么角色?3

当然除了画面渲染方面,眼球追踪技术还可以大幅度提升VR设备的沉浸感。

人在观察周围景物时,并不总是要转头。人们习惯用眼球转动(而不是头部转动)去观察或追踪的角度范围叫做EOR(Eye-only range),EOR平均为±18°,垂直与水平方向的EOR有差异,平均水平EOR为±30°,垂直EOR为±12°。

也就是说,人们习惯通过眼球转动观察水平±30°,垂直±12°角度范围内的画面,而不是转头。但目前基于陀螺仪的交互方式,视角转换全部由头动完成,与现实中人们的习惯相违背,导致真实感缺乏,并且容易眩晕。眼球追踪技术恰好可以解决这一问题:用户可眼动与头动协同控制视角变化,真实重现现实中的视觉效果。同时,通过眼球转动与VR用户界面的交互可以直接用眼控控制菜单,触发操作,让人摆脱不自然的头部操作和晃动的画面。

对VR来说, 眼球追踪技术在里面到底是一个什么角色?4

眼球追踪技术在VR领域的重要性已经显而易见, Oculus的创始人Palmer Luckey也曾表示,眼部跟踪技术会成为VR技术未来的一个“重要组成部分”。不仅能实现注视点渲染技术,它还能用来创造一种深度传感,以创作出更好的用户界面。

对VR来说, 眼球追踪技术在里面到底是一个什么角色?5

众所周知光线在穿透透镜过程中会产生折射,所以目前的VR显示设备视角边缘都产生畸变和色差。Oculus正使用适用的光学优势试图修复该问题,但仅凭光学设计并无法完美解决,还需要在软件方面进行反畸变和色散的优化。现在已经有部分产品采用了以镜片中心为准的矫正方案,虽然有所成效,但是当人眼位置与镜片位置发生偏移时,反畸变的效果就会随之减弱。若让反畸变处理结合眼球追踪技术,将矫正方案调整为以人眼注视中心为准而不是镜片中心为准,矫正效果也会大幅提升。

眼球追踪技术对于VR来说就像鼠标于windows系统一样,它会让体验更完善,使用更方便,更容易被用户接受,虽然在VR设备上成功搭载眼球追踪技术的案例并不多,但是参照目前VR显示方案的快速迭代,可知眼球追踪技术将会成为VR设备最不可或缺的技术模块。


原文发布时间: 2016-01-13 15:49
本文作者: 黄通兵
本文来自云栖社区合作伙伴镁客网,了解相关信息可以关注镁客网。
相关文章
|
1月前
|
人机交互 语音技术 vr&ar
汽车品牌选择使用VR虚拟现实技术展示汽车
虚拟现实汽车展厅利用VR技术,为客户提供生动、便捷的在线购车体验。用户通过佩戴VR设备,可在虚拟环境中全方位观察汽车外观、内饰,了解功能并定制颜色和配置。此外,还可与虚拟工作人员互动,获取更多信息和建议。该展厅不仅节省了客户的时间和精力,也为经销商降低了展示成本,提升了销售效率。未来,随着VR技术的进步,展厅将更加智能和普及,进一步融合线上线下购车流程,提供更丰富的互动体验。
|
3月前
|
Go vr&ar 图形学
重塑体验:AR/VR技术在游戏与娱乐行业的创新应用
【10月更文挑战第29天】本文探讨了AR/VR技术如何改变游戏与娱乐行业,介绍了AR和VR的基本概念及其在游戏和娱乐中的应用实例,包括《精灵宝可梦GO》的AR开发和VR视频播放器的实现代码,并展望了未来的发展趋势。
289 2
|
6月前
|
vr&ar C# 图形学
WPF与AR/VR的激情碰撞:解锁Windows Presentation Foundation应用新维度,探索增强现实与虚拟现实技术在现代UI设计中的无限可能与实战应用详解
【8月更文挑战第31天】增强现实(AR)与虚拟现实(VR)技术正迅速改变生活和工作方式,在游戏、教育及工业等领域展现出广泛应用前景。本文探讨如何在Windows Presentation Foundation(WPF)环境中实现AR/VR功能,通过具体示例代码展示整合过程。尽管WPF本身不直接支持AR/VR,但借助第三方库如Unity、Vuforia或OpenVR,可实现沉浸式体验。例如,通过Unity和Vuforia在WPF中创建AR应用,或利用OpenVR在WPF中集成VR功能,从而提升用户体验并拓展应用功能边界。
135 1
|
6月前
|
机器学习/深度学习 编解码 人工智能
当前VR技术的限制与挑战:深入剖析与未来展望
【8月更文挑战第26天】当前VR技术在技术、内容、市场等多个层面仍面临诸多限制与挑战。然而,随着技术的不断创新和市场的逐步成熟,这些限制和挑战将逐渐得到克服。未来,VR技术有望在更多领域发挥重要作用,为用户带来更加丰富、便捷的沉浸式体验。我们期待VR技术的持续进步和广泛应用,共同见证这一科技领域的辉煌未来。
|
6月前
|
传感器 人机交互 vr&ar
VR技术的基本原理与发展历程:探索虚拟现实的无限可能
【8月更文挑战第24天】VR技术作为一项具有广阔前景和巨大潜力的技术,正在不断改变着我们的世界。让我们共同期待VR技术在未来的更多精彩表现吧!
1774 2
|
6月前
|
编解码 供应链 搜索推荐
VR技术在教育领域的应用前景:开启沉浸式学习新时代
【8月更文挑战第24天】VR技术在教育领域的应用前景广阔,它将为传统教育带来革命性的变革。通过提供沉浸式的学习体验和个性化的学习方式,VR技术能够激发学生的学习兴趣和动力,提高学习效果和综合素质。我们有理由相信,在未来的日子里,VR技术将成为教育领域的重要工具之一,为学生们带来更加丰富多彩的学习体验。让我们共同期待VR技术在教育领域的美好未来吧!
|
6月前
|
算法 人机交互 vr&ar
VR游戏设计中的用户体验考虑:技术深度解析
【8月更文挑战第24天】VR游戏设计是一个复杂而充满挑战的过程,它要求开发者在视觉体验、交互设计、音效与反馈、用户引导与界面设计以及性能优化等方面进行全面考虑。通过不断探索和实践,我们可以为玩家提供更加沉浸、自然和令人满足的VR游戏体验。随着技术的不断进步和应用场景的不断拓展,VR游戏的未来充满了无限可能。
|
8月前
|
人工智能 编解码 5G
虚拟现实(VR)与增强现实(AR)的融合:开启全新交互时代
【6月更文挑战第17天】虚拟现实(VR)与增强现实(AR)融合成混合现实(MR),打造全新交互体验。MR结合VR的沉浸感和AR的现实增强,应用于教育、游戏、设计和营销,带来创新教学方式、沉浸式游戏体验和高效设计工具。尽管面临技术挑战,随着5G和AI的发展,MR有望引领未来交互的革命。

热门文章

最新文章