七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

简介:

眼球追踪技术不仅是目前全球最前沿的机器视觉技术,还是最为人性的VR技术。

2016年4月21日,在镁客网于上海世博展览馆主办的VR主题论坛上,七鑫易维副总裁彭凡发表了题为《眼球追踪技术——让VR更“人性”》的主题演讲。彭凡表示,眼球追踪技术是目前全球最前沿的机器视觉技术,是最为人性的VR技术。七鑫易维作为技术型公司,希望在未来能为行业提供眼控技术标准,将注视渲染做到极致。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

以下是七鑫易维彭凡的演讲实录:

目前,眼球追踪技术已经在国外的医疗领域和广告领域里有一些应用了。比如说,对于像霍金这样的帕金森综合证患者或者是一些全身都不能动的人群来说,能用眼睛来打字、控制电脑是非常重要的。这样的技术在国际上我们叫做眼控沟通辅具。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

眼球追踪技术是目前全球最前沿的机器视觉技术,它的原理就是用眼控仪捕捉用户头部运动和眼球转动的信号,实时计算出眼睛的注视点方向。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

七鑫易维作为技术型公司,认为当下VR行业有以下四个的瓶颈。首先任何技术的交互都是非常重要的,现在的VR交互大部分还是基于控制器,但是控制器并不能给用户带来真实感,而虚拟现实的特性之一就是真实感。未来VR的交互一定是机器去适应人而不是人去适应机器的。

人在进行信息获取时,有80%以上信息是来自于视觉的。所以说,未来VR体系中的交互技术必定会是眼球追踪、语音识别、手势识别、动作捕捉的集成。

第二个问题是显示。不知道大家在体验VR的时候有没有觉得画面不够清晰?现在大多的设备所能达到的单眼分辨率只有1K,而且计算机已经无法进行渲染了。但是如果想要用户在体验VR时有身临其境的感觉,那么左右眼的画面分辨率就必须要达到8K。

第三个是计算。如果我们想要拥有1000赫兹的渲染刷新率和单眼8K的分辨率,那么对计算机性能的要求就相当的高了。但是,现在市面上具有上好性能的计算机价格都非常的高,怎么把对计算机的要求降下来就变得尤为重要了。

最后一个是内容。我一直觉得内容不是一个很大的问题,因为当整个产业链的技术标准确定之后,我们的内容制造商是可以像智能手机一样快速的去复制内容的。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

眼球追踪技术承担着什么作用呢?上面这张图里的电脑屏幕上所显示的是一个体验者眼神的校准页面。眼控交互可以让VR更人性,让我们所看到的VR画面中任何一个物体或任何一个图标,都是出于人眼的自然反应。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

每一个人在看东西时的自然反应都是先用眼睛去看的,只有在需要看眼睛视觉范围外的东西的时候才会转动头部。可是当你每点一个图标都必须要进行头部的转动的话,就会觉得用头去看每一个图标是非常累的。在实验室的测试结果中表明,眼动交互特别是针对于二维UI来说其效率可以提高40%,这是在单纯的UI交互上比手势识别、语音识别还要快的一种交互方式。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

除了交互以外,注视点渲染也会为整个VR产业革命带去很大影响。现在VR设备的画面之所以不够清晰、计算量高,是因为我们对于渲染的要求高。但是,我们戴上VR头盔所看到的画面也只是注视点所在的位置而已,旁边的画面是看不到的。这和我们现实生活中的真实对焦一样,眼镜看任何东西都是有焦点的,是接收不到焦点以外的信息的。

所以,在做VR渲染的时候,只渲染画面注视中心的位置是非常实用的。也就是说,我们只对注视中心的画面进行100%的渲染,将注视中心边缘的画面按照一定的比例进行像素点和分辨率的降低,这样就能够有效的提升渲染速度以及降低渲染的计算量了。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

在游戏当中,眼控技术应用的并不多,这里举几个简单的例子,例如菜单的调用。一般情况下,我们的游戏画面中是不会显示菜单的,只有当玩家将眼镜的注视点放到画面的左上角或右上角时,菜单才会显示出来。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

另一个例子就是眼控手电筒。在游戏中特别是恐怖类游戏中,玩家的眼睛就是手电筒,眼睛的注视点就是手电筒光聚焦的那个点,这样一来,游戏的恐怖效果就会更强烈一些。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

随着现实中战斗机性能的越来越高,未来的战斗机在对战中很有可能就是用眼神去进行目标锁定的,因为这种锁定方式是最快的。七鑫易维目前做了一个游戏,是一款战斗机瞄准射击游戏。玩家可以用眼神去锁定战斗机,用头部的转动来控制战斗机的视野。对于VR来说,眼控技术其实就像是一个没有确定键的鼠标。

七鑫易维彭凡演讲实录:眼球追踪技术让VR更“人性”

七鑫易维是全球第一个做到全视场角追踪的公司。为什么要强调是全视场角呢?因为如果我们的追踪技术只能追踪到画面中心区域的话,计算机就不知道还有边缘的部分了,那么追踪的效果就会大打折扣。

要做高精度、低延迟的注视点渲染,需要随时随地采集到每一个人的注视点数据,这个数据的延迟必须非常小,因为每个人眼动的速度非常的快,七鑫易维现在已经可以做到120赫兹到380赫兹了。

第三个就是防抖。用户在戴上头盔后难免身体会随着画面进行一些运动,但是这会造成眼睛和传感器之间的剧烈抖动,而这种抖动会影响图像的呈现效果。做好防抖,就是为了给用户更好的体验。

七鑫易维近期会跟高通、AMD这样的很多芯片上游公司进行合作,帮助他们做注视点渲染。希望在不久的将来,VR行业里面就会出现由七鑫易维所提供的眼控技术标准。

我的演讲到此结束,谢谢大家。


原文发布时间: 2016-04-28 13:43
本文作者: 伶轩
本文来自云栖社区合作伙伴镁客网,了解相关信息可以关注镁客网。
相关文章
|
7天前
|
Go vr&ar 图形学
重塑体验:AR/VR技术在游戏与娱乐行业的创新应用
【10月更文挑战第29天】本文探讨了AR/VR技术如何改变游戏与娱乐行业,介绍了AR和VR的基本概念及其在游戏和娱乐中的应用实例,包括《精灵宝可梦GO》的AR开发和VR视频播放器的实现代码,并展望了未来的发展趋势。
22 2
|
3月前
|
机器学习/深度学习 编解码 人工智能
当前VR技术的限制与挑战:深入剖析与未来展望
【8月更文挑战第26天】当前VR技术在技术、内容、市场等多个层面仍面临诸多限制与挑战。然而,随着技术的不断创新和市场的逐步成熟,这些限制和挑战将逐渐得到克服。未来,VR技术有望在更多领域发挥重要作用,为用户带来更加丰富、便捷的沉浸式体验。我们期待VR技术的持续进步和广泛应用,共同见证这一科技领域的辉煌未来。
|
3月前
|
传感器 人机交互 vr&ar
VR技术的基本原理与发展历程:探索虚拟现实的无限可能
【8月更文挑战第24天】VR技术作为一项具有广阔前景和巨大潜力的技术,正在不断改变着我们的世界。让我们共同期待VR技术在未来的更多精彩表现吧!
1418 2
|
3月前
|
编解码 供应链 搜索推荐
VR技术在教育领域的应用前景:开启沉浸式学习新时代
【8月更文挑战第24天】VR技术在教育领域的应用前景广阔,它将为传统教育带来革命性的变革。通过提供沉浸式的学习体验和个性化的学习方式,VR技术能够激发学生的学习兴趣和动力,提高学习效果和综合素质。我们有理由相信,在未来的日子里,VR技术将成为教育领域的重要工具之一,为学生们带来更加丰富多彩的学习体验。让我们共同期待VR技术在教育领域的美好未来吧!
|
3月前
|
算法 人机交互 vr&ar
VR游戏设计中的用户体验考虑:技术深度解析
【8月更文挑战第24天】VR游戏设计是一个复杂而充满挑战的过程,它要求开发者在视觉体验、交互设计、音效与反馈、用户引导与界面设计以及性能优化等方面进行全面考虑。通过不断探索和实践,我们可以为玩家提供更加沉浸、自然和令人满足的VR游戏体验。随着技术的不断进步和应用场景的不断拓展,VR游戏的未来充满了无限可能。
|
3月前
|
vr&ar C# 图形学
WPF与AR/VR的激情碰撞:解锁Windows Presentation Foundation应用新维度,探索增强现实与虚拟现实技术在现代UI设计中的无限可能与实战应用详解
【8月更文挑战第31天】增强现实(AR)与虚拟现实(VR)技术正迅速改变生活和工作方式,在游戏、教育及工业等领域展现出广泛应用前景。本文探讨如何在Windows Presentation Foundation(WPF)环境中实现AR/VR功能,通过具体示例代码展示整合过程。尽管WPF本身不直接支持AR/VR,但借助第三方库如Unity、Vuforia或OpenVR,可实现沉浸式体验。例如,通过Unity和Vuforia在WPF中创建AR应用,或利用OpenVR在WPF中集成VR功能,从而提升用户体验并拓展应用功能边界。
64 0
|
3月前
|
vr&ar 图形学 开发者
惊呆了!VR技术在学习培训中大放异彩,未来教育新纪元已来,你还在等什么?赶紧上车!
【8月更文挑战第6天】随着科技的发展,虚拟现实(VR)正深刻影响教育与培训领域。VR技术通过计算机生成模拟环境,让用户沉浸并互动。例如,在医学培训中模拟手术,提升实操技能;在历史教学中“穿越”至古代,加深理解;在语言学习中构建虚拟交流场景,增强语言能力。基于此技术,开发者还能在游戏引擎如Unity中轻松创建VR应用,进一步丰富学习体验。随着技术进步,VR有望革新未来的教育模式。
51 1
|
4月前
|
编解码 人工智能 搜索推荐
VR技术的未来趋势?
【7月更文挑战第31天】VR技术的未来趋势?
73 5
|
4月前
|
传感器 安全 vr&ar
VR技术在军事训练中的用途?
【7月更文挑战第31天】VR技术在军事训练中的用途?
63 4
|
3月前
|
搜索推荐 安全 vr&ar
虚拟现实(VR)技术在教育领域的应用正在逐步深入
【8月更文挑战第1天】虚拟现实(VR)技术在教育领域的应用正在逐步深入
113 2

热门文章

最新文章

下一篇
无影云桌面