同创国芯窦祥峰演讲实录:VR的FPGA应用分析

简介:

FPGA的应用会给VR解决很多问题。

2016年4月21日,在镁客网于上海世博展览馆主办的VR主题论坛上,同创国芯市场总监窦祥峰发表了题为《VR的FPGA应用分析》的主题演讲。窦祥峰认为,将FPGA应用到VR上面去,可以有效地降低成本,加快研发速度、提升系统性能并缩小系统尺寸、提高安全性。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

以下是同创国芯窦祥峰的演讲实录:

首先我想给大家简单的回顾一下国内VR产业的发展趋势,让大家更清楚VR产业趋势技术难点,还有如何去把FPGA应用在VR领域。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

我们看这个表,无论是从市场规模还是同比增长上看,VR在2015年到2017年的发展可谓是爆炸式的,所以说,VR未来的市场是相当庞大的。

VR产品包括内容源还有硬件设备,而我们更关注于硬件设备的制造或者说是设计。

大家都很清楚,虚拟现实有两个重要的方面,一是沉浸感,二是反馈,包括人体视觉和身体感觉方面的反馈。给VR设备做一个简单的解释,从传感器的反馈形成现实世界的3D模型,进而形成整个系统。

我想阐述一下硬件设计在VR设备上可以实现的功能,目前无非是VR、AR设备的识别、定位、运算以及传输等,设计方案需要CPU、GPU或者说传感器这些IC基础器件和FPGA做支撑。

比如说在AR上更关心的是对输入信息的认知和理解,那么我们需要去处理诸如目标的定位、识别、跟踪技术、计算机视觉此类的问题。但是它的计算量对于我们系统的处理器或者是说GPU要求都很高,我们要怎么去有效的提升VR设备的性能呢?我认为需要增加FPGA,用以满足日益增加的运算量所带来的设计复杂度的提升。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

我们看这张表,中间的FPGA可以实现一些输入输出接口(I/O),比如高分辨率的Camera Link,我们可以利用FPGA做一些图像的缓存;再举个例子,DDR存储器或其他一些和上层设备交互的接口,都可以用FPGA做实现和处理。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这是在VR双目视觉上的FPGA应用。屏幕右边是我们公司的基础开发板,我们看到这两路的视频信号是可以分别用FPGA去做处理的。这个方案其实是将DSP和FPGA配合在一起,这样做的好处第一就是处理的速度非常的快。因为我们都知道FPGA有并行运算的优势,可以把运算的瓶颈从CPU或者GPU上面转移到FPGA里去处理,这样的话就可以降低整个系统的开销,从而提升系统的性能。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这是复合视频处理平台。可以看到复合视频输入FPGA,可以实现高速数据分析、视频信号检测等,处理之后再输出交到下一级,这也是FPGA和DSP(数字信号处理)配合的,如果FPGA的DSP的资源足够的话我们可以把这两个系统,FPGA和DSP合二为一形成自己的设备。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这是我们出于自己的安全考虑所做的。由FPGA做成有加密算法或者是系统的方案,满足我们对信息安全考量的需求。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

我想简单回顾一下FPGA给我们设计带来的好处,就是它可以有效降低成本、集成更多功能、实现GPU、CPU所能处理的工作,同时还可以做DSP(数字信号处理)和I/O(输入输出),另外就是它具有的灵活性。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这个芯片是可以被重复编程的,我们可以利用它去做我们的原形验证甚至是将其产品化。另外非常重要的一点就是它可以被快速的推向市场。现在的产品或者说设计,晚推市场一段时间利润就会减少很多,该怎么去占领市场先机呢?

我们在做产品定义或者系统设计、寻找解决方案的时候,去找通用的CPU或者是专用的芯片,往往时间上都不能得到有效的保证。FPGA可以自主开发提高产品的研发速度,可以缩短产品从研发到产品化的时间。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这是我们的应用领域。大家可以简单看一下,我们现在提供的有30K和130K还有180K的产品系列,这些完全可以满足我们对于视频处理、高速接口以及通讯传输功能的需求。同时它支持高速外部接口,可以满足很多我们对VR设备设计的需求。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

这是我们的设计软件,是同创拥有自主产权的编程软件,我们称之为PDS。这个软件的界面非常简洁,不会给用户带来设置上的负担。我们提供了丰富的IP资源以及多样化的使用方式。

同创国芯窦祥峰演讲实录:VR的FPGA应用分析

最后一点就是我们为什么要把FPGA用在VR或者AR设备上面?第一就是VR设备需要显示,FPGA在高分辨率图像或者说在图像的格式转换上面是非常灵活的。第二,加快了我们的研发速度。第三,缩小整个系统的尺寸,FPGA可以实现SOC化,整个系统面积可以得到有效的控制。第四,因为FPGA是多合一的,所以它可以有效的降低我们的系统成本。第五,具有安全性。我们的芯片可以加密,所以说如果有加密需求的话我们完全可以得到一个非常完善的安全系统。

我的介绍就是这样,谢谢大家。


原文发布时间: 2016-04-29 15:30
本文作者: 伶轩
本文来自云栖社区合作伙伴镁客网,了解相关信息可以关注镁客网。
相关文章
|
17天前
|
存储 算法 数据处理
FPGA:可编程逻辑设备的领军者及其在数字信号处理中的应用
FPGA:可编程逻辑设备的领军者及其在数字信号处理中的应用
21 2
|
17天前
|
存储 算法 测试技术
FPGA(现场可编程门阵列)技术概述及其应用实例
FPGA(现场可编程门阵列)技术概述及其应用实例
|
4月前
|
人工智能 搜索推荐 大数据
VR技术在教育与培训中的应用
虚拟现实(VR)技术作为一种先进的交互式技术,已经被广泛应用于游戏、娱乐等领域。然而,其在教育与培训中的应用也越来越受到关注。本文将探讨VR技术在教育与培训中的应用,揭示其优势和挑战,并探讨未来发展趋势。
|
13天前
|
数据采集 人工智能 算法
FPGA技术特点与应用效果
FPGA技术特点与应用效果
22 0
|
17天前
|
存储 算法 计算机视觉
FPGA在数字信号处理中的应用与实践
FPGA在数字信号处理中的应用与实践
|
28天前
|
定位技术 vr&ar Android开发
AR与VR在安卓开发中的应用案例
【4月更文挑战第14天】AR和VR技术在安卓开发中日益普及,改变生活和工作方式。AR应用于导航、教育、零售,如AR导航、解剖学教学工具和虚拟家居预览。VR则创造虚拟环境,用于游戏、旅游和健身,如VR游戏“Beat Saber”、虚拟旅游和VR健身应用。这些技术在医疗、房地产等领域也展现潜力,未来将有更多创新应用出现,开发者应关注并探索其可能性。
|
2月前
|
传感器 算法 机器人
在实用化人形机器人控制系统中深入应用FPGA的框架设计(基于特斯拉Optimus-Gen2的硬件系统)
针对实用化人形机器人的控制系统,以深入应用FPGA技术为指导思想做了一个框架设计,提供一个具象化的设计实例、参考技术方案,协助各研发团队及相关决策者了解这一技术思路的价值。 进而,笔者希望读者将这个框架设计与《在实用化人形机器人研发流程中深入应用FPGA技术的流程图》结合起来进行分析、思考,希望: 进一步降低将FPGA深入应用于人形机器人在纯粹技术维度上的门槛; 助力更多正在人形机器人领域参与竞争的团队 -- 及时做出实质性决策,及时将更多资源分配到深入应用FPGA技术这一竞争维度。
98 4
在实用化人形机器人控制系统中深入应用FPGA的框架设计(基于特斯拉Optimus-Gen2的硬件系统)
|
2月前
|
机器人 大数据 异构计算
在实用化人形机器人研发流程中深入应用FPGA技术的流程图(基于工信部《人形机器人创新发展指导意见》)(版本A)
这个流程图将人形机器人视为一个多入多出的反馈控制系统,针对实现工信部《人形机器人创新发展指导意见》所要求的以应对真实场景下的复杂环境与任务、应对突发情况为特征的实用化人形机器人功能需求,在基于CPU+软件体系结构的人形机器人控制系统之中涉及多通道并行处理且需精准协同、强实时性(低延迟量+低延迟抖动量)、大运算量、大数据传输量且构成实时性性能瓶颈的环节中导入FPGA。
23 0
|
算法 异构计算
色彩空间的转换简单应用(理想情况车牌数字的提取)matlab仿真和FPGA实现
色彩空间的转换简单应用(理想情况车牌数字的提取)matlab仿真和FPGA实现
89 0
色彩空间的转换简单应用(理想情况车牌数字的提取)matlab仿真和FPGA实现
|
存储 数据可视化 物联网
3DCAT荣获2021金陀螺“年度XR行业技术创新奖”“年度优秀VR行业应用奖”两项大奖
作为年度行业影响力大奖,第六届金陀螺颁奖典礼与2021未来商业生态链接大会(简称“FBEC2021”)同期举办。金陀螺奖金陀螺奖旨在对优质作品/项目及优秀企业做出嘉奖,鼓励创业者、从业者们不断进步,至今已成功举办六届,在行业上下游建立广泛影响力。其公正性与权威性获得了业界的极大好评与认可,具有极高的权威性和代表性。
3DCAT荣获2021金陀螺“年度XR行业技术创新奖”“年度优秀VR行业应用奖”两项大奖

热门文章

最新文章