close
当前位置: 物联网在线 > 技术文库 >

虚拟现实从SoC开始

1.高通的VR参考设计利用了该公司的Snapdragon 845 SoC。

参考设计和开发套件软件支持foveated渲染。这可以利用眼动追踪反馈来识别某人正在寻找的位置,从而使渲染软件能够将渲染资源集中在该区域,同时减少其他区域的处理。这是至关重要的,因为渲染是计算密集型的,即使使用这个SoC也会提高性能。由于通过周边视觉观看,降低的图像质量并不明显,因此系统可以在用户所关注的区域提供更详细的渲染。

Snapdragon 845虚拟现实开发套件包括主要组件,如房间级六自由度(6DoF)同时定位和映射(SLAM)支持,Qualcomm Adreno Foveation,眼动跟踪支持和边界系统支持。房间规模的6DoF SLAM支持旨在使用“内置式”SLAM提供无限制的VR支持。这是通过使用传感器集成完成的,包括运动传感器,如3D陀螺仪和加速度计,以及眼动跟踪和摄像头输入。

眼动追踪支持是与Tobii一起开发的Tobii的EyeCore眼动追踪算法被整合到开发套件的软件中。它允许利用凝视方向信息呈现内容以进行快速交互,并使软件能够提供更直观的用户界面。

边界支持用于识别真实世界约束,以便应用程序可以向用户提供反馈。这可能是通知或游戏玩法或演示文稿变化的形式。

Snapdragon内窥视

Snapdragon 845 (图2)基于Kyro 385 CPU构建,该CPU具有8个内核,其中包括4个基于64位ARM Cortex-A75的2.8-GHz高性能“Gold”内核,以及4个1.8-GHz高性能“基于ARM Cortex-A55的高效“银色”内核。这些可以在big.LITTLE配置下运行,以平衡性能和功率利用率。

2. Snapdragon 845集成了8核Kyro 385 CPU以及一系列加速器,包括具有高级AI支持的DSP。

SoC还具有一系列内置加速器,子系统和外设,包括Snapdragon X20 LTE调制解调器。例如,Adreno 630视觉处理子系统设计用于驱动2400×2400像素的显示器,尽管参考设计的分辨率为1024×1152像素。该子系统处理支持4K视频,H.264(AVC),H.265(HEVC),VP9和DisplayPort over USB Type-C支持的图形,视频和显示处理。它处理房间尺寸的6DoF SLAM。

然后是Hexagon 685 DSP,包括Hexagon Vector DSP(HVX),用于音频处理的Hexagon Scalar DSP,用于传感器融合的Hexagon All-Ways Aware Hub以及Qualcomm的Snapdragon神经处理引擎。后者提供了机器学习(ML)应用程序的支持。该系统还包括Qualcomm Aqstic和aptX音频支持。

Spectra 280图像信号处理器具有14位图像信号处理架构,可支持30帧/秒的单个32百万像素相机,30帧/秒的双16倍像素相机和一个单一的HFR 16 - 60像素/秒的像素相机。它最多可以保持七个摄像头输入。

SoC还具有安全处理单元(SPU),支持MIMO的802.11ad多吉比特Wi-Fi以及蓝牙5和GPS支持。

此外,高通还宣布支持HTC Vive Wave VR SDK,该SDK将与Snapdragon 845虚拟现实开发套件配合使用。它将在今年晚些时候推出。Vive Wave VR SDK将通过多OEM OEM Viveport应用程序商店为未来支持HTC Vive的产品提供货币化应用程序。



(责任编辑:ioter)

用户喜欢...

以前的英特尔Exec能否成功采用旧的ARM SoC?

由英特尔总裁ReneJames领导的创业公司安培计算公司(Ampere Computing)推出了基于ARM的服务器SoC,承诺加速超大规模云计算创新。 蕾妮詹姆斯 詹姆斯的新公司将瞄准由英特尔主导的快速增长的数据...


[原创] On Semi RSL10多协议无线系统级芯片(SoC)开发方案

On Semi公司的RSL10是超低功耗的多协议无线系统级芯片(SoC),采用ARMR CortexRM3处理器(48MHz)和LPDSP32 DSP核(音频CODEC),支持蓝牙...


RohdeSchwarz便携式4.0GHz的频谱分析仪里面的Zynq AP SoC

背景: 无论是在实验室调试嵌入式设备,还是在外场解决复杂的问题,都需要一款便携式的频谱分析仪,在要求有高性能和较宽的测试范围的同时,我们还希望这个仪器有着较小的功耗,这...


Aldec的边缘计算示例: Zynq SoC 的 FPGA架构将嵌入式视觉/ ADAS性能提升了10倍

Aldec的一个应用工程师 Farhad Fallah 在 New Electronics 网站上发表的一篇题​​为生活在边缘的文章最近引起了我的注意,因为它简洁地描述了为什么 FPGA 对于许多高性能的边缘计算应用如此有用...


瑞萨电子携其展示车亮相2018 CES,助力加速ADAS、自动驾驶和驾驶舱开发的量产化进程

瑞萨电子株式会社今日宣布推出了新一代先进驾驶辅助系统(ADAS)、自动驾驶以及网联驾驶舱展示车。瑞萨电子三款...


Amazon Alexa和Google Home语言系统的前驱服务者:13个MEMS 麦克风+Zynq SoC

背景: 说到语音识别,吸引的大家关注的有两大主力:亚马逊的Alexa和Google伴的Home。首先说说Alexa,随着智能家居Echo受到热捧,亚马逊的语音私人助手Alexa持续受到消费者关注。Alexa能围绕着...


SDSoC 2017.2 版本已经全面开放下载了!

SDSoC 开发环境可为异构 Zynq AllProgrammable SoC 及 MPSoC 部署提供类似嵌入式 C/C++/OpenCL 应用的开发体验,如简单易用的 Eclipse IDE 和综合设计环境,全系统优化编译器可实现可编程逻辑中的自动软件...


小板子大智谋——Aldec公司的TySOM-3-ZUEV囊括了Zynq UltraScale+ MPSoC,DDR4 SoDIMM,WiFi,Bluetooth,HDMI,FMC等等单元于一身

背景: 你需要将大量的嵌入式资源放到一个很小的空间里面么?如果需要,那么你不妨看一下Aldec TySOM-3-ZU7EV这款嵌入式的业界新宠,它将Xilinx Zynq UltraScale+ ZU7EV MPSoC以及DDR4 SoDIMM,WiFi,蓝牙...


在Arty Z7上入门Xilinx SDSoC开发工具

作者:阿Q 来源:开源硬件创客坊微信公众号 细心的小伙伴们可能早已留意到,在Digilent今年全新出品的Zynq评估板中,无论是第二代经典入门级的Zynq™ Board - ZYBO Z7,还是创客最爱的ARTY Z7,都...


可编程SoC帮助制造商在可配置性和性能之间找到合适的平衡点

虽然半导体技术是所有电子产品的基础,但它是真正使我们的现代世界成为可能的软件。与硬件相比,软件提供了几乎无限的灵活性,在高性能微处理器上运行时,可以产生惊人的结果。例如,...