微软设计了一种特殊的处理器来处理全息透镜数据

微软设计了一种特殊的处理器来处理全息透镜数据

在微软的构建大会上,微软分享了一些关于增强现实全息镜头耳机内部组件的额外细节。

微软操作系统组技术研究员亚历克斯·基普曼(alexkipman)周四表示,HoloLens与传统PC一样,包含CPU和GPU。但耳机也使用了一个定制的全息处理单元来处理来自设备中的许多传感器的数据。

Kipman说,HoloLens包括用于捕捉声音和语音命令的麦克风,以及用于绘制人周围空间的摄像头。

他说,这意味着耳机将接收大量数据,比如一个人在看什么、伸手拿什么,以及周围的环境,比如桌子的位置。HoloLens不会让人沉浸在完全虚拟的环境中。相反,当一个人透过耳机的镜头看的时候,他们看到了周围的全息图像。

Kipman说,使用第三个处理器可以释放CPU和GPU来运行开发人员创建的应用程序。

微软没有透露HoloLens在没有连接PC或智能手机的情况下如何工作的细节。

“所有的基础设施都在设备的顶部,”基普曼说,并补充说,全息透镜是“一个独立的完全无约束的全息计算机。”

HoloLens用于整合手势控制和凝视的api在windows10上可以找到,因此任何建立在微软通用应用平台上的程序都可以在耳机上运行,他说。他说,在HoloLens中用来处理语音命令的语音引擎与微软语音控制数字助理Cortana后面的相同。

全息镜头中的相机可以用来捕捉静止图像和视频。Kipman说,这种相机还可以用来拍摄结合了虚拟和真实环境的混合现实照片。他举例说,一个戴全息镜头的人可以拍一张现实世界中某个人与3D物体互动的照片。

开发人员正在寻找访问全息透镜的传感器是运气不佳。他们只能访问传感器API,Kipman说。他说,允许开发人员修改传感器并不能在所有全息镜头上创造统一的体验。Kipman说,如果开发人员创建的程序只在HoloLens上工作,并且传感器以某种方式进行了修改,那么app store中的软件就不会是一致的。

弗雷德·奥康纳为IDG新闻社撰写了关于IT职业和健康IT的文章。在Twitter@fredjoconnor上关注Fred。弗雷德的电子邮件地址是弗雷德connor@idg.com