这颗视觉神经网络协处理器，将是HoloLens未来的神秘武器

【逐日科技网】3年前 HoloLens 刚刚曝光的时候，这款微软开发的混合现实 (Mixed Reality) 头显设备，能够以 60Hz 的刷新率，将画面与佩戴者通过设备透镜看到的真实世界叠加在1起，带来史无前例的人机视觉交互体验，被人们惊讶地称为黑科技。

在夏威夷正在召开的国际计算机视觉和模式辨认大会 (CVPR 2017) 上，微软首次宣布了下1代 HoloLens 的重要硬件配置：2 代 HPU 处理器 (HoloLens Processing Unit) 将搭载1颗协处理器，专门用于在本地运行各种深度学习特别是计算机视觉范畴所广泛使用的深度神经网络 (DNN) 架构。

HoloLens 科学主管马克波利菲 (Marc Pollefeys) 在公司博客里指出，HoloLens 单机运行，不外接电源和数据，其 HPU 需要对 HoloLens 搭载的各种摄像头、传感器和手势追踪数据进行处理计算，对本地计算能力带来了非常大的需求。而下1代 HoloLens 需要借助深度神经网络计算来实现更强的计算机视觉能力，此时通用多核处理器(比如酷睿处理器或 HPU)就显得心有余而力不足了：在本地运行1个已训练好的神经网络，通常会占用处理器的所有核心的绝大部分，导致没有足额算力去处理其他任务，比如运行操作系统等等，这会导致系统崩溃，硬件死机等结果。

第1代 HPU 架构

而新协处理器的任务是帮 HPU 分担神经网络计算的任务，从而解放 HPU 去处理其他计算任务从感觉上有点像苹果 iOS 设备的 M 系列协处理器所承担的环境和感知计算的任务，能够低功耗处理运动传感器传回的数据。

根据微软其实不充分的资料，我们可以确认协处理器的核心功能就是低功耗、低延迟运行各类深度神经网络。微软全球实行副总裁沈向洋在 CVPR 2017 上介绍，协处理器可以运行非常广泛的神经网络类型，且完全可编程，能够在本地富有弹性地运行深度神经网络。

听上去协处理器由微软定制开发，不过可编程这个用语很难不让人联想到 FPGA，也即可编程逻辑门阵列，1种自定义程度较高，可以现场重新编程改变处理器运行逻辑的新处理器技术。FPGA 市场领导者之1的 Altera 已被英特尔收购，而考虑到微软和英特尔久长的合作关系，该公司在第1代发售版 HoloLens 中已使用了英特尔 Cherry Trail 架构 32 位处理器，这枚新协处理器的技术提供商可能也是英特尔。

料想仍然只是料想，意外的情况也有可能出现。不过另外1件有趣的事是，1样在 CVPR 2017 上1家名为 Movidius(也已被英特尔收购)的爱尔兰公司正式推出的神经网络计算棒 Neural Compute Stick，其技术用途和优势和微软宣布的协处理器几近完全1致：NCS 的常规运行功耗低于 1W，能提供超过 80⑴50GFLOPS(10亿次浮点计算)的惊人算力，通过 USB 外接到设备上，用于分担计算机视觉方面的计算，基于的是 Movidius 自研的 Myriad 2 视觉处理器(Visual Processing Unit) 。

之前 Movidius 内部知情人士告知我，正在和1家业界巨头共同开发基于 Myriad 2 的芯片，听起来像是微软本次宣布的协处理器。对协处理器开发合作伙伴的料想，微软方面表示不予置评。

除微软和英特尔，英伟达也在今年推出了1种名叫 Volta 架构的芯片，和英特尔的 FPGA 对抗;Google 则抢先了1步，早在1两年前就开始在其数据中心中使用自研的 TPU 补足乃至取代 CPU 和 GPGPU。

这些公司的策略各有不同，但主要有两个方向，1个是在低功耗上本地运行优化的神经网络(Movidius、微软协处理器)，另外1个是在没有严格功率限制的条件下进1步推动算力(TPU、Volta)。另外也有1些小型初创企业采取的方向是为垂直行业定制专门的芯片。不管怎样，专门为了训练或推理(运行)神经网络而定制芯片，已成了前沿科技公司共同领导的趋势，以致于显卡不再是人工智能相干计算的首选设备。