高通发布视觉智能平台SoC QCS605/603,集成AI、视觉处理引擎
都说我们已经一只脚迈入了新的物联网时代,所有电子产品都可以自由接入到网络中,因此关于物联网市场成长速度是非常快的。高通昨天发布了全新的视觉智能平台(Qualcomm Vision Intelligence Platform),前期将会有QCS605和QCS603两款SoC,可以为物联网产品的图像视觉处理和机器学习提供强大的计算能力,采用最新的10nm工艺打造,具备更出色的能耗。
别以为这些都是小打小闹的SoC,其实它的性能非常强大,基于ARM的先进多核CPU、向量处理器和GPU在内的异构计算架构,还有最先进的图像信号处理器和高通人工智能引擎
该平台可为工业级与消费级智能安防摄像头、运动摄像头、可穿戴摄像头、虚拟现实(VR)360度与180度摄像头、机器人和智能显示屏等领域带来令人兴奋的全新可能性。
其中的人工智能引擎可以支持TensorFlow、Caffe和Caffe2框架进行开发的分析、优化与调试工具,这些框架都是深度学习常用的,因此可以降低开发者入门难度。该视觉智能平台可为深度神经网络推理提供高达每秒2.1万亿次运算,对比一些其它可选解决方案提升超过两倍。
该平台集成了高通最强大图像处理器——支持双1600万像素传感器的双14位Spectra 270 ISP,为更先进视觉处理功能铺平了道路,例如可防止高动态范围视频出现“叠影”效果的交错式HDR、电子稳像、畸变校正、降噪、色差校正,以及硬件运动补偿时域滤波。 可以轻松解决360 VR摄像头的内容凭借,扫地机器人的导航与避障等功能。
虽说是为物联网准备的,但在通信网络支持度上,QCS605和QCS603都非常先进,MU-MIMO、802.11ac 、蓝牙5.1。而高通Aqstic 音频技术/噪音抑制/回音消除技术可以为自然语言处理、长距离拾音、语音处理提供了必要的支持。
所以高通视觉智能平台并不是以往所看到的为物联网提供联网功能那么简单,它更像是在VR摄像机、智能家居产品中嵌入了一个性能强悍的心,可以成为一个设备的心脏。目前已经有合作摄像头厂商提供了搭载QCS605的VR 360度摄像头参考设计,相信搭载高通视觉智能平台SoC的设备会越来越多。