两个大脑的想象力:从双核NPU的麒麟980,展望华为年度旗舰Mate 20走向
2018年最后一个新机季,以万众瞩目的麒麟980发售作为开端。去年麒麟970的发售似乎已经成为了一个标志,从麒麟970引入神经网络单元NPU开始,AI芯片的力量开始进入终端,开启了至今仍然火热的手机AI时代。
(华为消费者业务CEO余承东发布麒麟980)
如今麒麟980已经发布,又正式提出于10月16日率先搭载在HUAWEI Mate 20中发售,有关这款芯片的想象,已经达到了顶峰。麒麟980头顶的“第一款7nm移动AI芯片”光环,又意味着将怎样影响技术风向和应用动势?今天我们尝试以麒麟980的技术工艺为原点,勾勒出年度移动终端应用的轮廓。
(首款搭载麒麟980芯片的手机华为Mate 20系列将于10月16日发布)
原点之上的果然与惊喜
这次麒麟980的发售,带给了人们一个“果然”和一个“惊喜”。
麒麟980的“果然”,就是应用上了7nm的纳米级工艺。从去年开始,坊间就传出了半导体制造工艺进一步发展,下一代芯片要从10nm进化到7nm的传闻。华为、苹果、高通也都卯足了劲想要拿到7nm的一血,这一次看来是被华为拔得了头筹。
从2015开始,华为海思就已经将7nm芯片纳入规矩。如今相比10nm的麒麟970,麒麟980在性能上提升了20%、能效上提升了40%、晶体管密度提升了1.6倍。通过晶体管容积的提升,去提升运算效率与能效,这一点可以说是意料之中的“果然”。但建立在运算效率、能效之上的双核NPU,却是“果然”之外的“惊喜”。
NPU的神经网络运算能力已经足够强大,如同为手机安装上了一颗“最强大脑”。人们很难想象麒麟980在NPU上还能带来什么变革,但建立在更先进的半导体制造工艺之上,麒麟980足以容纳两颗大脑——这就给这块芯片带来了无限想象空间,首款双核NPU移动芯片的出现,会大幅度提高AI任务的终端处理效率。而这一点会比GPU或CPU的提升更能直接地影响到手机的使用体验,尤其是在手机应用纷纷尝试运用端侧算力的当下。
我们知道,麒麟芯片直接决定着此后一年华为旗舰机的特性与功能走向,那么麒麟980的双核NPU特征,决定了未来一年华为产品的哪些新技术趋势呢?两颗大脑的共同作用力,自然会强过一颗大脑的单打独斗。双核NPU的来袭,让我们见证了如下想象力。
划出第一笔:双脑计算的瞬时之美
评判芯片在AI上的计算能力,通常都以图像识别作为评判标准。毕竟在端侧AI的很多应用场景中,例如图像视频、视频处理等等本质上都是在进行图形计算,而这也是年度移动终端轮廓的第一笔。
去年,单核NPU的麒麟970在图像识别速度上已经能达到2000张/分钟,而同期表现最强的苹果A11也只能达到800余张/分钟。而当麒麟980发挥双脑之力,让双核NPU一起发挥作用时,在的图片识别效率上已经达到了惊人的4500张每分钟。今年骁龙与苹果的新款芯片,应该都还在2000张左右徘徊。
这也意味着,在识别图片、AR交互、识图购物与旅行等场景中,HUAWEI Mate 20系列和后续的旗舰款都可以达成瞬时处理AI任务的能力。这种瞬时之美,正是如今AI应用所需要的。
端侧计算的反应速度,几乎决定了大部分AI应用的体验。当手机端侧算力不足时,大部分涉及AI的应用选择将数据上传到云端进行计算,处理一张图片、一段视频还要考虑网速的快与慢、是否有足够流量,甚至在没有网络服务时还不能使用。从产品角度来讲,这些都是致命的阻隔。
就拿AR来说,看似简单的AR其实处处包含着计算,图形计算决定了贴图的画质和真实感、空间计算决定了贴图能不能随着手机位置的移动和实景紧密结合。在拥有足够的终端算力之前,大部分AR应用都是“将就”,因为网络延迟AR贴图频繁出现错位的画面,相信各位都很熟悉。
但在麒麟980的支持下,终端运算就可以变得像随手拍下一张照片那么简单。像AR、视频自动剪辑这类功能,也可以延伸到更多应用中。
在这一点上,不知道一直大力发展AR生态,却无法提供给ARkit中开发者最适合芯片的苹果会作何感想。
飞扬的线条:用双核实现精细秘法
速度并非AI计算的一切,只是在今天我们为了产品的流畅运行,牺牲了一些计算的精细度。比如在进行动物的图像识别时,通过轮廓而非毛发细节去进行识别。这样一来只能识别出猫与狗,可如果讲AI计算更加精细化,我们甚至可以识别出人眼都难以辨认的猫狗品种,有如秘法一般提高AI应用的工作效率。
在手机上,目前的移动AI应用,很难处理非常复杂的卷积运算任务。比如对体态的分割识别与理解、对视频图像进行AI粘合等等,这些操作往往本地算力不足,上传云端会导致卡顿带来体验下降。所以开发者往往只能敬而远之。
集成了HiAI2.0开放系统,以及精细化AI任务处理能力的麒麟980,正在让更精准、垂直、复杂的AI应用成为可能,无限想象力正在开放。例如在视频处理时,两种不同的算法可以同时进行,一边进行精细的体态分割替换背景、一边通过对手势的理解添加AR贴图。
对于开发者来说,精细秘法的出现意味着很多原本只能在服务器中运行的模型都可以迁移到移动端来。移动端AI开发会从从零开始,逐渐演变成分布平台同时进行,极大地减少了开发者的重复工作。对于一直致力于培养移动AI开发生态的华为来说,此举很可能成为发展路途之中的关键。
年度流行色:打开视频新大门
如果问过去一年AI给手机带来的最大变革是什么,相信90%的人都会回答拍照。的确,摄像作为手机最普及、使用最频繁的功能之一,AI拍照最为人熟知,也因此在HUAWEI Mate 10系列推出之后,快速席卷了去年的大部分机型。
这种情况下,华为想要继续保持领先,如何利用起视频这一拍照的进化形态就成了关键。但视频任务的处理对算力有着极高的要求,只有给予速度和质量双重保证,才能实时对一帧帧的画面进行处理。而双NPU的一个核心优势,在于手机可以在终端完成视频任务的识别、理解甚至智能化修改。那么在未来一年中,视频和直播玩法很可能成为移动AI的主旋律,甚至成为华为旗舰产品的主打差异化功能,打开一扇全新的大门。比如现在,华为手机会在闲置时间利用资源将用户拍摄的照片和视频生成影片,未来在很可能彻底功能化,用户可以在拍摄之后立刻一键编辑视频,甚至通过对拍摄内容、场景的识别来匹配剪辑风格和配乐。至于直播实时美颜、视频批量加滤镜等等功能,也可以让更多用户体会到手机AI的实用性。对于今年的AI手机来说,无疑会成为一款亮眼的年度流行色。
虽然距离首款搭载麒麟980的HUAWEI Mate 20发售还有一个半月之久,但仅仅从双核NPU出发,就能发现如此广阔的想象空间。或许,这就是两颗大脑一起共同作用的结果。
但NPU只是芯片的一部分,如同芯片只是手机的一部分一样。最终呈现到人们眼前的,还是技术、产品、应用生态集结而成的共同体。但见微知著,一定会有很多人从现在就开始对未来的AI手机保持期待。