2018年物联网芯片的市场158亿美金规模,其中AP占48%。预计三年后,物联网芯片市场会成长到266亿美金,AP会成长到63%,也就是说,很多MCU应用会转移到AP上来。
7月9日,联发科技在深圳举行的“AI合作伙伴大会”上发布了具有高速边缘AI计算能力、可快速实现影像识别的AIoT平台i700。包括小米、阿里巴巴、旷视、TCL、创维、海信在内的生态链客户均到场为联发科站台。
i700平台方案能够广泛被应用在智慧城市、智能楼宇和智能制造等领域,其单芯片设计整合了包含CPU、GPU、ISP和AI专核等在内的处理单元,能够协助客户快速推出产品,助力人工智能和物联网的落地融合。
AI的杀手级应用到底是什么?
《芯扒客》记者也第一时间全程参与了此次合伙伙伴大会及媒体交流会,为您第一时间带来了对联发科技AIOT战略的深度解读。
联发科首席技术长周渔君博士,登台首先介绍了AI的发展历史。他表示,随着手机从功能机到智能机,网络从有线向移动发展,大数据爆发了。
这个时候,摩尔定律让芯片的性能产生了非常大的进步。大数据、算力都有了以后,又出现了新的问题,主要包括:
1:数据太大,必须要减少人力使用;
2:BAT这样的互联网公司成为数据的集中点,必须减少对数据的需求。
3;要提升边缘终端的算力。也就是目前业内都在说的边缘计算,比如以往的智能音箱主要通过云端计算,但是现在则逐渐从云端向嵌入式终端发展。周渔君博士认为,未来的AI运算应该是云端和终端互动,有些困难的运算有时候需要云端来帮忙一下。
AI产业发展到现在,业内都在探寻杀手级应用是什么?周渔君博士认为,视频编解码、音视频降噪、动作捕捉、服务机器人这四项都是主流的AI杀手级应用。他分别针对夜拍,视频背景识别,动作识别等应用进行了案例分析。
他同时认为其实还有更多的杀手级应用,之所以目前没有普及,最主要的原因是受限于算力不够,准确率不高。比如物体识别率如果达到95%以上,就会变得非常有用。
周渔君博士介绍了从第一代APU到第二代APU的提升。强调的是在提升算力的同时提高效率。他同时提到,去年苏黎世AI benchmark对采用了第一代APU的P90的排名第一,目前在整数运算上依然领先的指标,针对同行7nm的同类芯片还有很大的优势。预计APU第二代会应用在最新的IOT平台i700、i900上。
周渔君博士同时介绍了对于开发者来说非常有用的NeuroPilot AI开发平台。这套NeuroPilot AI平台在2018年推出,能够支持到Andriod OS、Linux OS跨平台系统,NeuroPilot AI解决方案支持市场上现有的AI架构,包括Google的TensorFlow、Caffe、Amazon的MXNet、Sony的NNabla等,提供从高阶到低阶的API接口,并且针对不同的合作伙伴,可以推出高定制化操作元件。
为什么智能家居不好用?
联发科技副总经理暨智能家居事业部经理张豫台博士表示, 目前在智能家居中不同的智能终端之间普遍没有互联互通,很多人机交互都需要通过手机APP。现在有了语音助理之后,人机交互有了很大的进步,但仍然存在不少问题。
张豫台博士提出了Smart Hub的概念,就是在智能家庭中需要一个中心,来连接管理如此众多的智能终端设备。这个Smart Hub就如同家庭里拥有一个管家,来管理所有的佣人。“而且这个管家是英国管家,会主动提供最好的服务,而不需要你下太多的命令。”
那么什么终端最适合做这个“英国管家”呢?张豫台博士认为,这个终端要足够聪明,有链接能力,还要有好的人机交互。相对来说,智能电视有一个很大的屏,其实很适合做这个“管家”。他认为,未来的人工智能电视将具备几大应用场景:包括8K画质、语音助理、居家安全、个人化服务、AIOT。
本次发布会上,联发科技全球首发了“真8K”智能电视单芯片s 900。之所以说是全球首发,指的不仅仅是8K解码芯片,而是集成了处理器和各种周遍器件的SOC。
s 900特别支持联发科技独家的MiraVision-Pro图像显示技术,这个技术其实是把以前发不过的MiraVision技术增加了AI功能,是的在图像识别和对比度调整、噪点消除方面更加强大。足够强大的AI功能,使得TV成为智能家居中心成为了可能。
通过AI物件侦测,来识别电视画面中出现的不同物体和背景,从而实现局部的画质强化。其实这种功能在今天的旗舰智能手机上已经有所采用,比如拍照后根据物体识别进行自动的美颜、图像锐化等。不过由于智能电视涉及到的图像的信息非常大,涉及到的运算量也非常之大。
根据现场的真8K智能电视的演示可见,电视屏幕中自动识别出了人脸、蓝天、绿地、建筑等不同的背景,并自动进行图像优化。使得画面画质更为艳丽。
AP将取代MCU,联发科做AIOT的几点优势?
联发科技资深副总裁暨智能设备事业群总经理游人杰表示,未来的智能物联网将由AP-based来驱动。他透露,根据Gartner的预测,2018年物联网芯片的市场158亿美金规模,其中AP占48%。预计三年后,物联网芯片市场会成长到266亿美金,AP会成长到63%,也就是说,很多MCU应用会转移到AP上来。
他同时表示,这个比例不是以出货量来看,而是从销售利润来比较的。从目前来看,MCU在IOT这样少量多样的市场上本来就具有优势,而联发科技此前的优势主要集中在AP领域,再加上联发科以往的手机客户大多在转型物联网智能终端,因此联发科提出的AP Base为主的发展方向。
云端嵌入式互相融合,能够把嵌入式做的事情就在本地处理,这是很重要的趋势。通过联发科提供的NeuroPilot开发平台,终端可以很轻易的连接到不同的云平台。
作为手机芯片领域的领先厂商,联发科押宝智能物联网,相比其他竞争对手到底有何优势呢?
游人杰总结了五点:
1.产品线广,市场占有率高,在手机、平板、电视、网络连接设备等领域都具有领先的市场地位;
2.掌握关键的通信连接技术,室外有4G、5G,室内有Wi-Fi、BT;
3.在音视频处理上很多积累,核心技术积累
4.在AI技术方面提早布局,自研的AI平台 APU1.0到2.0,未来还将推出APU 3.0
5. 联发科技提供强大的上下游生态链资源。由于物联网不是一个单一的市场,而呈现细分化、碎片化的特点,因此产业生态变得非常重要。
在手机时代,联发科可以向客户提供软硬件“turnkey”的交钥匙方案,但是到了AIOT产业生态中,就涉及到算法公司、方案商、渠道商、系统集成商、代理商、设备制造商、行业垂直应用商、云服务提供商等……而所有这些环节,紧靠系统厂商自己的力量很难搞定。
这就需要依赖于联发科长期以来的积累,可以为客户提供强大的生态支持。游人杰表示,联发科技在AIOT市场扮演的角色是把基础的系统平台做好,然后会联合IDH、ODM各环节共同做大,共享利益。不过游人杰也表示,AIOT时代,系统knowhow会更多的掌握在系统厂商手中。
前面提到的几点技术优势,如音视频、连接技术、AI技术,最终都对应到了联发科的i系列产品线上。在本次发布会上,联发科也对外全球首发最高阶智能物联网平台i700。
据了解,i700平台采用八核架构,集成了两个工作频率为2.2GHz的ARM Cortex-A75处理器与六个工作频率为2.0GHz的Cortex-A55处理器,同时搭载工作频率为970MHz的IMG 9XM-HP8图形处理器。此外, i700平台还搭载了联发科的CorePilot技术,确保八个核心能够以最高效的方式实现运算资源的最优配置,在提供最高性能的同时还能达到最低功耗,将高性能运算与电池寿命完美结合。
联发科i700平台不仅内置双核AI专核,还加入了AI加速器,并搭载AI人脸检测引擎,让其AI算力较AIoT平台i500提升达5倍。同时支持联发科NeuroPilot SDK,可以完全兼容谷歌的 Android Neural Networks API(Android NNAPI),提供完整的开发工具,让方案商及设备制造商充分利用 TensorFlow、TF Lite、Caffe 和 Caffe2 等业界常用框架,为创新应用程序提供了开放型平台。
拍照方面,i700平台可支持超强的3200万像素摄像头或2400万像素+1600万像素的双摄像头组合搭配,客户能以3200万像素的分辨率和高达30帧每秒(FPS)的速度达成精准且零时延识别任务,也可以选用120FPS的超高清慢镜头识别快速移动的对象。此外升级的三核图像信号处理器(ISPs)能够处理14位RAW和10位YUV,并支持AI人脸检测引擎,重新定义AIoT设备的影像效能,开启超高清的万物互联时代。
网络方面,i700平台还支持 2×2 的802.11ac WiFi和低功耗蓝牙5.0技术,并内置最高支持Cat.12的移动网络基带,通过4×4 MIMO和三载波聚合技术,协助客户推出信号更稳定、网络速度更快的终端产品。
人脸识别上,i700平台可以为无人商店的辨物和人脸支付提供技术支持,也可实现智能楼宇的人脸门禁和公司的考勤系统,而在智能工厂中则能助力无人搬运车自动辨别障碍物以避免意外情况的发生。在运动健身方面的应用,通过i700平台上的3D人体姿态识别功能不仅能为我们提供健身姿态的建议,还能够自动检测生活和工作中的危险姿态,从而提前发出预警。
据悉,联发科i700平台方案将于2020年开始对外供货。
为什么说i700是顶级AI方案呢?游人杰介绍了i系列产品线的定位和划分。比如i300针对低阶的不需要AI的带屏联网产品,i500则属于带有基础AI功能的产品,算力需要在1T以内的;目前已经应用在如智能新零售等需要人脸快速精准识别的应用上。而i700则具有强AI功能,属于联发科目前最顶级的AI方案,算力在4T以上,客实现多物体识别,单次可识别十中不同物件,客对产线实现AI实时检测。
相比前代i500芯片,i700各项性能参数均有大幅度提升。由于采用独立的APU 2.0版本,相比前代提供了5倍AI效能。再具体的应用场景上,比如场景检测提高了400%,人脸识别率提高了300%,图像分割率提高了300%,物体识别率提高了400%。对于很多商业应用来说,识别精度的提升带来的会是杀手级应用的出现。
联发科是小米智能硬件最核心合作伙伴
小米智能硬件部副总经理陈维扬表示,联发科技是小米智能硬件最核心的合作伙伴,目前小米搭载联发科技芯片智能硬件已累计出货5000万台。
其中小米路由器累计销量已超过了2600万台,在中国路由器市场中排名第二。截止到3月31i,小爱音箱销量突破千万台。小米所有IOT平台连接设备数达到1.71亿。
陈维扬表示,小米早在2012年就决定在IOT领域进行布局,当时开始做智能硬件的过程中,发现将智能家居设备加上AI技术,才是完整的应用场景。
AI真的可以增加TV的开机率吗?
海信聚好看常务副总经理夏章抓谈到海信聚好看的发展,称海信在中国电视行业领军者,连续15年全国销量第一。目前海信已经在全球建立起五大品牌运营中心,预计到2020年海信全球互联网电视销售达到6500万台。
从2015年开始,海信引领电视进入场景时代,并推出了VIDAA 操作系统。夏章抓认为,从VIDAA到最新推出的VIDAA AI操作系统,对智能电视走向AI时代提出了新的要求。他认为,VIDAA AI的核心要素应该包括算法、计算、数据,能实现图像、语音识别、自然语言处理、用户画像等功能。
夏章抓表示,电视画面本身就是内容丰富的交互界面,通过图像识别,电视画面可以针对不同的识别物体,可以变成流量入口,甚至变成电商入口。
旷视科技全球资深产品市场总监沈瑄介绍了旷视的发展时间轴。
其中旷视“1+3”的发展大图指的是:旷视Brain++以及个人设备大脑、城市大脑、供应链大脑。所谓个人设备大脑指的是应用在手机上的支付级人脸识别技术,目前已经有70%以上的手机人脸解锁采用旷视方案,包括华为、小米、OPPO、VIVO、联想等都是旷视的客户。
沈瑄还特别提到了智能门锁市场,虽然这个市场从总量来看并不大。但是从2016年开始到现在增长快速,增幅超过200%。
相比智能门锁,银行金融级别的电子支付市场也成为旷视的主要战场之一,预计到2021年至少有10%的线下支付将采用人脸支付。据了解,目前由蚂蚁金服和旷视科技(Face++)合作研发的刷脸支付功能已经上市,在不少便利店可以线下体验刷脸支付。
TCL实业控股研发中心总经理陈乃军提到了智能电视行业的危机和机会。危机自然是电视开机率降低,年轻人越来越少看电视,40岁以上消费者成为电视收看的主流人群。
但另外一方面也带来了机会,因为AI+TV的融合,将会让TV在智能家居时代重新焕发生命力。通过AI能否为大龄的电视用户带来无差异化的自然交互,可以理解用户的意图,直达内容,同时也可以消除不同年龄群体的“数字代沟”。
AI真的可以增加TV的开机率吗?张豫台对表示,随着人们消费娱乐的碎片化时间增多,目前确实出现从大屏向小屏转移的趋势,比如短视频的流行。如果仅仅将电视局限在看视频的功能中,确实难以增加开机率。
但是随着智能家居、物联网应用的接入,电视实际上可以扮演一个管家的角色,比如显示交通路况信息、家庭周边的安防摄像头信息展示、根据AI智能的推送你可能需要的信息。从这一点来看,智能电视还有很多应用场景有待挖掘。而这是需要电视厂商和芯片商共同努力寻找的。
陈乃军提到,TCL早在2016年CES期间就推出了具有人工智能概念的电视,当时还是采用IBM Watson平台,不过当时只是一个概念,缺乏足够的应用。到了2018年以后,由于AI嵌入式芯片的发展,以及各大算法公司的出现,包括生活服务、全场景AI识别、微标签、个性化推荐应用开始逐渐成为主流……
比如通过声纹识别,电视可以认出你的声音,根据你的收视习惯来推荐适合你的视频
比如通过人脸识别,可以实现视频的结构化。这个有什么用了?想象一下你喜欢看大幂幂,电视剧里识别出大幂幂的头像后就可以给你来一个粉丝向的个人CUT,是不是一下子觉得很强大?
陈乃军表示,下一个赛场是AI*IOT,电视将会超越传统的娱乐视听属性,成为家庭物联网的控制中心,来连接各智能家电产品,并且提供智能安防、家务、健康、影音、教育、社区管理等应用。下一代的智能家居,将会随着传感器的丰富实现连动,到时候人工的干预和操作会逐渐减弱,不需要再手动或语音操控空调,而是会根据心跳和出汗,自动调节温度。
在此基础上,TCL提出了4T战略:指的是T-life、T-home(家庭安防)、T-Park(智慧园区)、T-Lodge(轻安防)四大方向。
阿里巴巴人工智能实验室智能终端总经理茹忆表示,2019年1月11日止,天猫精灵累计销量突破1000万台,是全球增速最快的智能音箱。到目前为止天猫精灵连接的智能终端品类达到40+,连接平台达到500+,连接设备型号达到2100+,连接的终端品牌达到600+,可以称得上是目前智能家居语音交互领域的第一设备。从生态来看,天猫精灵已经成为小米智能家居的强大对手。
通过蓝牙Mesh和WIFI闪连,天猫精灵实现了快速与其它智能终端组网的功能,大大的降低了用户的使用门槛。据介绍,天猫精灵蓝牙mesh方案上市9个月后,周边设备采用量已经突破了1000万台。
除此之外,天猫精灵还联合政府提出了产业新国潮计划,签约了广东中山、福建晋安、浙江慈溪三大电器产业带,通过天猫精灵为传统电器企业赋能。
点评:AIOT市场群雄混战,联发科能否成最后赢家?
根据联发科此前公布的2019财年第一季度财报。联发科第一季度营收为527.2亿元新台币(约合17亿美元),毛利率达到40.7%。相比三星、英特尔、高通等竞争对手的营收下滑,联发科创下了近三年来的毛利率新高。
之所以会这样,恐怕与联发科提早布局,进行多元化产业布局分不开关系。从收益占比来看,早在2017年,联发科主营的手机芯片和平板芯片营收大约占30%,大约30%来自于IOT、AISC和PMIC业务。
应该说联发科已经提前预见到智能手机未来增速趋缓,提前一步进行了布局。早在2017年年初,联发科就宣布将在未来5年投入2000亿,布局车联网、物联网、工业4.0、5G、AR/VR、人工智能、网络服务等先进技术。
2012年,联发科买下了晨星半导体,2018年1月1日两家公司正式完成合并,并成立了智能家居事业群。主要研发三种产品:电视芯片、显示器芯片以及时序控制器,其中电视芯片占8成营收。
2017年,联发科又收购射频PA供应商络达,为攻下物联网市场做准备。此外,创发信息科技提供光纤导束宽带技术设备;奕力科技提供屏的显示驱动IC芯片;擎发通讯科技提供以太网路由器;立锜科技提供电源IC;聚星电子提供安防摄像头。
今年4月,联发科发布了AIoT平台i300和i500系列处理器芯片,如今又发布i700,愈发可见联发科在AIoT市场的野心。
当然,联发科在物联网市场的竞争对手也不少。比如智能音箱和TWS蓝牙耳机领域,尽管联发科/络达的方案是占比已经很高,但紫光展锐、华为海思等一大票竞争对手正在奋起直追。特别是海思,目前不仅拥有NB-IoT芯片Boudica120,还拥有自己的物联网操作系统Lite OS。而联发科的重要客户小米,也在今年从松果分拆出了大鱼半导体,将主要针对AIOT领域开发物联网芯片。
不过, 游人杰最后对《芯扒客》记者表示,“也许华为有自己芯片的方向,不过提到联发科,我们应该也是不输的。” 游人杰表示,他看好联发科在该领域的竞争力。“希望有一天如果有客户希望用AI开发一个终端产品的新概念时,他想到用联发科的平台开发更有智慧的新概念产品。