2019年7月10日,聯發科技在深圳舉辦首屆AI合作夥伴大會,正式發布了全新的針對AIoT領域的i700處理器以及首款「真8K」智能電視晶元S900。同時,聯發科

還攜手合作夥伴在展示區展示了數十款AIoT產品。而在幾天之前,吉利推出的集成了NPU神經網路計算單元的量產車規級別高性能晶元ECARX E01也正是來自於聯發科。

此前憑藉押注AI,聯發科手機晶元業務成功走出「低谷」,現在聯發科又藉助AI成功開拓了AIoT及智能汽車市場。雖然聯發科從未喊出所謂的「All in AI」的口號,但實際上,聯發科近幾年來卻一直踐行著「All in AI」的戰略,每一場發布會,每一款新產品,無不與AI密切結合。時至今日,在AI的加持之下,聯發科的多項重要業務均已取得了階段性的成果。

戰略重心全面轉向「AI」

自2017年衝擊高端市場的Helio X30失利之後,聯發科在智能手機市場遭受重創,隨後聯發科策略便開始了深度的調整,將重心逐步轉向了晶元的人工智慧(AI)的能力。特別是在終端側的人工智慧(Edge AI)開始興起的趨勢之下,聯發科開始將重心轉向AI,希望憑藉AI打個漂亮的翻身仗。

2018年1月的CES上,聯發科推出了自家的NeuroPilot 人工智慧平臺,希望通過通過整合硬體APU(AI處理器:Artificial intelligence Processing Unit)及軟體(如NeuroPilot SDK),將Edge AI帶入各種跨平臺設備 —從智能手機、智慧家庭到自動駕駛汽車等。

2018年3月14日,聯發科在北京召開主題為「曦力P60 AI你的手機」的新品發布會,正式發布了旗下首款12nm工藝、基於NeuroPilot平臺、集成了多核AI處理器的SoC——Helio P60。值得注意的是,在此之前幾天,聯發科還和騰訊遊戲共同宣佈,雙方將成立聯合創新實驗室,「圍繞手機遊戲及其他互娛產品的開發與優化達成戰略合作,共同探索AI在終端側的應用」。而隨著Helio P60的推出,很快這款晶元獲得了市場的認可,獲得了多家品牌手機廠商的採用。

2018年12月13日,聯發科在深圳召開了主題為「AI不釋手」的「聯發科Helio P90暨全球合作夥伴大會」,在AI領域進一步加碼,推出了基於APU 2.0的Helio P90,而這款晶元當時的AI性能跑分成功登頂業內較為權威的蘇黎世聯邦理工學院的AI Benchmark排行榜,超越了高通驍龍855及華為麒麟980,這也讓很多人大喫一驚。雖然也有人對這一結果將信將疑,但是實實在在的跑分成績擺在了那裡。而這也是聯發科在AI研發上實力的一次真實展現。

而在那之後,聯發科又進一步將其AI能力帶入到了AIoT市場。

推出全新AIoT平臺:i300/i500/i700

在AI計算由雲端向邊緣端轉移的大趨勢之下,物聯網市場也對於晶元的AI能力提出了更高的要求。

根據Gartner的數據顯示,2018年全球物聯網市場(這裡是以金額來統計,而不是出貨量)基於AP的市場份額為48%,基於MCU的市場份額為52%,但是在AI的驅動下,到2021年基於AP的市場份額將增長至63%,大幅超過基於MCU的市場。

在此趨勢之下,今年4月18日,聯發科正式發布了其全新的針對智能家居、智慧城市和智能工廠等領域的AIoT平臺,包含兩款擁有高集成度和出色APU性能(即AI性能)的處理器晶元:i300和i500。

相對於以往聯發科的晶元產品,全新的AIoT平臺的i系列晶元進一步弱化了晶元本身的CPU/GPU等硬體參數,而是以適用於不同的AIoT市場和應用場景的對於AI能力的需求來進行區隔。

比如,i300的定位主要是一些對於AI能力沒有什麼要求的帶屏聯網設備,比如零售設備、聯網的智能健身器材、樓宇商業顯示設備等等。

而i500則加入了基礎的AI識別能力,結合聯發科的人工智慧平臺NeuroPilot,搭配低時延的邊緣AI處理技術,可提供精準的人臉、行為和環境識別分析,大幅度提升準確度、生產效率和智能化水平。

此次發布的i700的AI能力則進一步大幅提升,可以為無人商店的辨物和人臉支付提供技術支持,也可實現智能樓宇的人臉門禁和公司的考勤系統,而在智能工廠中則能助力無人搬運車自動辨別障礙物以避免意外情況的發生。在運動健身方面的應用,i700平臺還能進行3D人體姿態識別功能。

聯發科資深副總經理及智能設備事業羣總經理遊人傑表示:「IoT市場是一個非常碎片化的市場,我們很難針對某一個碎片的市場特別開發一款晶元,這不太符合開發成本。我們提出的是平臺的概念,依照各個AI算力等級的不同,大概把碎片市場區隔成幾個層級,比如i300是屬於帶屏不需要AI的,i500是AI算力需要在1T內的,今天i700的算力是到4T FLOPS等級。」

而為了使得這三個平臺能夠很好的覆蓋碎片化的AIoT市場,聯發科提供了完整的開發平臺、軟硬體以及在AI開發環境上NeuroPilot做到最優化,可以支持不同的操作系統,像安卓、Linux等。

i700:集成雙核APU,AI能效提升5倍

在此次AI合作夥伴大會上,聯發科發布的i700系列則是其目前最高階的智能網聯平臺,不僅提供了強大的CPU和GPU性能(集成了兩個主頻2.2GHz的ARM Cortex-A75內核與六個主頻2.0GHz的Cortex-A55內核,同時搭了主頻為970MHz的IMG 9XM-HP8圖形處理器),同時憑藉聯發科的CorePilot技術的靈活調配,在提供最高性能的同時還能達到較低的功耗。據聯發科介紹,i700系列的GPU能效相比i500系列提升了2倍。

同時,i700平臺不僅支持聯發科的人工智慧平臺NeuroPilot,還首次集成了兩顆獨立的APU內核,還加入了AI加速器(AI Accelerator),並搭載AI人臉檢測引擎(AI face detection engine)。同時,i700也支持聯發科的NeuroPilot SDK,可以完全兼容谷歌的Android Neural Networks API(Android NNAPI),提供完整的開發工具,讓方案商及設備製造商充分利用 TensorFlow、TF Lite、Caffe 和 Caffe2 等業界常用框架,為創新應用程序提供了開放型平臺。

在具體的AI能力方面,根據聯發科在現場公佈數據顯示,i700的AI效能相較前一代的i500提升了5倍之多。相比i500,i700的場景檢測能力提升了400%,人臉識別能力提升了300%,圖像分割能力提升了300%,物體識別能力提升了400%。

聯發科表示,i700是「頂級的AI方案」。為什麼稱之為「頂級的AI方案」呢?

相信之前看過芯智訊對於Helio P90報道的朋友應該都還有印象,在去年年底的聯發科合作夥伴大會上,聯發科發布了Helio P90處理器,當時,聯發科技首席技術官周漁君就公佈了其在AI Benchmark跑分排行榜上的成績。

從AI Benchmark的數據來看,聯發科Helio P90以25645分排名第一,高通驍龍855以22082分排名第二,華為麒麟980以21526分排名第三。需要支出的是,Helio P90是基於12 nm工藝,而後兩者則都是基於7nm工藝,並且驍龍855還支持LPDDR4X-4266內存。

▲2018年12月,聯發科公佈的Helio P90的AI Benchmark跑分成績

在此次的聯發科AI合作夥伴大會上,聯發科技首席技術官周漁君強調,去年Helio P90登頂AI Benchmark排行榜之後,到目前為止,Helio P90在AI整數運算(比如人臉識別就需要大量的整數運算)性能上,仍排在第一位。而此次發布的i700及S900的APU內核則是來自於Helio P90。這也意味著,i700及S900的AI性能的跑分有望接棒Helio P90登頂AI Benchmark排行榜。

▲在2019聯發科AI合作夥伴大會上,聯發科公佈的聯發科APU在AI Benchmark部分測試中的成績,仍大幅領先於高通驍龍855及華為麒麟980。

憑藉強大的AI算力,i700可支持3200萬像素攝像頭或2400萬像素+1600萬像素的雙攝像頭組合搭配,支持以3200萬像素的解析度和高達30幀每秒 (FPS) 的速度達成精準且零時延識別任務,也可以選用120FPS的超高清慢鏡頭識別快速移動的對象。此外升級的三核圖像信號處理器 (ISPs) 能夠處理14位RAW和10位YUV,並支持AI人臉檢測引擎。

為了展示i700強大的快速物體檢測能力,在發布會展示區,聯發科還搭建一個展示場景:一個滿載各種不同物品的玩具小火車沿著固定的橢圓形軌道持續快速行駛,而基於i700的智能攝像頭安放在一個固定位置(圖中箱子內),只能看到較短的一段軌道圖像,而當小火車從攝像頭前駛過時,攝像頭快速準確的識別了車上的各個物體,以及透過火車上各個物品間隙能夠看到的軌道外的鍵盤和滑鼠。

此外,在聯網能力方面,i700平臺也很強,不僅支持2x2的802.11ac WiFi和低功耗藍牙5.0技術,還內置最高支持Cat.12基帶,通過4x4 MIMO和三載波聚合技術,可提供信號更穩定、網路速度更快的終端產品。

聯發科表示,i700平臺方案將於2020年開始對外供貨。

全球首款「真8K」電視晶元

根據TCL在本次會議上公佈的數據顯示,受智能手機及平板電腦等移動終端的影響,電視機的日均開機率已經由三年前的70%下降到了30%,40歲以上的消費者成為了收看電視的主流人羣。年輕人越來越多的選擇通過手機、平板來觀看視頻節目。而這似乎正是電視市場所面臨的挑戰。

但是,與此同時我們也能看到,智能電視市場的興起。根據前瞻產業研究院的數據顯示,2017年中國智能電視銷量達4662萬臺,比2016年4098萬臺增長13.8%,到2018年,智能電視銷量將超5000萬臺。

目前中國是全球最大的電視市場,全球前十大電視製造企業,中國企業佔比超過一半。其中就包括海信、長虹、TCL、康佳、海爾、康佳等品牌,佔據了很大的一塊市場份額。

在本次活動上,TCL、海信、創維酷開、長虹、海爾等國產智能電視大廠也紛紛前來為聯發科站臺,他們均表示看好智能電視市場前景,認為AI將會為智能電視帶來更多的機遇。

TCL實業控股研發中心總經理陳乃軍就表示,AI技術將會為電視行業帶來更為自然的互動、更為個性化和具有沉浸感的體驗。另外,在智能家居當中,智能電視也有望成為整體智能家居的優質大屏入口。

據海信電視負責人透露,截至2019年6月30日,其互聯網電視激活用戶數已達4433萬。而對於未來的智能電視市場前景,海信也是十分看好。海信預測,到2020年海信全球互聯網電視出貨將達6500萬臺。

海信電視負責人也表示,智能電視需要全時AI,不僅要聽得清、聽得懂、反應快、反饋準,還要有情感,支持全場景AI服務。此外還需要利用AI深度學習和演算法對於節目內容、畫面進行場景識別,智能調整畫質和音效。

聯發科副總經理及智能家居事業羣總經理張豫臺認為,未來的視頻是可「轉移」的,用戶在手機上可以接著看電視,也可以在家裡電視上接著看手機上沒看完的視頻,這裡需要一個很好聯接。另外,我們不能把電視限制在看視頻的角度,隨著AI的加入,未來,電視能否在家庭、智能家居等更多的應用場景應用中,扮演更多的角色(比如智能家居的「管家」)?這是我們需要考慮的。另外,相對於手機屏幕來說,電視大屏所呈現的畫面信息、畫質體驗都是智能手機所無法比擬的,電視基於大屏在很多場景下還有很多的優勢。這是電視廠商和晶元廠商要努力找出來的。

顯然,高清、大屏、AI智能已經成為了智能電視的重要發展方向和賣點。這也使得這些電視廠商對於智能電視晶元提出了更高的要求。

而在聯發科看來,未來的智能電視需要高效能的內核,要支持8K顯示,支持多格式的HDR,觀看體驗要不跳幀、不卡頓,還要加入AI、語音助理,能夠實現個性化的服務。於是,聯發科全新的「真8K」智能電視晶元S900也就應運而生。

此次聯發科發布的S900晶元,採用多核心ARM Cortex-A73 CPU,多核心 Mali G52 GPU, 能夠通過單顆SoC晶元實現8K視頻解碼,同時還支持外掛畫質優化晶元供客戶製造差異化。在I/O端,S900晶元支持HDMI2.1A介面,其頻寬提升至48Gbps,能實現HDR10+,4K120Hz及8K 60Hz的視頻輸出。

此外,S900還集成了聯發科自研的APU,搭配聯發科技自研的MiraVision-Pro和AIPQ技術,可針對不同場景進行AI識別,包含人臉識別、場景檢測等AI增強功能,並就相應場景調校色彩飽和度、亮度、銳利度、動態向量補償及智能降噪,提升整體視覺質量。

據介紹,聯發科技S900平臺方案現已量產, 終端產品將於2020年初開始對外供貨。在發布會展示區,聯發科也攜手合作夥伴首次展示了基於S900晶元的8K智能電視樣機。

構建AIoT生態

正如前面所介紹的,AIoT市場是一個非常碎片化的市場,市場非常的細分,產品種類繁多,但是很多出貨量卻又不大,作為晶元廠商很難單獨針對每一個細分的市場開發一款晶元,這是不現實的,畢竟沒有足夠的量的支撐,很難實現盈利,甚至連成本都很難收回。

因此,聯發科根據不同的AIoT市場,對於AI算力需求的不同,推出了i300/i500/i700三個不同臺來統一應對。然後通過合作夥伴來基於這三個不同的平臺來開發符合他們需求或想法的各種各樣的應用。而聯發科所需要的做的就是為他們賦能,幫助他們創新。

首先,目前AIoT市場的標準非常的繁多,不同的品牌廠商的產品,可能都有著不同的標準,基於的是不同的操作系統,使用的也是不同的雲平臺。為此,聯發科提供了完整的開發平臺、軟硬體以及在AI開發環境(NeuroPilot),可以支持不同的操作系統,像安卓、Linux等,支持多樣化的雲端。

其次,聯發科在眾多的終端市場都是處於領先的地位,比如在智能手機市場是第二;而在安卓平板、語音助理設備、功能機、網路連接設備等市場均處於第一的位置。這也使得基於聯發科方案的AIoT設備能夠相對較為便捷的與眾多基於聯發科方案的智能終端設備相連接。與此同時,聯發科還擁有完整的關鍵技術,包括處理器、AI、連接(WiFi/藍牙/4G/5G等)、多媒體等。這也意味著,聯發科能夠為合作夥伴提供更為全面的技術支持。

第三,聯發科也在積極的推進上下游生態合作戰略。即在上游整合演算法公司、方案商、系統集成商、渠道商、代理商資源,整合雲服務提供商資源,在下游整合AIoT設備製造,以及行業垂直應用。

對於不同的AIoT客戶,聯發科可提供高效的參考設計,提供彈性的高低階共架構設計,此外,還可以開放系統源代碼。

遊人傑解釋稱:「目前在AIoT裏最常用的操作系統,包括Linux和Android。過去我們推這個市場時,聯發科的Linux的標準和標準Linux協會的標準之間,我們有太多屬於聯發科自己的東西。所以,我們現在在AIoT的平臺所設定的目標是,每一個平臺Linux的系統全部都能上傳到Linux的標準協會裡,這個標準協會代表他認可你的Linux架構符合規範標準。有一部分沒有規範的,我們用自己的方式。他能規範到的,我們都符合他的標準。好處是可以讓各行各業用比較好的操作系統開發他的產品。」

在本次AI合作夥伴大會上,聯發科也展示了其龐大的AIoT生態。包括小米、阿里巴巴、TCL、長虹、創維、曠視科技、海信、海爾、優必選等在內的多家人工智慧及智能家居合作夥伴,都與聯發科進行了深度的技術合作。

小米智能硬體部副總經理陳維揚在會上表示,「聯發科技是小米智能硬體最核心合作夥伴」,搭載聯發科技晶元的小米智能硬體已累計出貨5000萬臺(小米的路由器和小愛音箱很多都是基於聯發科AIoT方案)。

阿里巴巴人工智慧實驗室智能終端總經理茹憶在會上表示,截至2019年1月11日,天貓精靈累計銷量突破1000萬臺,是全球增速最快的智能音箱。而天貓精靈系列主要也是基於聯發科的晶元方案。

曠視科技全球資深產品市場總監沈瑄也表示,此前在智能手機端曠視科技就與聯發科有著非常深度的合作,接下來雙方也將會在智慧物流、智能門鎖、智慧零售等AIoT領域展開合作。

在展示區域,聯發科攜手合作夥伴共同展示了包括智能機器人、智能工廠、智能班牌、智能門禁?智能行車輔助裝置?智能音箱、8K智能電視、智能冰箱、智能油煙機、智能紅酒櫃、智能POS機、智能翻譯機等數十款遍及商業、教育、娛樂等領域的AIoT產品。聯發科AIoT生態已初具規模。

「聯發科在整個業界有非常長久歷史,有著非常深厚的技術積累,以及與眾多IDH、ODM等廠商深入的合作關係,所以我們在整個產業鏈裏能夠提供最迅速、最有效、最有競爭力的方案,這是聯發科過去多年累積的優勢。而我們的合作夥伴也熟悉我們的晶元和軟體,這也使得他們能夠基於我們的AIoT平臺開發出各種創新的應用。」遊人傑略顯自豪的說到。

「3A」業務初見成效

在今年5月底的臺北電腦展上,聯發科資深副總經理及智能設備事業羣總經理遊人傑就提出了將「智能設備事業羣」業務增長的鎖定在「3A」領域,即AIoT、ASIC和Auto。

關於AIoT這塊,上面我們已經做了詳細的介紹,而在ASIC業務(客製化的晶元服務)這塊,芯智訊在去年的《手機晶元之外,ASIC業務成聯發科新的增長引擎!》一文當中有過詳細的介紹。

而當下最為熱門的AI專用晶元也正是屬於ASIC範疇,不論是雲端AI晶元還是邊緣AI晶元。而隨著AI技術的發展,越來越多的演算法廠商、自動駕駛技術廠商、雲服務廠商等都開始推出自己的AISC晶元。

在昨天發布會後的專訪環節,遊人傑也透露,「過去三年來尤其針對數據中心的ASIC案子,從三年前是一個案子,到每年呈倍數增長。每個案子大概是將近6至9年,這需要一點時間的累積後,後面會變成我們很重要的成長動能。」

在Auto,即汽車電子業務這塊,芯智訊在上週的《成功截胡高通?聯發科打響汽車前裝市場第一槍!》一文當中也有詳細的介紹。

而在昨天會後的專訪環節,遊人傑也進一步確認,本月初吉利汽車發布的集成了NPU神經網路計算單元的量產車規級別高性能晶元ECARX E01也正是來自於聯發科。這也是聯發科自三年前宣佈進軍汽車電子市場之後,首次成功進入品牌汽車前裝市場。

「目前在車用裡面的半導體數目增長很快速,車用市場是聯發科要佈局的市場。我們在國內市場也好,或者在海外前裝的市場都有不錯的成果。今年下半年,客戶就會產品有正式量產。」遊人傑強調:「車用IC從設計到被車廠採用,到真正產品量產,至少要四年時間,我們佈局這個產業剛好四年。所以我們今年看到車前客戶開始量產。」

至此,我們可以看到,聯發科的在AIoT、ASIC和Auto均已經取得了不錯的成績,聯發科的「3A」戰略已經初見成效。而實際上,這三個領域也均與AI密不可分。同樣,聯發科手機晶元業務之所以能成功「走出低谷」也得益於在AI上的發力。

從目前來看,聯發科幾乎所有的重要業務都開始融入AI,並且均已取得了階段性的成果。

展示區產品展示

▲「真變形金剛」機器人來了!這款基於聯發科AIoT平臺的「星際特工機器人」可以在汽車和人形機器人之間任意變形。而且可以直接通過語言控制。

▲優必選展示的悟空機器人

▲MikiMobile展示的基於聯發科AIoT平臺的釘釘智能考勤門禁

▲基於聯發科AIoT平臺的小米智能翻譯機

▲億道展示的基於聯發科AIoT方案的物流掃碼設備

▲麥度智聯展示的智能POS機

▲品網科技展示的基於聯發科AIoT平臺的智能電子班牌

▲深圳中泰智豐物聯網科技展示的基於聯發科AIoT平臺的智能門禁

▲視源股份展示的基於聯發科AIoT平臺的智能冰箱解決方案,可以通過內部的攝像識別冰箱內的菜品儲藏情況,並通過冰箱外面的屏幕顯示冰箱內的相關信息以及相關網路信息等等。

▲聯發科展示的「刷臉支付」智慧零售解決方案

▲聯發科展示基於單目攝像頭的掃地機器人解決方案(基於聯發科i500平臺),無激光和陀螺儀輔助,單純依靠攝像頭來建模及空間定位。

▲聯發科展示的智能行車輔助裝置

作者:芯智訊-浪客劍


推薦閱讀:
相關文章