在今年的華為開發者大會2021(Together)上,華為基于面向萬物互聯時代的分布式操作系統HarmonyOS給出了新的答案。當時代走向融合,人與設備的關系和交互方式自然需要被重新定義,而這其中繞不開的關鍵依然在于AI。當基于HarmonyOS構建的鴻蒙生態開始成為“萬物智聯”的藍圖底版,新的交互模式就可以充滿無盡的想象。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
人與設備的關系重構,新的交互模式開始成形
萬物互聯的名字已經被叫響多年,但其價值卻一直被低估。物聯網并非只是物與物之間的交互,人與物的交互模式也亟需升級和改變。
人物互動的場景有很多,健身便是其中之一。在跑步場景中,我們的身邊不僅要有人作為教練,華為還給我們提供了新的選擇和交互模式,在智能手表、智能跑步機、手機等多設備的聯動下,用戶在設備矩陣之中可以獲得不亞于專業私人健身教練的體驗。
華為消費者業務AI與智慧全場景業務部總裁王成錄介紹,設備矩陣打造的“私人教練”可以根據用戶的身體狀態,制定最恰當的鍛煉方案,在鍛煉過程中會實時提醒用戶其鍛煉方式是否正確,會不會對身體某個部分造成傷害,鍛煉結束之后該如何放松,根據鍛煉狀態的結果恰當的放松方案等等。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
人工智能發展的基礎是數據,而由諸多設備所構建起來的環境對于數據獲取的精準度甚至比專業教練更加可靠。用戶在運動前的體脂率、心率區間、飲食和睡眠狀況,運動中的呼吸、心率,在跑步時的配速、坡度和跑姿,這些數據都可以隨心所欲由設備自動獲取。當然,數據如果不流通,將會毫無意義,當用戶所使用的設備越多,圍繞用戶的“傳感器”也就越多,用戶的行為數據不斷產生,這套由大量設備所構建起來的“超級終端”就能更準確地捕獲用戶的意圖。
這樣的過程里,再多的設備也無需額外的操作,隨手一指便能獲取服務,輕輕一碰就能查找服務,人與設備的關系開始改變,設備將能夠主動來理解用戶并推薦相應的服務,新的交互模式由此開始逐漸成型。
王成錄博士表示,“我相信在鴻蒙系統的加持下,我們會有非常多的機會去構建各種各樣場景化的超級終端。”這也就意味著,這種新的交互模式有望推向更遠的方向。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
讓數據流動,真正實現萬物互聯
如果說多個設備獲取數據是讓設備擁有進入IoT時代的門票,那么真正的上場參賽進入萬物互聯,就意味著需要數據的流動和互通。我們身邊的海量設備均有獲取數據的能力,其可以被視為是一個個的傳感器,可以獲取如地理位置、空間信息,生理指標、行為活動等,但是單設備和單維度無法準確捕獲消費者意圖,更不能形成智慧互聯。
因此,多設備傳感器信號的同步、多模態數據的標注和多模態自適應,就成為必須要解決的問題。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
多設備協同的第一個挑戰是復雜的設備異構性。要把傳感信號利用好,第一步是保障所有傳感器上報信號的時序對齊。而由于設備大小不同、傳感器不同、上報信號的特征不同等問題,要把信號之間的時序對齊挑戰很大。
鴻蒙生態的軟總線技術軟總線擁有無限逼近硬總線的能力,其工作原理中包含了一個連接利器——軟時鐘。當工作設備組成一個超級終端,軟時鐘可以從最強的設備的晶振上去捕獲時鐘信號,一旦時鐘信號捕獲,后續所有業務處理的時鐘將以軟時鐘為準。軟時鐘當前的精度已經可以做到誤差小于1毫秒,王成錄表示,HarmonyOS 3.0的Beta版本目標是做到500微秒,這樣的精度已經能完全滿足傳感器信號同步的需求。
數據標注一直是AI樣本數據方向很大的挑戰,而華為則提出了一個創新性的互助標注方法多模態數據的標注,在時鐘同步和時間對齊的基礎上,有標注模態的數據對無標注模態的數據進行自動標注。當傳感設備越多,標注的設備越多,關聯的模態會越來越多,自動標注的效率也會大幅度提升。
小樣本實時訓練模型相比偏傳統的大規模語義訓練,其傳感信號的樣本數據很少,傳感器不夠穩定,一旦發生波動就會對模型帶來較大的影響。因此,端側不能用現有的傳統AI模型來做訓練,華為專門為此研發出端側的小樣本實時訓練模型,以解決小樣本數據波動和不穩定帶來的沖擊性問題。
三大技術的最終歸一,模型的核心算法是無監督學習算法稀疏編碼,在找到一個完備的基礎向量機后,向量信號可以利用基礎向量機的線性組合來表征輸入信號。這種算法的優勢在于能夠避免由數據不穩定、樣本空間不穩定帶來的模型波動問題。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
理解用戶需求,入口萬劍歸一
在HarmonyOS之中,分久必合合久必分的道理也一樣適用。當傳感器的聯邦數據實時、準確地捕獲消費者的意圖,接下來就要要根據意圖去找對應的服務,把匹配的動作都交由機器解決。想要實現這一步并不容易,永不需要不斷增強隱式向量化意圖,從海量服務和應用里找到數十個候選集,再加上顯式結構化的意圖,對候選集做進一步篩選和邏輯組裝,增強消費者意圖的精準反饋。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
在過去的一年里, “小藝建議”服務了無數用戶,這背后的無名英雄便是以上技術。與HarmonyOS的設計理念一樣,小藝也采用了完整的解耦化的架構設計,支持彈性化部署。這意味著所有的生態設備,所有的HarmonyOS和 OpenHarmony的小設備,都可以安裝小藝,讓用戶擁有統一的入口。
王成錄指出,當前“小藝建議”的使用率已經很高,并且小藝能夠深入理解用戶意圖,并根據用戶的時間、地點、場景把可能需要的服務都放到小藝建議里。這樣一來,用戶主動搜索的頻率就越來越低。頻率越低,代表“小藝建議”越智能,未來有望基于此打造成為一個面向萬物互聯的人機交互的統一入口,通過小藝就可以屏蔽各種各樣的硬件差異。王成錄也將小藝稱作“未來萬物互聯的里程碑和出發點”。
當小藝這樣的部署,有了鴻蒙生態的互聯和融合,在任何一個場景下,無論用戶在哪一刻使用哪個設備觸達,小藝都能感知到。小藝也會根據此刻觸達的方式把信息反饋給你,省去了在不同設備之間不斷配來配去、查找服務做邏輯組裝的過程。王成錄也希望,華為希望通過重重賦能,讓真正的萬物互聯、萬物智聯時代加速到來。
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
像獲取服務一樣,簡單開發
開發者,是所有這些技術落地的核心驅動力。而此次HarmonyOS Connect軟件服務包3.0便針對開發者提供了海量的開發幫助,新增支持垂類應用的帶屏設備,并升級了基礎服務包、增強服務包,以及包含小藝、服務中心、暢連等應用在內的應用服務包,開發者直接調用即可快速開發出具備智慧AI能力的設備,預計到2022年將全面適配支持豐富應用的帶屏設備。
王成錄表示,未來將不斷增強能力、增強工具,給開發者留出更多的時間和便利去做業務的創新,“把復雜交給我們,把簡便留給開發者。”
被激發的智能交互之力,鴻蒙如何實現飛鴻踏雪
面向硬件開發者,華為提供了一站式設備集成開發環境,支持遠程開發、按需定制、一鍵編譯和燒錄、一鍵集成服務包和設備仿真器,降低了開發者的接入門檻和開發周期,提升了開發效率,無屏設備開發周期已由2個月減少至2周,帶屏設備預計2023年將縮減到2個月以內。
https://device.harmonyos.com/cn/develop/ide
面向應用開發者,華為推出了一站式設備集成開發環境,其中提供了超過50個原子化服務和卡片模板,支持多端雙向預覽、低代碼開發、分布式模擬仿真以及分布式調測等。據介紹,目前原子化服務開發效率已由1個月縮減至15天,明年的目標是一周,預計到2023年,只需要5天就可以完成開發。
從2020年9月10日,HarmonyOS 2.0版本的上線,到2021年6月2日,HarmonyOS 2手機版本的正式發布,HarmonyOS已經成為國產操作系統的代名詞,而鴻蒙生態也就此開始持續加速。在這樣的生態之中,萬物互聯與AI的力量讓人與設備、人與服務的交互模式開始改變。
生態意味著和光同塵,鴻蒙生態從誕生起就肩負的使命想要持續的走向巔峰,這一過程雖然孤獨,卻不能一直孤獨。鴻蒙生態的構建離不開開發者和生態合作伙伴的幫助,王成錄博士也表示歡迎更多合作伙伴和開發者加入鴻蒙生態,持續添磚加瓦,開啟萬物智聯的新時代。