手機操作系統,AI 革命前夜
NO.1
如果手機變成這樣
1.你邊走邊唱《烏梅子醬》,手機突然響起:
2、手機提醒你:
3、 當你步入辦公室附近,手機提前準備好打卡應用並提醒:
它預判了你的預判,它提前知曉你的意圖。
你以爲是科幻嗎?事實上這種能夠預判用戶意圖,極具“智商”的手機正在來臨!
12月28日,繼官宣自研70億參數端側AI大模型與全新操作系統魔法OS 8.0定檔明年1月後,榮耀首次公佈了MagicOS 8.0一項基於平臺級AI技術的“王炸級”交互功能——任意門。
而透過這個與多啦A夢頗具淵源的功能,我們似乎看到了在圖形界面統治智能手機人機交互,APP不斷吞噬着世界下的一種新可能——手機系統成爲協助決策和思考的管家。
爲了進一步揭開“任意門”背後魔法,爲此我們專門採訪了榮耀的技術研發團隊。
在深入交流後,瞭解到了三個關鍵信息:
1.任意門背後是榮耀基於意圖識別的全新人機交互設計;
2.榮耀端側大模型被稱作“魔法大模型”,其重點不是做問答和生成,而是將AI大模型的能力拆解到以用戶爲中心的各種場景中;
3.基於意圖識別的人機交互,MagicOS將催生移動互聯網生態的大繁榮。
上面三點談到最核心的就是:意圖識別。
更科學更專業的說法是:意圖識別人機交互(Intent Based UI),簡稱爲意圖UI。
在意圖UI加持,手機將轉向以下四個方面
a.從被動轉向主動
之前的人機交互進化,機器都是在被動接受人類信息,但今天的機器開始主動來預測你要什麼。
b.從機器助手轉向智慧生命體
以前的人機交互給人的體驗還是機械化的,語音搜索和播報仍然機械感十足,但最新的手機的交互開始由“智慧生命體”驅動。
c.從邏輯性走向感性
以前的人機交互更多的執行人類給予的線性邏輯,但現在的人機交互已經變得情感化了。
d.從碎片轉向全程閉環
原來的人機交互一直只能完成一個功能,但現在的人機交互可能一鍵完成所有閉環。
這是一種全新的人機交互方式,智能終端具備了識別用戶意圖的特徵,“人機交互”技術進入了一個新的時代。
這是一種全新的人機交互方式,機器具備了識別用戶意圖的特徵,“人機交互”技術進入了一個新的時代。
NO.2
“人機交互”的新時代來臨
自1964年電腦開啓命令式的人機交互後,經歷了從簡單命令行界面(Command Line User Interface,CLI)到圖形用戶界面(Graphical User Interface,GUI),再到觸摸屏人機交互的變革:
1. 命令行界面 (CLI)
時期:早期計算機誕生至20世紀80年代。
代表性系統:DOS是早期個人計算機上常見的命令行系統。
2. 圖形用戶界面 (GUI)
時期:20世紀80年代至今。
代表性系統:Apple的Mac系統、Microsoft的Windows系統。
3.觸摸屏人機交互的變革
時期:21世紀初至今。
代表性系統:iOS和Android等移動操作系統,以及觸摸屏筆記本和手機。
命令行界面 (CLI)
操作專業要求較高,對用戶並不友好
圖形用戶界面 (GUI)
雖然直觀,在某些任務上效率不高。
觸摸屏交互
對於複雜任務的執行不夠方便。
隨着信息的爆發式增長,人們呼喚新的人機交互方式,意圖UI就是變革的新方向,到底什麼是意圖UI(Intent Based UI)呢,它具備以下交互新特徵:
1.個性化服務
端側AI通過學習用戶的行爲和偏好,使用戶體驗更符合個體需求。
2.簡化操作
用戶只需表達意圖,操作系統就能理解並執行相應任務。
3.多通道交互
支持多種交互方式,用戶能夠以最自然的方式與操作系統進行溝通。
4.減少學習曲線
減輕用戶記憶複雜命令,降低了使用新系統的學習曲線。
意圖UI使人機交互更智能高效,因此榮耀也提出這將是人機交互變革的新方向。
榮耀研發管理總裁鄧斌解釋了原因:
翻譯的通俗點,手機是魔法師,也是預言家,手機還要有讀心術。
這樣的人機交互變革,比前三次的變化還要震撼。
NO.3
見識一下榮耀的意圖UI
16年前,搭載着圓角短形APP的iPhone改變了智能手機潮水的方向,將互聯網裝進了每一個人的口袋。
而基於平臺級AI能力,榮耀意圖識別的全新交互範式,正在將AI裝入了每個人的口袋,帶來場效率革命。
意圖識別人機交互
(Intent Based UI)
全新交互體驗,正在悄然落地,雖然剛剛開始,複雜度處於起步階段,但已經代表未來方向。
1.調用極靈活
a.任意門
基於意圖,跨應用一步直達。
長按所在界面文字、圖片、文件、視頻,可拖至左右兩側屏幕邊緣處,觸發任意門功能,通過AI進行意圖識別,快捷展示最合適的應用入口。
上述元素可一步直達,快捷流轉至其他應用服務,智慧推薦。如,一拖地址打車、一拖全局收藏、一拖分享、一拖搜索、一拖購物等,打破APP應用間體驗壁壘,實現信息跨應用、跨設備的智慧流轉,隨時隨地、心流不斷。
b.靈動膠囊
實時信息可看可互動。
屏幕頂部的靈動膠囊,在不影響用戶當前操作的情況下,顯示服務的實時信息,及時知悉到用戶。用戶可以通過眼睛注視動態通知,即可打開應用。靈動膠囊提供了全場景、多設備、系統級的入口,各項服務狀態一瞥即得。
任意門的實現綜合了榮耀的魔法端側大模型、MagicLive 智慧引擎、多模態決策引擎等,能設計出來真是個技術活。靈動膠囊則用到了多模態理解的AI能力。
NO.4
“意圖UI”的底層AI邏輯
但要讓手機理解人類意圖,這並不容易做到。
意圖UI說起來很酷,但在技術方面存在門檻。
直到AI大模型時代到來,才使得設備理解人成爲了可能。
也許不少人看多了AI概念,容易被繞得雲裡霧裡,但其實AI也是有發展階段分層次的:
①算法級別的AI
這個層次的AI發展到頂尖就是阿爾法狗,專注於細分領域得算法
②應用級別的AI
這個層次的AI發展的頂峰,就是蘋果的手機的AI攝影和MJ繪畫;
③平臺級別的AI
其代表就是榮耀MagicOS 7.0其可基於地理圍欄、用戶習慣等信息主動提供建議引導及服務。
④大模型級別的AI
這個層次的AI纔剛開始不久,以百模大戰冒出頭的大模型爲主,而綁定在手機端側的大模型,例如榮耀的魔法大模型MagicLLM,與雲側相比更具隱私化、便攜化、個人化。
如何讓手機能夠容易理解人類,讓“意圖UI”更加順暢,榮耀手機走在了時代前列。
爲什麼“意圖UI”可以在榮耀手機體驗中得到落地,最重要的原因就是榮耀擁有第三層平臺級的AI能力,從2016開始榮耀在設計操作系統框架中就強化AI能力。
當然,今天第四層端側大模型的錦上添花,使得“意圖UI”能力變得更強。
他們都是端側AI,一個是端側平臺級AI,一個是端側大模型級AI
爲什麼榮耀要在端側AI上發力呢?
它是如何讓“意圖UI”得到更好體現的?
我們把採訪榮耀研發管理總裁鄧斌的問題整理分享一下:
模型有兩種邏輯,其中一種是大小邏輯,模型越大通用化能力越強,端側小模型側重於針對使用者的“個性化”能力,這種“個性化”能力,是通過學習使用者的行爲習慣和私有數據來完成“意圖UI”的達成。
你到了一個陌生城市,手機會告訴你附近有你喜歡的酒店,哪裡有想要吃的美食。這就是端側大模型的意義,它會針對你所在地理位置,根據生活服務邏輯對你的衣食住行給出建議和方法,這樣“意圖UI”更容易體現。雲端大模型不能幫你做這些事情,就算是雲端大模型願意做,你也不敢把這些隱私數據發給它。如果再仔細思考,你會發現AI大模型的未來在端側。
一開始雲側大模型會更吸引社會關注,互聯網最開始也是通用服務如門戶網站,但互聯網就是轉向個體,根據你的性格和個人愛好進行交互。雲側大模型服務很快就會標準化,而端側大模型的應用會多元和個性,這是真正的藍海。人口越多的國家,機遇也就越大,從這一個標準來看,端側AI的未來將會在中國。
當然,要把“意圖UI”做到極致,端側大模型只是榮耀AI級平臺技術上的一個新支撐。榮耀的“意圖UI”之所以走在前列,因爲榮耀的競爭核心本來就是平臺級AI能力。
從2016年就開始在做AI技術儲備,
今天的端側大模型讓榮耀的AI能力更進一步。
NO.5
爲了意圖UI+AI這一刻,準備了十年
萬事皆有因果,從量變到質變。
榮耀的魔法OS+端側70億參數魔法大模型自然不可能一蹴而就,而是因爲榮耀早就有AI戰略和AI技術儲備,才得以按部就班恰逢時機。
榮耀在這方面的戰略構想完整清楚:
“我們認爲它是OS未來的演進趨勢。第一代諾基亞就是菜單喚醒式,手機廠把簡單的服務藏在了菜單後面做索引,讓你去完全調用裡面已存在的菜單,基本上不可升級服務。第二代像蘋果、安卓,給你一個界面,每點進一個APP,意味着你已經和APP達成獲取服務連接的合同,而手機側應用商店開放一個市場,這個市場讓你賺流水錢。第三代是我們的責任,一定是真正把應用分解成服務,通過更加高效的和你智能互動,瞭解清楚你需要哪些服務有效地去做整合。”
AI是MagicOS的初心,是榮耀一以貫之的戰略,不是今天才被人看到。
自2016年以來,榮耀持續耕耘,以10年投入一百億的決心,深耕AI和手機的結合。
看看時間,這一切早在AI大模型成爲熱潮之前,榮耀就已經講AI和手機操作系統深深綁定了。
當時間接近2024年,即8年之後,在過去平臺級AI的積累下,和最新AI大模型技術的加持下,榮耀爲我們展現了未來OS的雛形。
端側AI 1.0——應用級
在2016年,榮耀就發佈了一款AI Phone——初代Magic手機,AI作爲一個核心能力,來驅動用戶體驗的提升,把 AI理念應用到單個業務的增強上。
顯然,此時的榮耀AI只是原有應用的輔助角色。
端側AI 2.0—平臺級
2021年之後,榮耀把AI能力用在平臺級AI上,例如MagicOS 7.0,每個人的操作系統用一段時間之後,它會基於個人使用習慣,對於處理器能力、GPU能力、NPU能力,依照個人需求進行相應調整。
端側AI 3.0 —大模型加持平臺級AI
2024,榮耀將把70億參數的AI端側大模型,應用到原有的平臺級AI的演進上,開始對用戶個人的生活學習、圍繞用戶個人的服務能力進行漸進式的提升和發展。
榮耀魔法OS所打造的“個人化全場景操作系統”,這一發展道路將會因爲端側AI算力、AI大模型應用而大大提升,在一月MagicOS 8.0和Magic6發佈之後,會加大榮耀領先程度。
端側AI 4.0—未來級?
未來的操作系統,每個人的表現都不一樣。你的手機每天早八點給你放音樂,和另外一個生活習慣不同的人的手機系統,會呈現不同的樣子。具體貼心讀心護心到什麼程度,現在連想象也有點不大夠用。
榮耀正以手機的系統級端側AI,重塑操作系統。
2024年1月10日,榮耀將正式發佈魔法OS MagicOS 8.0和魔法大模型 MagicLLM。
可想而知,這可是國內第一款“真”端側AI大模型手機,意義重大。
NO.6
一個意圖AI化,戰略生態來支持
你可能只是一個意圖,手機後面是一個技術軍團在支持你。你按下的0.5秒瞬間,後面可能是3000個工程師的技術結晶。
這一切濃縮在榮耀的魔法操作系統和魔法大模型上,看得見各種方便,看不見一整個技術圈。
在MagicOS 8.0上,已經實現了系統和高通芯片的軟硬高度融合;在通用雲端大模型上,CEO趙明早在6月29日上海演講中就判斷,
“未來下一步手機AI的發展,我們認爲端側大模型應該是手機發展的方向,當然未來跟網絡大模型相結合,可以選擇接入文心一言、ChatGPT等不同的網絡大模型”;
在垂域大模型上,榮耀的合作伙伴也非常多。
當這一切逐漸搭建起來時,端、雲協同已聚集成基本態勢。
端側並不是獨自支撐智能化,而是進行任務切割。
a端側會在芯片硬件上融合AI操作系統和AI大模型,但這個大模型不需要太大;
b端側AI負責主動服務,整合手機各項核心功能和APP合作伙伴;
c端側AI強化隱私保護,這些私人數據全部鎖在端側芯片運載的系統和AI大模型上,沒有用戶的許可絕不出端;
d非用戶隱私的部分,可以分割脫敏後交給雲側AI大模型處理;
e通過隱私數據和非隱私數據的端側AI和雲側AI的分工,既降低了手機的功耗,又降低了雲側AI潛在的隱私問題。
榮耀提出的意圖交互絕非一家完成,而是聯合生態夥伴一起做;榮耀建立了榮耀開放實驗室,合作伙伴和客戶可以在開放實驗室與榮耀進行互聯互通;全新AI生態,是技術精英們的聯合(共同驅動)。
意圖UI是操作系統歷史性機遇,也是中國AI力量的破局點,凝聚AI力量,開啓操作系統新篇章。
NO.7
AI時代的手機操作系統會長什麼樣?
意圖UI表現有多好,決定於AI能力。
而AI的能力,是寄生在操作系統上的。
談到AI能力,一定撇不開操作系統。
AI時代,新的操作系統正在也必然會誕生。
操作系統,一直都是巨頭在壟斷,大部分企業並沒有機會,在一個賽道里面競爭,先發優勢權重太大。
但AI時代的來臨,帶來操作系統的鉅變,AI重塑操作系統,從命令式UI到意圖UI,即使企業原先的操作系統並沒有盡善盡美,疊加上AI的buff,就好像長了翅膀,離開了原有賽道。
鄧斌總結了榮耀在操作系統方面的佈局:
“MagicOS從7.0到8.0,最大的一個變化,一個是理解能力,第二個是學習能力,第三個是真正和應用產生互動的平臺級能力。”
2024年1月10日,榮耀將會推出全新的MagicOS 8.0操作系統和70億參數手機端側魔法大模型MagicLLM,很有可能就是AI時代操作系統的樣板。
AI時代的操作系統將具備以下關鍵特徵和變革:
1、智能感知:
具備更強大感知能力獲取環境信息,利用機器學習算法進行分析和理解。
2、自適應性:
自動學習和適應用戶的習慣與偏好,動態調整系統設置、甚至預測用戶行爲。
3、多模態識別:
用戶能夠通過語音、手勢或圖像與系統進行更自然的交互。
4、智能決策和推薦:
基於大數據和機器學習,AI操作系統能夠進行智能決策。
5、安全性和隱私保護:
注重數據安全和隱私保護,確保用戶的信息得到妥善保護。
6、端側計算:
更加註重在本地設備上進行端側計算,以提高響應速度、降低延遲,並減少對雲服務的依賴。
7、生態系統整合:
這些操作系統通常能夠與各種AI服務和設備進行無縫集成,構建更爲完整和強大的人工智能生態系統。
MagicOS 8.0操作系統正在朝以上七個方向努力,正因爲有了這些能力,才使得“意圖UI”在手機上有很好呈現,展示了操作系統的AI能力。
手機操作系統,AI革命前夜
2024年,榮耀想做的不僅僅是中國榮耀,而是世界榮耀。
這不僅是一場技術的征途,也是與更多工程師共進退的堡壘。
手機前端的“意圖UI”讓人驚豔,後臺則是萬千工程師的技術匯聚。
今天的榮耀,正華麗變身爲世界手機端側AI創新的前鋒。
從魔法大模型巧妙融入手機硬件,到系統級AI手機操作系統的崛起,
我們希望看到榮耀可以引領中國AI力量崛起,因爲我們相信“AI的未來在端側,而端側AI的未來在中國”。