手機操作系統,AI 革命前夜

NO.1

如果手機變成這樣

1.你邊走邊唱《烏梅子醬》,手機突然響起:

2、手機提醒你:

3、 當你步入辦公室附近,手機提前準備好打卡應用並提醒:

它預判了你的預判,它提前知曉你的意圖。

你以爲是科幻嗎?事實上這種能夠預判用戶意圖,極具“智商”的手機正在來臨!

12月28日,繼官宣自研70億參數端側AI大模型與全新操作系統魔法OS 8.0定檔明年1月後,榮耀首次公佈了MagicOS 8.0一項基於平臺級AI技術的“王炸級”交互功能——任意門。

而透過這個與多啦A夢頗具淵源的功能,我們似乎看到了在圖形界面統治智能手機人機交互,APP不斷吞噬着世界下的一種新可能——手機系統成爲協助決策和思考的管家。

爲了進一步揭開“任意門”背後魔法,爲此我們專門採訪了榮耀的技術研發團隊。

在深入交流後,瞭解到了三個關鍵信息:

1.任意門背後是榮耀基於意圖識別的全新人機交互設計;

2.榮耀端側大模型被稱作“魔法大模型”,其重點不是做問答和生成,而是將AI大模型的能力拆解到以用戶爲中心的各種場景中;

3.基於意圖識別的人機交互,MagicOS將催生移動互聯網生態的大繁榮。

上面三點談到最核心的就是:意圖識別。

更科學更專業的說法是:意圖識別人機交互(Intent Based UI),簡稱爲意圖UI。

在意圖UI加持,手機將轉向以下四個方面

a.從被動轉向主動

之前的人機交互進化,機器都是在被動接受人類信息,但今天的機器開始主動來預測你要什麼。

b.從機器助手轉向智慧生命體

以前的人機交互給人的體驗還是機械化的,語音搜索和播報仍然機械感十足,但最新的手機的交互開始由“智慧生命體”驅動。

c.從邏輯性走向感性

以前的人機交互更多的執行人類給予的線性邏輯,但現在的人機交互已經變得情感化了。

d.從碎片轉向全程閉環

原來的人機交互一直只能完成一個功能,但現在的人機交互可能一鍵完成所有閉環。

這是一種全新的人機交互方式,智能終端具備了識別用戶意圖的特徵,“人機交互”技術進入了一個新的時代。

這是一種全新的人機交互方式,機器具備了識別用戶意圖的特徵,“人機交互”技術進入了一個新的時代。

NO.2

“人機交互”的新時代來臨

自1964年電腦開啓命令式的人機交互後,經歷了從簡單命令行界面(Command Line User Interface,CLI)到圖形用戶界面(Graphical User Interface,GUI),再到觸摸屏人機交互的變革:

1. 命令行界面 (CLI)

時期:早期計算機誕生至20世紀80年代。

代表性系統:DOS是早期個人計算機上常見的命令行系統。

2. 圖形用戶界面 (GUI)

時期:20世紀80年代至今。

代表性系統:Apple的Mac系統、Microsoft的Windows系統。

3.觸摸屏人機交互的變革

時期:21世紀初至今。

代表性系統:iOS和Android等移動操作系統,以及觸摸屏筆記本和手機。

命令行界面 (CLI)

操作專業要求較高,對用戶並不友好

圖形用戶界面 (GUI)

雖然直觀,在某些任務上效率不高。

觸摸屏交互

對於複雜任務的執行不夠方便。

隨着信息的爆發式增長,人們呼喚新的人機交互方式,意圖UI就是變革的新方向,到底什麼是意圖UI(Intent Based UI)呢,它具備以下交互新特徵:

1.個性化服務

端側AI通過學習用戶的行爲和偏好,使用戶體驗更符合個體需求。

2.簡化操作

用戶只需表達意圖,操作系統就能理解並執行相應任務。

3.多通道交互

支持多種交互方式,用戶能夠以最自然的方式與操作系統進行溝通。

4.減少學習曲線

減輕用戶記憶複雜命令,降低了使用新系統的學習曲線。

意圖UI使人機交互更智能高效,因此榮耀也提出這將是人機交互變革的新方向。

榮耀研發管理總裁鄧斌解釋了原因:

翻譯的通俗點,手機是魔法師,也是預言家,手機還要有讀心術。

這樣的人機交互變革,比前三次的變化還要震撼。

NO.3

見識一下榮耀的意圖UI

16年前,搭載着圓角短形APP的iPhone改變了智能手機潮水的方向,將互聯網裝進了每一個人的口袋。

而基於平臺級AI能力,榮耀意圖識別的全新交互範式,正在將AI裝入了每個人的口袋,帶來場效率革命。

意圖識別人機交互

(Intent Based UI)

全新交互體驗,正在悄然落地,雖然剛剛開始,複雜度處於起步階段,但已經代表未來方向。

1.調用極靈活

a.任意門

基於意圖,跨應用一步直達。

長按所在界面文字、圖片、文件、視頻,可拖至左右兩側屏幕邊緣處,觸發任意門功能,通過AI進行意圖識別,快捷展示最合適的應用入口。

上述元素可一步直達,快捷流轉至其他應用服務,智慧推薦。如,一拖地址打車、一拖全局收藏、一拖分享、一拖搜索、一拖購物等,打破APP應用間體驗壁壘,實現信息跨應用、跨設備的智慧流轉,隨時隨地、心流不斷。

b.靈動膠囊

實時信息可看可互動。

屏幕頂部的靈動膠囊,在不影響用戶當前操作的情況下,顯示服務的實時信息,及時知悉到用戶。用戶可以通過眼睛注視動態通知,即可打開應用。靈動膠囊提供了全場景、多設備、系統級的入口,各項服務狀態一瞥即得。

任意門的實現綜合了榮耀的魔法端側大模型、MagicLive 智慧引擎、多模態決策引擎等,能設計出來真是個技術活。靈動膠囊則用到了多模態理解的AI能力。

NO.4

“意圖UI”的底層AI邏輯

但要讓手機理解人類意圖,這並不容易做到。

意圖UI說起來很酷,但在技術方面存在門檻。

直到AI大模型時代到來,才使得設備理解人成爲了可能。

也許不少人看多了AI概念,容易被繞得雲裡霧裡,但其實AI也是有發展階段分層次的:

①算法級別的AI

這個層次的AI發展到頂尖就是阿爾法狗,專注於細分領域得算法

②應用級別的AI

這個層次的AI發展的頂峰,就是蘋果的手機的AI攝影和MJ繪畫;

③平臺級別的AI

其代表就是榮耀MagicOS 7.0其可基於地理圍欄、用戶習慣等信息主動提供建議引導及服務。

④大模型級別的AI

這個層次的AI纔剛開始不久,以百模大戰冒出頭的大模型爲主,而綁定在手機端側的大模型,例如榮耀的魔法大模型MagicLLM,與雲側相比更具隱私化、便攜化、個人化。

如何讓手機能夠容易理解人類,讓“意圖UI”更加順暢,榮耀手機走在了時代前列。

爲什麼“意圖UI”可以在榮耀手機體驗中得到落地,最重要的原因就是榮耀擁有第三層平臺級的AI能力,從2016開始榮耀在設計操作系統框架中就強化AI能力。

當然,今天第四層端側大模型的錦上添花,使得“意圖UI”能力變得更強。

他們都是端側AI,一個是端側平臺級AI,一個是端側大模型級AI

爲什麼榮耀要在端側AI上發力呢?

它是如何讓“意圖UI”得到更好體現的?

我們把採訪榮耀研發管理總裁鄧斌的問題整理分享一下:

模型有兩種邏輯,其中一種是大小邏輯,模型越大通用化能力越強,端側小模型側重於針對使用者的“個性化”能力,這種“個性化”能力,是通過學習使用者的行爲習慣和私有數據來完成“意圖UI”的達成。

你到了一個陌生城市,手機會告訴你附近有你喜歡的酒店,哪裡有想要吃的美食。這就是端側大模型的意義,它會針對你所在地理位置,根據生活服務邏輯對你的衣食住行給出建議和方法,這樣“意圖UI”更容易體現。雲端大模型不能幫你做這些事情,就算是雲端大模型願意做,你也不敢把這些隱私數據發給它。如果再仔細思考,你會發現AI大模型的未來在端側。

一開始雲側大模型會更吸引社會關注,互聯網最開始也是通用服務如門戶網站,但互聯網就是轉向個體,根據你的性格和個人愛好進行交互。雲側大模型服務很快就會標準化,而端側大模型的應用會多元和個性,這是真正的藍海。人口越多的國家,機遇也就越大,從這一個標準來看,端側AI的未來將會在中國。

當然,要把“意圖UI”做到極致,端側大模型只是榮耀AI級平臺技術上的一個新支撐。榮耀的“意圖UI”之所以走在前列,因爲榮耀的競爭核心本來就是平臺級AI能力。

從2016年就開始在做AI技術儲備,

今天的端側大模型讓榮耀的AI能力更進一步。

NO.5

爲了意圖UI+AI這一刻,準備了十年

萬事皆有因果,從量變到質變。

榮耀的魔法OS+端側70億參數魔法大模型自然不可能一蹴而就,而是因爲榮耀早就有AI戰略和AI技術儲備,才得以按部就班恰逢時機。

榮耀在這方面的戰略構想完整清楚:

“我們認爲它是OS未來的演進趨勢。第一代諾基亞就是菜單喚醒式,手機廠把簡單的服務藏在了菜單後面做索引,讓你去完全調用裡面已存在的菜單,基本上不可升級服務。第二代像蘋果、安卓,給你一個界面,每點進一個APP,意味着你已經和APP達成獲取服務連接的合同,而手機側應用商店開放一個市場,這個市場讓你賺流水錢。第三代是我們的責任,一定是真正把應用分解成服務,通過更加高效的和你智能互動,瞭解清楚你需要哪些服務有效地去做整合。”

AI是MagicOS的初心,是榮耀一以貫之的戰略,不是今天才被人看到。

自2016年以來,榮耀持續耕耘,以10年投入一百億的決心,深耕AI和手機的結合。

看看時間,這一切早在AI大模型成爲熱潮之前,榮耀就已經講AI和手機操作系統深深綁定了。

當時間接近2024年,即8年之後,在過去平臺級AI的積累下,和最新AI大模型技術的加持下,榮耀爲我們展現了未來OS的雛形。

端側AI 1.0——應用級

在2016年,榮耀就發佈了一款AI Phone——初代Magic手機,AI作爲一個核心能力,來驅動用戶體驗的提升,把 AI理念應用到單個業務的增強上。

顯然,此時的榮耀AI只是原有應用的輔助角色。

端側AI 2.0—平臺級

2021年之後,榮耀把AI能力用在平臺級AI上,例如MagicOS 7.0,每個人的操作系統用一段時間之後,它會基於個人使用習慣,對於處理器能力、GPU能力、NPU能力,依照個人需求進行相應調整。

端側AI 3.0 —大模型加持平臺級AI

2024,榮耀將把70億參數的AI端側大模型,應用到原有的平臺級AI的演進上,開始對用戶個人的生活學習、圍繞用戶個人的服務能力進行漸進式的提升和發展。

榮耀魔法OS所打造的“個人化全場景操作系統”,這一發展道路將會因爲端側AI算力、AI大模型應用而大大提升,在一月MagicOS 8.0和Magic6發佈之後,會加大榮耀領先程度。

端側AI 4.0—未來級?

未來的操作系統,每個人的表現都不一樣。你的手機每天早八點給你放音樂,和另外一個生活習慣不同的人的手機系統,會呈現不同的樣子。具體貼心讀心護心到什麼程度,現在連想象也有點不大夠用。

榮耀正以手機的系統級端側AI,重塑操作系統。

2024年1月10日,榮耀將正式發佈魔法OS MagicOS 8.0和魔法大模型 MagicLLM。

可想而知,這可是國內第一款“真”端側AI大模型手機,意義重大。

NO.6

一個意圖AI化,戰略生態來支持

你可能只是一個意圖,手機後面是一個技術軍團在支持你。你按下的0.5秒瞬間,後面可能是3000個工程師的技術結晶。

這一切濃縮在榮耀的魔法操作系統和魔法大模型上,看得見各種方便,看不見一整個技術圈。

在MagicOS 8.0上,已經實現了系統和高通芯片的軟硬高度融合;在通用雲端大模型上,CEO趙明早在6月29日上海演講中就判斷,

“未來下一步手機AI的發展,我們認爲端側大模型應該是手機發展的方向,當然未來跟網絡大模型相結合,可以選擇接入文心一言、ChatGPT等不同的網絡大模型”;

在垂域大模型上,榮耀的合作伙伴也非常多。

當這一切逐漸搭建起來時,端、雲協同已聚集成基本態勢。

端側並不是獨自支撐智能化,而是進行任務切割。

a端側會在芯片硬件上融合AI操作系統和AI大模型,但這個大模型不需要太大;

b端側AI負責主動服務,整合手機各項核心功能和APP合作伙伴;

c端側AI強化隱私保護,這些私人數據全部鎖在端側芯片運載的系統和AI大模型上,沒有用戶的許可絕不出端;

d非用戶隱私的部分,可以分割脫敏後交給雲側AI大模型處理;

e通過隱私數據和非隱私數據的端側AI和雲側AI的分工,既降低了手機的功耗,又降低了雲側AI潛在的隱私問題。

榮耀提出的意圖交互絕非一家完成,而是聯合生態夥伴一起做;榮耀建立了榮耀開放實驗室,合作伙伴和客戶可以在開放實驗室與榮耀進行互聯互通;全新AI生態,是技術精英們的聯合(共同驅動)。

意圖UI是操作系統歷史性機遇,也是中國AI力量的破局點,凝聚AI力量,開啓操作系統新篇章。

NO.7

AI時代的手機操作系統會長什麼樣?

意圖UI表現有多好,決定於AI能力。

而AI的能力,是寄生在操作系統上的。

談到AI能力,一定撇不開操作系統。

AI時代,新的操作系統正在也必然會誕生。

操作系統,一直都是巨頭在壟斷,大部分企業並沒有機會,在一個賽道里面競爭,先發優勢權重太大。

但AI時代的來臨,帶來操作系統的鉅變,AI重塑操作系統,從命令式UI到意圖UI,即使企業原先的操作系統並沒有盡善盡美,疊加上AI的buff,就好像長了翅膀,離開了原有賽道。

鄧斌總結了榮耀在操作系統方面的佈局:

“MagicOS從7.0到8.0,最大的一個變化,一個是理解能力,第二個是學習能力,第三個是真正和應用產生互動的平臺級能力。”

2024年1月10日,榮耀將會推出全新的MagicOS 8.0操作系統和70億參數手機端側魔法大模型MagicLLM,很有可能就是AI時代操作系統的樣板。

AI時代的操作系統將具備以下關鍵特徵和變革:

1、智能感知:

具備更強大感知能力獲取環境信息,利用機器學習算法進行分析和理解。

2、自適應性:

自動學習和適應用戶的習慣與偏好,動態調整系統設置、甚至預測用戶行爲。

3、多模態識別:

用戶能夠通過語音、手勢或圖像與系統進行更自然的交互。

4、智能決策和推薦:

基於大數據和機器學習,AI操作系統能夠進行智能決策。

5、安全性和隱私保護:

注重數據安全和隱私保護,確保用戶的信息得到妥善保護。

6、端側計算:

更加註重在本地設備上進行端側計算,以提高響應速度、降低延遲,並減少對雲服務的依賴。

7、生態系統整合:

這些操作系統通常能夠與各種AI服務和設備進行無縫集成,構建更爲完整和強大的人工智能生態系統。

MagicOS 8.0操作系統正在朝以上七個方向努力,正因爲有了這些能力,才使得“意圖UI”在手機上有很好呈現,展示了操作系統的AI能力。

手機操作系統,AI革命前夜

2024年,榮耀想做的不僅僅是中國榮耀,而是世界榮耀。

這不僅是一場技術的征途,也是與更多工程師共進退的堡壘。

手機前端的“意圖UI”讓人驚豔,後臺則是萬千工程師的技術匯聚。

今天的榮耀,正華麗變身爲世界手機端側AI創新的前鋒。

從魔法大模型巧妙融入手機硬件,到系統級AI手機操作系統的崛起,

我們希望看到榮耀可以引領中國AI力量崛起,因爲我們相信“AI的未來在端側,而端側AI的未來在中國”。