展會信息港展會大全

OPPO AI 中心產(chǎn)品總監(jiān)張峻:多模態(tài)和個性化是將要深耕的方向
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-10-21 12:25:44   瀏覽:780次  

導(dǎo)讀:劃重點 01OPPO正式發(fā)布了ColorOS 15,以超輕快、更自在為核心主題,提升流暢、AI、設(shè)計、易用性等方面。 02OPPO AI中心產(chǎn)品總監(jiān)張峻表示,多模態(tài)和個性化將是未來深耕的方向,端云協(xié)同將是重點架構(gòu)。 03ColorOS 15推出了流暢雙引擎極光引擎和潮汐引擎,提升...

劃重點

01OPPO正式發(fā)布了ColorOS 15,以“超輕快、更自在”為核心主題,提升流暢、AI、設(shè)計、易用性等方面。

02OPPO AI中心產(chǎn)品總監(jiān)張峻表示,多模態(tài)和個性化將是未來深耕的方向,端云協(xié)同將是重點架構(gòu)。

03ColorOS 15推出了流暢雙引擎極光引擎和潮汐引擎,提升應(yīng)用表現(xiàn)力和用戶體驗。

04此外,ColorOS 15引入了高效的系統(tǒng)級AI,包括全新的“超級小布助手”,支持多種交互方式。

05OPPO推出了全新的SenseNow智慧框架,實現(xiàn)多模態(tài)直覺交互體驗,提升AI交互的自然度和擬人化程度。

以上內(nèi)容由騰訊混元大模型生成,僅供參考

2024 年 10 月 17 日,OPPO 在開發(fā)者大會上正式發(fā)布了 ColorOS 15。ColorOS 15 以“超輕快、更自在”為核心主題,重點提升了流暢、AI、設(shè)計、易用性等方面。據(jù)悉,ColorOS 15 將首次搭載于 OPPO Find X8 和一加 13 新品,并計劃于 11 月開始為老機(jī)型提供正式版升級。

當(dāng)天下午,OPPO ColorOS 設(shè)計總監(jiān)陳希和 OPPO AI 中心產(chǎn)品總監(jiān)張峻接受了媒體采訪,和大家聊了聊關(guān)于 ColorOS 15 和 AI 的問題。

在對話中,OPPO AI 中心產(chǎn)品總監(jiān)張峻分享了明年 AI 發(fā)展的主要方向,表示 OPPO 會在 AI 方面帶來更多的驚喜。多模態(tài)和個性化是將要深耕的方向,同時端云協(xié)同將是重點架構(gòu)。

“我們相信,在這些領(lǐng)域持續(xù)投入后,一定能為用戶帶來更加與眾不同的體驗。”張峻進(jìn)一步說明,未來會將計算資源緊密結(jié)合的部分盡量放在端側(cè),從而提升安全性、實時性和用戶體驗。

在討論重度應(yīng)用流暢性優(yōu)化時,OPPO ColorOS 設(shè)計總監(jiān)陳;卮,系統(tǒng)級流暢性已經(jīng)達(dá)到了相對高的標(biāo)準(zhǔn),接下來重點解決的是應(yīng)用內(nèi)的流暢性。

陳希表示,對于操作系統(tǒng)來說,要在長尾場景和日常精細(xì)化體驗上進(jìn)一步優(yōu)化,這就進(jìn)入了“微觀競爭”的階段。比如,如何在各種長尾場景中保持體驗的一致性和流暢性,這是未來競爭的維度之一。其次,從系統(tǒng)流暢到應(yīng)用內(nèi)的流暢,需要從芯片層到系統(tǒng)層進(jìn)行深入地優(yōu)化。應(yīng)用消耗系統(tǒng)資源,因此我們通過底層芯片資源的調(diào)度優(yōu)化來提高應(yīng)用的表現(xiàn)力,比如潮汐引擎。

據(jù)IT之家報道,ColorOS 15 進(jìn)行了從底層到用戶界面的全面優(yōu)化,推出了流暢雙引擎 極光引擎和潮汐引擎。極光引擎引入了行業(yè)內(nèi)首個并行繪制框架,使得動畫效果更加連貫流暢。潮汐引擎則通過芯片級別的性能優(yōu)化,實現(xiàn)了流暢性和續(xù)航能力的雙重提升。

關(guān)于潮汐引擎的技術(shù)優(yōu)勢是否可供其他廠商使用,陳希表示,潮汐引擎現(xiàn)在已經(jīng)適用于雙平臺,不論是高通還是聯(lián)發(fā)科。未來這種技術(shù)一定會成為行業(yè)的標(biāo)配,因為競爭已經(jīng)到了這個階段?赡芪覀兘裉祛I(lǐng)先,明天別人就會復(fù)刻,所以在速度和質(zhì)量上保持領(lǐng)先才是關(guān)鍵。

在此次 OPPO 開發(fā)者大會上,OPPO 還提出了 AIOS發(fā)展的三個階段:從第一階段的系統(tǒng)應(yīng)用 AI 化(AI for System),到第二階段的系統(tǒng) AI 化(System for AI),再到第三階段的 AI 即系統(tǒng)(AI as System)。

基于上述理念,ColorOS 15 引入了高效的系統(tǒng)級 AI,包括全新的“超級小布助手”,它支持一鍵問屏、一拍即問、一圈即搜、圖片問答和文檔問答等多種交互方式。此外,系統(tǒng)級 AI 的感知和調(diào)度能力,ColorOS 15實現(xiàn)了自有應(yīng)用與三方應(yīng)用間的生態(tài)握手,包括英語陪練、求職面試、旅游攻略、美食點評等。

談及這個話題,張峻表示,OS 是 AI 手機(jī)的重要組成部分,AIOS有三個階段:應(yīng)用 AI 化、系統(tǒng) AI 化、AI 即系統(tǒng)。AI 已經(jīng)不再是單點功能,而是深度整合的系統(tǒng)級體驗。例如我們推出的“一鍵問屏”功能,它需要多模態(tài)交互的融合 不僅要“看”,還要“聽”,然后根據(jù)用戶的語音和視覺反饋做出反應(yīng)。這背后需要 AI 平臺資源的調(diào)度和整合,體現(xiàn)了系統(tǒng)級的 AI 化。

OS 對于 AI 手機(jī)的硬件也會有一定的要求,因為這樣的多模態(tài)交互,需要更多的感知能力,以及對端側(cè)計算能力提出了新的硬件需求。所以硬件上,無論是傳感器的布局還是芯片平臺,都會進(jìn)行相應(yīng)的升級,以支持系統(tǒng)級的 AI 功能。

今年來,AI 重構(gòu)系統(tǒng)成為了手機(jī)廠商的宣傳重點,但 AI 重構(gòu)系統(tǒng)的差異化與門檻又在哪里?

針對這個問題,張峻表示,OPPO 通過 SenseNow 框架實現(xiàn)了“邊看邊說”的功能。表面上看這只是一個細(xì)微的體驗提升,但背后的技術(shù)路徑完全不同。傳統(tǒng) AI 交互通常是單一的 要么“看”,要么“說”,但我們的一鍵問屏功能可以做到邊看邊說,實現(xiàn)同步多模態(tài)的交互。這意味著用戶在瀏覽內(nèi)容時,可以立即詢問或發(fā)出指令,AI 可以實時響應(yīng),而不再需要用戶在不同模態(tài)之間來回切換操作。

實現(xiàn)這一點的背后有著復(fù)雜的分流決策和信息融合理解技術(shù)。系統(tǒng)需要同時處理多種輸入源,如視覺信息和語音指令,然后對這些輸入進(jìn)行協(xié)同處理。我們的目標(biāo)是讓 AI 助理像真人助理一樣,能夠“邊看、邊說、邊做”,這種無縫的體驗背后涉及相當(dāng)高的技術(shù)門檻。

IT之家了解到,在此次開發(fā)者大會上,OPPO 推出了全新的 SenseNow 智慧框架,實現(xiàn)多模態(tài)直覺交互體驗。該框架集成了自主研發(fā)的語音多級喚醒和個性化識別技術(shù),使語音喚醒和識別準(zhǔn)確率達(dá)到 97% 以上。多模態(tài)理解技術(shù)讓 AI 具備看的能力,支持 1000 多種主體識別,并實現(xiàn)圖文混合檢索。生成式語音合成框架讓 AI 能夠模擬真人語氣和節(jié)奏,支持超過 20 種個性化音色。SenseNow 智慧框架還融合不同類型的信息源,理解復(fù)雜意圖,完成跨應(yīng)用操作。

陳希補充表示,OPPO 提出了一個 AI 理念,叫做“直覺、整合、專屬、安全”四個核心要素。其中,“直覺”和“整合”是今天我們特別強(qiáng)調(diào)的。直覺是指系統(tǒng)越來越像人類,能夠具備類似人的感知能力,讓交互變得自然和擬人化。整合是指,將各個模態(tài)的信息和交互整合到一起,而不是簡單地一個模態(tài)完成后切換到另一個模態(tài)。例如在今天的發(fā)布會上展示的“一鍵問屏”,這功能看似用戶只是說了一句話,但背后 AI 系統(tǒng)需要進(jìn)行很多隱含的前提理解和推理,以完成用戶的意圖。

這其中的整合就是我們強(qiáng)調(diào)的核心難點之一。機(jī)器不像人類那樣自然而然地理解場景和意圖,它需要經(jīng)過大量的條件界定和判斷。而我們做了許多投入,使得這些多模態(tài)交互和整合能夠最終展現(xiàn)在用戶面前,這也是 AI 重構(gòu)系統(tǒng)的一個重要部分。

贊助本站

相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會 | 展會港