Good Luck To You!

手机扫一扫

vivo自研大模型全家桶炸場,亮出PhoneGPT智慧體,藍心小V一鍵搞定衣食住行

鳳凰科技 2024-10-11 14:56:39 5

作者 | 雲鵬

編輯 | 李水青

智東西10月10日報道,今天vivo在年度開發者大會上正式釋出了新的AI戰略“藍心智慧”,同時釋出了升級的自研藍心大模型矩陣、原系統5(OriginOS 5)、藍河作業系統2(BlueOS 2)等多項新產品和技術升級。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

vivo高階副總裁、技術長施玉堅首先登臺,他提到,在過去三年和今年前三季度,vivo位列國產手機銷量第一。

去年,vivo推出了自己的技術品牌——“藍科技”。藍科技是從應用創新到底層技術創新,從硬體驅動到形成軟硬體一體化能力,其包含了“藍圖影像”、“藍海續航系統”、“藍晶晶片技術棧”以及升級的“藍心大模型”和“藍河作業系統”。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

一、vivo釋出全新AI戰略“藍心智慧”,大模型技術與手機作業系統深度融合

在去年開發者大會上,vivo釋出了自研十億、百億、千億三個引數量級,由5款語言大模型組成的藍心大模型矩陣。施玉堅說,vivo對於藍心大模型的定位是,透過豐富中文資料與知識的供給,把藍心大模型做成最懂中國人的大模型。

截至今天,vivo的AI能力覆蓋全球60多個國家和地區,服務超過5億手機使用者,大模型token輸出量超過了3萬億個。

在此次大會上,vivo副總裁、OS產品副總裁、vivo AI全球研究院院長周圍正式釋出了vivo的全新AI戰略——藍心智慧。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

藍心智慧是將大模型技術與手機作業系統深度融合的個人智慧。周圍解釋,以藍心大模型為技術底座,藍心智慧可以理解使用者的個人情景和偏好,為使用者提供個人化的專屬服務;透過系統深度融合,為使用者持續構建更自然、符合直覺的互動,帶來更智慧溫暖的體驗。

為了達成這一點,vivo從三個方面用AI重構了系統體驗。首先是重構人與裝置的互動體驗,讓互動更自然更符合直覺。在藍心大模型的加持下,手機將具備更強大的分析能力,無論是按壓螢幕的力度、圈搜文字或圖片、還是拖拽一段地址資訊,多模態大模型都可以深度解讀你的意圖,進而給你需要的反饋和服務。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

依託文字大模型,結合自監督學習語音編解碼、多語音任務學習和模態對齊等技術,藍心小V在文字能力外,進一步具備了強大的語音表徵理解與生成能力,進而讓手機能夠與人自然對話、翻譯語言、模擬人聲甚至理解對話中的情緒。

第二個方面是重構人與數字世界的服務體驗,讓智慧更加個人化,也就是構建簡單高效的服務獲取能力和主動服務能力,從而讓手機成為智慧溫暖的個人助理。

vivo依託藍心大模型對手機的基礎功能進行了升級。同時,vivo為三方開發者構建了連線服務的框架和平臺,讓人找服務的同時,服務也主動匹配人的需求。

另外,vivo構建了個人智慧系統框架,透過本地化知識圖譜,基於端側大模型能力,建立人與裝置共同的記憶。

會上,周圍展示了vivo基於藍心大模型技術做出的一次新探索,釋出了“PhoneGPT”手機智慧體。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

在演示中,藍心小V不僅可以對螢幕介面進行識別和操作,也可以透過接管音訊進行自主對話,以完成使用者交代的任務,例如幫助我們去訂餐廳、訂咖啡等等。

第三個方面是重構人與物理世界的連線體驗,vivo利用多模態大模型,讓手機成為視障人士的眼睛,幫助他們可以獨自安全的走到更遠的陌生的地方。

二、藍心大模型全家桶重磅升級,語音、影象、多模態樣樣霸榜

為了進一步夯實AI能力基礎,vivo在今年的開發者大會上釋出了升級後的自研藍心大模型矩陣,升級了語言大模型和端側大模型能力,釋出了vivo自研的語音大模型、影象大模型以及多模態大模型。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

在語言大模型上,千億級藍心雲端大模型,重點最佳化了意圖理解與分發和任務規劃能力。相比去年,整體能力提升30%,在SuperCLUE和C-EVAL榜單上位列國內第一梯隊。

此次vivo正式釋出了新30億引數量級的藍心端側大模型3B。據稱在對話寫作、摘要總結、資訊抽取等能力上,藍心3B可以越級比肩行業7B-9B模型。相比藍心7B,藍心 3B峰值效能提升300%,平衡模式下功耗最佳化46%,最快出詞速度可以達到80字/s,系統功耗450mA,記憶體佔用1.4GB。

在SuperCLUE和Equal Eval的小模型綜合能力評測中,藍心3B均排名第一,同時獲得了泰爾實驗室端側大模型綜合能力認證以及AIIA安全防範能力認證。

除此之外,vivo還發布了可以準確理解自然語義,模擬人聲的全新自研藍心語音大模型、強化中國特色與東方美學的融合生成能力的藍心影象大模型以及升級視覺感知理解能力的藍心多模態大模型。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

三、OriginOS 5正式亮相,用AI重構系統體驗

作業系統作為使用者與手機接觸的首要介面,直接決定了使用者的使用體驗。此次vivo將自身在AI、續航、通訊等領域的技術成果,以及對手機基礎體驗、設計、人文等層面的思考集中落地,釋出了新一代作業系統——原系統5(OriginOS 5)。

在原系統5中,基於藍心多模態大模型技術,vivo推出了小V圈搜功能,在既有的文字搜尋基礎上,透過影象識別與圈選互動的結合,實現“一圈即搜”。

原系統5還升級了“原子島”功能,除通知功能外,其擁有藍心小V的意圖識別能力,不斷分析和判斷使用者當前的需求,主動為使用者提供後項服務。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

除此之外,原系統5升級了以桌面元件的形式提供智慧服務的“小V建議”、支援同聲傳譯的“小V幫記”、內建“小V寫作”能力的“vivo輸入法”、支援一鍵剪輯以及AI定製詞曲的“小V時光剪影”、能夠記住和使用者相處點滴的“小V記憶”功能。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

流暢方面,原系統5進行了超過1000項流暢體驗最佳化。在系統底層層面,原系統5的不公平排程機制升級至3.0版本,首次引入GPU不公平排程機制,透過智慧分配GPU資源,提升前臺應用的流暢度。

在記憶體層面,原系統5引入了安卓領域內首創的Ledger記憶體賬本機制,實現了系統級的記憶體資源精準排程,對記憶體資源進行統一分配和管理,減輕了應用的負擔。

四、自研藍河作業系統二代登場,智慧家居生態接入Matter

繼去年11月vivo首次釋出自研藍河作業系統(BlueOS)之後,今年藍河作業系統2正式釋出,其搭載著基於Rust語言編寫的實時作業系統核心——藍河核心,其具備安全、通用、高效能的特性,能夠相容不同的嵌入式平臺,具備完整的系統排程、記憶體管理、檔案系統、網路和裝置管理能力。

楊立昆吳恩達李飛飛贏了!OpenAI躲過大劫,矽谷奔走歡慶

藍河作業系統2也將成為行業首個全棧由Rust語言編寫的作業系統。

藍河作業系統2最底層是由vivo自研的藍心大模型,和VCAP推理計算加速平臺共同構成的底座。藍河從設計之初就整合了藍心大模型矩陣,支援不同引數藍心大模型的靈活端雲部署,並且支援視覺、語音等多種AI演算法。

在這個底座之上,新的服務引擎包含資料服務、意圖的感知和決策服務等,為意圖框架提供了能力支撐。意圖框架能夠基於使用者的行為和使用習慣,充分感知使用者的使用場景,準確理解使用者意圖,最後自動規劃和執行任務。

在家居智慧裝置互聯的場景中,vivo深度參與matter生態建設,適配可連線的品類在聯盟中有超過1200多個SKU。同時,vivo支援CCSA等權威協會,幫助制定了20餘項IoT行業標準。

結語:All in AI,自研大模型再升級,vivo技術創新繼續下潛

在今天的開發者大會上,各類大模型的升級以及相關新技術無疑是主角,在AI手機之戰愈發激烈之際,vivo明確了自己將重點佈局AI的戰略,各類技術創新也圍繞AI展開。

從去年首次釋出自研藍心大模型,到如今大模型家族逐漸豐富,大模型成績頻頻霸榜,vivo的技術力得到了驗證,vivo的技術創新也在深水區中繼續下潛。