share_log

vivo发布全新AI战略 蓝心大模型矩阵及原系统5迎来重磅升级

vivo發佈全新AI戰略 藍心大模型矩陣及原系統5迎來重磅升級

TechWeb ·  17:14

【TechWeb】10月10日,2024 vivo開發者大會在深圳國際會展中心舉辦,大會主題爲「同心•同行」。會上,vivo正式發佈全新AI戰略——「藍心智能」,同時帶來全面升級的自研藍心大模型矩陣、原系統5(OriginOS 5)、藍河操作系統2(BlueOS 2)以及vivo在安全、人文、生態合作等方面的最新成果。

vivo發佈全新AI戰略——藍心智能

此次大會上,vivo副總裁、OS產品副總裁、vivo AI全球研究院院長周圍正式發佈了vivo的全新AI戰略——藍心智能。

big

藍心智能是將大模型技術與手機操作系統深度融合的個人智能。周圍解釋,以藍心大模型爲技術底座,藍心智能可以理解用戶的個人情景和偏好,爲用戶提供個人化的專屬服務; 同時,藍心智能將全方位守護用戶的隱私安全; 通過系統深度融合,爲用戶持續構建更自然、符合直覺的交互,帶來更智能溫暖的體驗。

爲了達成這一點,vivo從三個方面用AI重構了系統體驗。首先是重構人與設備的交互體驗,讓交互更自然更符合直覺。在藍心大模型的加持下,手機將具備更強大的分析能力,無論是按壓屏幕的力度、圈搜文字或圖片、還是拖拽一段地址信息,多模態大模型都可以深度解讀你的意圖,進而給你需要的反饋和服務。而依託文本大模型,結合自監督學習語音編解碼、多語音任務學習和模態對齊等技術,讓藍心小V在文本能力外,進一步具備強大的語音表徵理解與生成能力,進而讓手機能夠與人自然對話、翻譯語言、模擬人聲甚至理解對話中的情緒。

第二個方面是重構人與數字世界的服務體驗,讓智能更加個人化,也就是構建簡單高效的服務獲取能力和主動服務能力,從而讓手機成爲智能溫暖的個人助理。vivo依託藍心大模型對手機的基礎功能進行了全面升級。同時,vivo爲三方開發者構建了連接服務的框架和平台,讓人找服務的同時,服務也主動匹配人的需求。另外,vivo還構建了個人智能系統框架,通過本地化知識圖譜,基於端側大模型能力,建立人與設備共同的記憶。

會上,vivo副總裁、OS產品副總裁、vivo AI全球研究院院長周圍展示了vivo基於藍心大模型技術做出的一次全新探索,即「PhoneGPT」也就是手機智能體。在演示中,藍心小V不僅可以對屏幕界面進行識別和操作,也可以通過接管音頻進行自主對話,以完成用戶交代的任務,例如幫助我們去訂餐廳、訂咖啡等等。這是手機自動化的一小步,卻是解放用戶雙手的一大步。隨着AI發展,未來PhoneGPT一定會帶來更多的應用場景,更好的智能體驗,讓小V成爲更懂你的私人助理。

big

第三個方面是重構人與物理世界的連接體驗,讓溝通更順暢和溫暖。去年,vivo讀譜功能的發佈,讓喜愛音樂的視障人士可以利用手機學習樂譜和樂器。而今,vivo利用多模態大模型,讓手機成爲視障人士的眼睛,幫助他們可以獨自安全的走到更遠的陌生的地方。vivo希望通過AI技術跨越溝通的鴻溝,幫助障礙人群去追逐夢想,去探索世界的美好。
全新藍心大模型矩陣正式發佈

爲進一步夯實AI能力底座,vivo在今年的開發者大會上發佈了全新自研藍心大模型矩陣。全面升級語言大模型和端側大模型能力,並帶來vivo自研的語音大模型、圖像大模型以及多模態大模型。這預示藍心智能,向着個人化和多元化發展邁出重要的一步。

big

用戶的隱私安全始終是vivo打造藍心智能的首要原則,繼去年帶來了三款端側大模型之後,vivo正式發佈全新30億參數量級的藍心端側大模型3B。在對話寫作、摘要總結、信息抽取等能力上,藍心3B可以越級比肩行業7B-9B模型。相比藍心7B,藍心 3B極致性能提升300%,平衡模式下功耗優化達46%,極致出詞速度可以達到80字/s,系統功耗僅450mA,內存佔用僅1.4GB。在SuperCLUE和Equal Eval的小模型綜合能力評測中,藍心3B均排名第一,同時獲得了泰爾實驗室端側大模型綜合能力認證以及AIIA安全防範能力認證。

除此之外,vivo還同步帶來了可以準確理解自然語義,模擬人聲的全新自研藍心語音大模型、強化中國特色與東方美學的融合生成能力的藍心圖像大模型以及升級視覺感知理解能力的藍心多模態大模型。

big

未來,藍心智能將以藍心大模型矩陣爲技術底座,繼續探索AI與OS的深度融合,持續打造開放共贏的智能體生態。

原系統5(OriginOS 5)正式亮相:自然流暢超有AI

操作系統作爲用戶與手機接觸的首要界面,直接決定了用戶的使用體驗。本次vivo延續「自然舒適、符合直覺」的設計理念,將自身在AI、續航、通信等領域的技術成果,以及對手機基礎體驗、設計、人文等層面的思考集中落地,推出新一代操作系統——原系統5(OriginOS 5)。

big

在原系統5中,作爲AI重構系統體驗的基礎,藍心小V與Jovi語音正式合併,帶來了更加自然的語音交互體驗。新增了長按屏幕底部,呼出「小V搜索」等一些列全新的交互方式。基於藍心多模態大模型技術,vivo全新推出小V圈搜功能,在既有的文本搜索基礎上,通過圖像識別與圈選交互的結合,精準搜索對象,爲用戶帶來更加便捷的「一圈即搜」。

big

原系統5還全新升級了「原子島」功能,除通知功能外,其擁有藍心小V強大的意圖識別能力,不斷分析和判斷用戶當前的需求,主動爲用戶提供後項服務。並且以更靈活的設計,一按一複製,或者一按一拖拽,滿足用戶的多任務需求。

big

除此之外,原系統5升級了以桌面組件的形式爲你全天提供智慧服務的「小V建議」、支持同聲傳譯的「小V幫記」、內置「小V寫作」能力的「vivo輸入法」、支持一鍵剪輯以及AI定製詞曲的「小V時光剪影」。全新推出了能夠記住和用戶相處點滴的「小V記憶」功能,同時「小V跨端生態」也首次讓用戶可以在電腦端以及車機端與小V進行直接交互。vivo在原系統5的電話、相冊等數十個模塊中通過藍心智能爲用戶帶來了觸手可及的智慧體驗。

big

流暢方面,原系統5構建了包括光影、交互、形態切換以及場景過渡在內的全方流暢體驗,進行了超過1000項流暢體驗優化,旨在將「自然舒適,符合直覺」的使用感受貫穿於系統的每一個場景。

在系統底層層面,原系統5的不公平調度機制再一次迎來了3.0版本的重大升級,首次引入GPU不公平調度機制,通過智能分配GPU資源,顯著提升前臺應用的流暢度。在內存層面,原系統5創新性地引入了安卓領域內首創的Ledger內存賬本機制,實現了系統級的內存資源精準調度,對內存資源進行統一分配和管理,有效減輕了應用的負擔,同時,它還能智能構建內存賬本,根據實際應用場景動態優化內存分配,確保手機中的每一份內存都能得到高效的利用。顯示層面,原系統5的虛擬顯卡升級到了性能更加強勁的2.0版本,作爲vivo獨家首發的顯示增強技術,其集成了極速響應動效架構、合成渲染加速器、圖形鏈路協同引擎三大核心技術,全面優化從觸控到反饋界面的全鏈路體驗。

原系統5專注於解決用戶痛點並持續優化使用體驗。在網絡通信方面,原系統5在用戶場景驅動下實現了全新技術突破和全面體驗升級。基於藍牙,實現了行業首創的公里級無網通信技術,在無網空曠環境下,支持最遠超過1.5公里的點對點語音對講和文字聊天。針對Wi-Fi穿牆的居家場景、網絡擁塞的萬人演唱會場景以及弱信號的電梯、高鐵、地鐵等通勤場景,原系統5同樣進行了深入的網絡性能調優,確保全場景流暢網絡體驗。在續航方面,原系統5推出全新升級的藍海續航系統,包括引入全新的場景能效引擎,帶來異構計算空間2.0等技術,實現了電量高效精準管理,全天候續航無憂。

big

除了「理性工程」, 原系統5亦演繹感性美學,在設計上基於原子設計體系進行了兩大維度升級,首先引入了空間化感知理念,藉助豐富的光影和材質表達、分類卡片式列表等,讓界面內容一目瞭然,並推出還原人日常感受自然方式的全景天氣,帶來現實與虛擬世界自然融合的奇妙體驗。另一維度,原系統5詮釋優雅美學,升級個性鎖屏、情境壁紙等功能,屏幕熄滅、點亮之間盡顯自然舒適,讓數字世界更加溫暖。

big

在過去的一年,通過實施用戶顧問計劃,每個月組織團隊認真傾聽用戶建議,邀請用戶顧問參與到創新的每個環節。無論是體驗的反饋,還是對美學的不懈追求,都爲系統團隊提供了豐富靈感。這也成就了今天原系統5的升級之旅。

big

藍河內核加持,藍河操作系統2:全棧自研,爲AI而生

繼去年11月vivo首次發佈自研藍河操作系統(BlueOS)之後,今年的開發者大會上,能力全新升級的藍河操作系統2同步亮相,其搭載着基於Rust語言編寫的實時操作系統內核——藍河內核,其具備安全、通用、高性能的特性,能夠兼容不同的嵌入式平台,具備完整的系統調度、內存管理、文件系統、網絡和設備管理能力。而藍河操作系統2也將成爲行業首個全棧由Rust語言編寫的操作系統。

big

藍河操作系統2構建了更加智慧的系統架構,首先最底層是由vivo自研的藍心大模型,和VCAP推理計算加速平台共同構成的底座。藍河從設計之初就整合了藍心大模型矩陣,支持不同參數藍心大模型的靈活端雲部署,並且支持視覺、語音等多種AI算法。另外,VCAP保障了各種AI算法在端側的高效運行。 在這個底座之上,我們帶來了全新的服務引擎,它包含數據服務、意圖的感知和決策服務等,爲意圖框架提供了能力支撐。 意圖框架能夠基於用戶的行爲和使用習慣,充分感知用戶的使用場景,準確理解用戶意圖,最後自動規劃和執行任務。通過這個系統架構,藍河操作系統 2 從底層構建 AI 能力,進一步實現天生更智慧。

藍河操作系統2深度融合了藍心智能強大的AI 能力,其中藍心大模型爲技術底座,藍心小V爲專屬助理,智能體平台提供專業服務。在生態方面,藍河兼容了開放原子開源基金會孵化的hapjs快應用標準,隨着快應用升級到2.0,也將爲用戶帶來更加智慧的服務生態。同時,vivo爲開發者帶來了全新的藍河UI框架。基於自適應UI佈局,只需要一次開發,就能在不同尺寸的屏幕上帶來一致的體驗。

在AGI時代,除了更加智慧的操作系統,智能硬件也迎來了新一輪的變革。藍河操作系統2適配不同大小的設備,也能爲不同設備賦予強大的AI能力。vivo願意與行業開放合作,共同探索藍河操作系統2以及藍心大模型,搭載在智能眼鏡、機器人乃至更多AI設備上的解決方案,共同打造真正面向未來的智能終端。

以用戶爲中心 實現開放智聯

近年來,vivo圍繞智慧出行、智能家居、智慧辦公、運動健康、影音娛樂等五大生活場景持續深耕,致力於打破不同品牌之間的壁壘,以用戶爲中心,實現真正的開放智聯。對此,vivo一方面做到生態開放,積極打造自有能力,並賦能給外部生態設備。同時牽頭創建聯盟、廣泛兼容行業標準,讓用戶突破生態壁壘,自由連接心儀的智能設備。 另一方面vivo希望讓連接更智能。vivo將強大的AI能力跨端流轉到生態設備,讓用戶能夠通過自然語言與設備高效溝通。

big

現階段,vivo智能車載已實現覆蓋規模行業領先,連接超過170個汽車品牌,覆蓋超過8500款車型。vivo以開放共贏的態度積極推動行業技術發展。 爲實現智能車載、數字車鑰匙技術升級,vivo牽頭髮起ICCOA聯盟,推出的協議覆蓋了市場上超過350W輛汽車。

在家居智能設備互聯的場景中,vivo深度參與matter生態建設,適配可連接的品類在聯盟中有超過1200多個SKU。同時,vivo還支持CCSA等權威協會,幫助制定了20餘項IoT行業標準。

此外,vivo通過「小V跨端」實現了AIGC能力上車、上電腦,還將推出「家居智能體」和「車載智能體」,讓用戶能通過自然語言控制智能設備,讓連接更便捷。值得一提的是,vivo還成爲國內首家能兼容蘋果生態的廠商。爲了給用戶帶來更絲滑的跨設備體驗,我們通過深度適配蘋果M系列芯片,實現了與蘋果電腦的跨端協同,用戶可以通過vivo辦公套件對蘋果電腦進行全端搜索、遠程操控。

堅守長期主義,爲用戶安全隱私保駕護航

新興技術發展帶來生活和生產效率的巨大飛躍,但開展技術時必須考慮到安全、人文和產業的協同發展,才能讓技術更好地落地應用、造福人類。

big

會上,vivo首席安全官魯京輝分享了vivo AI在安全領域的最新進展。他表示,在隱私權限守護上,vivo倡導並實踐「透明化」的隱私政策,將權限主導權交給用戶。在提供AI服務時,vivo採取「端側優先、端雲協同」的技術策略,能在端側處理的數據絕不上雲。在面對複雜的AI任務處理時,在保障用戶隱私和數據安全的前提下調用雲側大模型能力,以此實現高效、安全的端雲協同,確保AI服務既智能又安全。面對敏感的隱私信息,vivo通過匿名化處理和差分隱私技術,在收集與分析數據前移除或模糊個人身份信息,在保障隱私前提下來提供個性化服務。魯京輝強調,打造個人化智能,用戶隱私安全始終是首要原則,vivo會繼續在個性化服務與隱私保護之間尋找最佳平衡。讓藍心智能的「私人定製」便捷貼心,安全可靠。

此外,vivo通過藍心智能將端側AI能力賦能「千鏡可信引擎」,構建了全鏈路詐騙防護。同時升級了手機丟失防護體系,推出全新的「查找網絡」功能。除離線查找外,利用數以億計的vivo設備和先進網絡定位技術,在安卓陣營率先實現關機定位,提升手機找回概率。若無法找回,可遠程物理級安全刪除數據,同時還有芯片級刷機激活鎖防盜用。三重防線,層層守護你的設備及數據安全。

有AI無礙,以科技照亮美好未來

科技的成果可以普惠於每一個人,包括我國近3000萬的聽障人群,1730萬的視障人群和超過2億的老年人。vivo持續以AI技術賦能無障礙應用體驗。去年,vivo推出了首款集手語識別與合成於一體的軟件「手語翻譯官」,並在CCL2024手語數字人翻譯質量評測中,獲得了第一名的成績。今年,爲了協助國家通用手語的普及與推廣,我們在「手語翻譯官」中升級了「手語學習」功能,希望可以幫到更多的人學習手語。

big

同時,基於藍心語音大模型,「vivo聽說」新增了方言自由說功能,目前支持6種方言,以解決各地區間的溝通障礙問題,也讓用戶可以以自己最熟悉的鄉音與手機進行交互。而爲了讓更多人的鄉音能被語音大模型識別,接下來,我們會把越來越多的語種適配進手機的各種功能中,讓手機的語言交互更自然,更符合人的直覺,讓人與人之間的的溝通更流暢,更溫暖。

big

除「vivo聽說」外,「vivo看見」同樣得到了語音大模型加持,新增了實時問答功能,成爲行業首款多模態大模型視覺輔助產品。基於多年的技術積累與行業實踐,vivo爲8月28日正式開館的國家無障礙環境展示館製作了行業首款視障用戶導覽軟件。通過vivo手機產品和「vivo看見」的視覺輔助功能,爲展館提供助力。

同時,《vivo無障礙解決方案》入選聯合國ITU《人工智能向善案例集》、世界互聯網大會《公益行動計劃書》,獲得了《可及信息無障礙優秀案例》等10餘個權威獎項及榮譽。vivo成爲中國殘聯戰略合作伙伴,面向10所高校的1000多名殘障學子公益捐贈無障礙設備,並招募了100位夢想導師,助力殘障青年就業,幫助他們勇敢逐夢。

攜手全球開發者及合作伙伴共同繪製開放未來

vivo副總裁、OS產品副總裁、vivo AI全球研究院院長周圍表示,一花不是春,獨木不成林。vivo始終秉持「協同發展,互信共贏」的合作理念,不斷深化並整合底層核心技術,涵蓋提升應用體驗的度量系統能力、引領創新的AI和藍河操作系統技術、開放智聯的IoT技術等。

AI作爲新一輪科技革命的核心力量,爲產業提高運營效率、優化用戶體驗、增強市場競爭力創造了新契機。vivo希望凝聚全球合作伙伴及開發者持續開展深入合作,加速產品服務創新和產業生態構建,共同開啓AI時代的無限可能。(Suky)

譯文內容由第三人軟體翻譯。


以上內容僅用作資訊或教育之目的,不構成與富途相關的任何投資建議。富途竭力但無法保證上述全部內容的真實性、準確性和原創性。
    搶先評論