聯(lián)發(fā)科近日推出天璣9400芯片,這是其第二代全大核SoC,進(jìn)一步鞏固了其在端側(cè)AI領(lǐng)域的技術(shù)領(lǐng)導(dǎo)地位,。天璣9400在生成式AI的應(yīng)用上實(shí)現(xiàn)了多項(xiàng)行業(yè)突破,,特別是在智能手機(jī)的端側(cè)AI性能方面,帶來(lái)了前所未有的創(chuàng)新,為整個(gè)生態(tài)系統(tǒng)的發(fā)展提供了堅(jiān)實(shí)的技術(shù)基礎(chǔ)。
NPU性能稱霸,以最強(qiáng)端側(cè)AI構(gòu)筑“智能體化”堅(jiān)實(shí)基底
首先看天璣9400的AI性能提升,。天璣9400搭載聯(lián)發(fā)科全新的第八代AI處理器NPU 890,AI性能和能效都有著飛躍式的提升,。在蘇黎世ETHZ AI Benchmark v6.0 芯片AI性能的測(cè)試中,,天璣9400以絕對(duì)高分的成績(jī)一騎絕塵,相比友商芯片直接就是倍數(shù)級(jí)的領(lǐng)先,。此外,,天璣9400相較于上一代功耗降低可達(dá)35%。AI性能第一,、功耗大幅降低,,輕松拿下最強(qiáng)手機(jī)NPU。聯(lián)發(fā)科對(duì)于低功耗的重視真是刻到了骨子里,,畢竟只有更好的功耗控制,,才有更大的潛力運(yùn)行各類創(chuàng)新的AI應(yīng)用。
天璣9400統(tǒng)治級(jí)的AI性能已經(jīng)遠(yuǎn)超一般迭代的范圍,,但聯(lián)發(fā)科花費(fèi)這么大的力氣提升AI其實(shí)并不意外,。早在今年上半年聯(lián)發(fā)科就召開(kāi)了開(kāi)發(fā)者大會(huì)MDDC 2024,與眾多合作伙伴聯(lián)合發(fā)布了《生成式AI手機(jī)產(chǎn)業(yè)白皮書》,,詮釋了手機(jī)發(fā)展與變革的新趨勢(shì),,手機(jī)和AI應(yīng)用的智能體化是未來(lái)手機(jī)進(jìn)化的主要路線,移動(dòng)芯片毫無(wú)疑問(wèn)是這一場(chǎng)變革的關(guān)鍵,。聯(lián)發(fā)科作為端側(cè)AI的率先布局者和引領(lǐng)者以及端側(cè)AI生態(tài)的建設(shè)者,,在AI技術(shù)和能力上的巨大投入是必然,。
面向AI手機(jī)和AI應(yīng)用智能體化這一關(guān)鍵趨勢(shì),天璣9400集成了MediaTek天璣AI智能體化引擎,,可將傳統(tǒng)AI應(yīng)用程序升級(jí)為更先進(jìn)的智能體化AI應(yīng)用,。聯(lián)發(fā)科正在積極與開(kāi)發(fā)者合作,為 AI智能體,、第三方應(yīng)用程序和大模型之間提供統(tǒng)一的標(biāo)準(zhǔn)接口,,實(shí)現(xiàn)AI跨應(yīng)用串聯(lián),從而高效地運(yùn)行邊緣AI計(jì)算和云服務(wù),。天璣AI智能體化引擎具備自主化,、推理化和行動(dòng)化三大特性,可以自主感知環(huán)境理解目標(biāo),,可根據(jù)環(huán)境的變化調(diào)整策略以及支持多個(gè)智能體交流和協(xié)作,,作為集成于天璣9400中的先進(jìn)AI技術(shù),一經(jīng)發(fā)布就受到了行業(yè)的廣泛關(guān)注,。
同時(shí),,該技術(shù)還可縮短AI產(chǎn)品的開(kāi)發(fā)周期,有利于加速構(gòu)建應(yīng)用更豐富,、體驗(yàn)更出色的天璣AI生態(tài)。
不論端側(cè)AI技術(shù)發(fā)展的如何快速,,能夠落地到端側(cè)應(yīng)用,,帶給用戶最智能、智慧的體驗(yàn)才是最終目的,。在天璣開(kāi)發(fā)者大會(huì)上,,聯(lián)發(fā)科聯(lián)合眾多合作伙伴發(fā)布了天璣AI先鋒計(jì)劃,用端側(cè)AI生態(tài)的基礎(chǔ)設(shè)施建設(shè)為AI應(yīng)用大爆發(fā)埋下了第一個(gè)伏筆,。天璣AI智能體化引擎則為應(yīng)用開(kāi)發(fā)者帶來(lái)了更加便捷的解決方案,,可以加快移動(dòng)應(yīng)用大面積智能體化的進(jìn)程。
發(fā)布會(huì)上,,聯(lián)發(fā)科發(fā)布天璣AI智能體化引擎先鋒計(jì)劃,,在未來(lái)將聯(lián)合榮耀、OPPO,、vivo,、小米、傳音等多個(gè)業(yè)界重磅合作伙伴,,攜手打造先進(jìn)的智能體化AI應(yīng)用體驗(yàn),。這便是聯(lián)發(fā)科為端側(cè)AI應(yīng)用大爆發(fā)埋下的第二個(gè)伏筆。聯(lián)發(fā)科正在從芯片,、開(kāi)發(fā)者解決方案,、終端合作構(gòu)建全鏈路的智能體化AI應(yīng)用創(chuàng)新環(huán)境,。相信很快,在天璣AI生態(tài)深刻而廣泛的推進(jìn)作用下,,端側(cè)AI應(yīng)用將迎來(lái)無(wú)比繁榮的景象,,各種最懂用戶的端側(cè)智能體化應(yīng)用將帶來(lái)全面智慧的AI生活體驗(yàn)。
先進(jìn)技術(shù)創(chuàng)新,,開(kāi)啟“端側(cè)視頻”和“端側(cè)訓(xùn)練”的新篇章
天璣9400還帶來(lái)了多項(xiàng)震驚整個(gè)行業(yè)的前沿技術(shù),,首發(fā)了端側(cè)視頻生成應(yīng)用,這在整個(gè)業(yè)界包括云端都是最前沿的功能,。據(jù)介紹,,天璣9400的NPU 890通過(guò)內(nèi)建時(shí)域張量(Temporal Tensor)硬件指令加速技術(shù)和端側(cè)高畫質(zhì)Diffusion Transformer(DiT)技術(shù),在端側(cè)實(shí)現(xiàn)了類似Sora的視頻生成功能,,開(kāi)創(chuàng)了手機(jī)端側(cè)AI生成視頻的新篇章,。
從生成圖像到生成視頻,這是AI技術(shù)上的一大跨越,,意味著端側(cè)AI從此擁有了像云端一樣理解物理世界規(guī)則的能力,,可以期待天璣這項(xiàng)技術(shù)的成熟和進(jìn)化,這或許將帶來(lái)一場(chǎng)手機(jī)應(yīng)用生態(tài)和手機(jī)生產(chǎn)力角色的巨大變革,。
智慧的AI體驗(yàn),,一定是個(gè)性化的服務(wù)?;趶?qiáng)悍的端側(cè)算力和生成式AI能力,,天璣9400首發(fā)端側(cè)LoRA訓(xùn)練,可以讓用戶利用個(gè)人資料在端側(cè)訓(xùn)練和生成個(gè)性化內(nèi)容,,并建立專屬于個(gè)人的AI數(shù)字分身,。整個(gè)過(guò)程無(wú)需連網(wǎng),既保護(hù)了用戶隱私,,又實(shí)現(xiàn)了AI的專屬個(gè)人化,,無(wú)限地拓展創(chuàng)意。這是智能手機(jī)和應(yīng)用升級(jí)為智能體化的關(guān)鍵,,在保護(hù)用戶隱私的前提下,,智能體化的手機(jī)會(huì)基于個(gè)人數(shù)據(jù)越來(lái)越懂用戶的偏好、習(xí)慣,,甚至在未來(lái)會(huì)理解用戶的情感和行動(dòng)趨勢(shì),。
聯(lián)發(fā)科還與虹軟合作,基于端側(cè)個(gè)性化模型訓(xùn)練,,打造了生成式AI修圖解決方案,,讓搭載天璣9400的手機(jī)擁有更好的AI修圖效果。
天璣讓AI更懂你,,先進(jìn)生成式AI讓創(chuàng)意更隨心
天璣9400還帶來(lái)了一系列的端側(cè)AI應(yīng)用底層技術(shù)創(chuàng)新,。天璣9400的Stable Diffusion性能相較前代提升了2倍,,可以根據(jù)用戶照片的身體姿態(tài),生成各種頗具創(chuàng)意的動(dòng)圖,,讓用戶在手機(jī)端側(cè)就可以輕松發(fā)揮創(chuàng)造力,。
聯(lián)發(fā)科還和小紅書深度合作,首發(fā)推出端側(cè)SDXL高清風(fēng)格圖,,可以將用戶的個(gè)人照片通過(guò)端側(cè)的AI處理生成各種風(fēng)格的魔幻照片,,而且相比云端平均生成時(shí)長(zhǎng)還要快2倍,本地AI運(yùn)算快速的優(yōu)勢(shì)體現(xiàn)出來(lái)了,。
此外,,聯(lián)發(fā)科還和全民K歌深度合作,首發(fā)推出端側(cè)AI純凈人聲萃取技術(shù),,通過(guò)天璣AI音源分軌技術(shù),,將K歌時(shí)的人聲提取出來(lái),再搭配stable diffusion算法做人聲還原,,可以打造出純凈動(dòng)聽(tīng)的歌聲,,然后再搭配音樂(lè)混音, 可以為用戶提供媲美專業(yè)錄音室的的K歌作品,,讓唱歌愛(ài)好者用手機(jī)就可以享受媲美專業(yè)錄音室級(jí)別的效果,。
同時(shí),天璣9400的端側(cè)長(zhǎng)文本處理能力大幅提升,,支持32K Tokens,,提升到上一代的8倍,極大的提升了端側(cè)大語(yǔ)言模型的溝通能力,。這意味著可以錄入更多的內(nèi)容給生成式AI應(yīng)用,人機(jī)溝通更加不受限,,AI也變得越來(lái)越聰明,,可以快速學(xué)習(xí)更豐富的知識(shí)來(lái)生成更準(zhǔn)確的內(nèi)容。
更驚艷的是,,天璣9400端側(cè)多模態(tài)AI運(yùn)算性能達(dá)到業(yè)界第一的50 Tokens每秒,,可以大幅度減少用戶等待內(nèi)容生成的時(shí)間?;趶?qiáng)大的端側(cè)多模態(tài)AI運(yùn)算性能,,天璣9400可以理解與推理圖片的內(nèi)容,還可以理解圖片中文字和數(shù)字的相對(duì)關(guān)系,,并根據(jù)用戶的喜好提供更加個(gè)性化的服務(wù),。
聯(lián)發(fā)科技與面壁智能合作,提升端側(cè)多模態(tài)AI的理解和推理能力,,只需要用手機(jī)拍一張圖,,就可以讓AI幫你解題,。除了做數(shù)學(xué)題,還可以實(shí)現(xiàn)更多場(chǎng)景應(yīng)用,,比如點(diǎn)餐,,只需要拍一張菜單照片,智能體AI就可以根據(jù)你的喜好幫你點(diǎn)餐,。
今年,,聯(lián)發(fā)科提出的天璣端側(cè)AI技術(shù)路線包括“芯片、模型,、應(yīng)用”三個(gè)維度,。為了滿足用戶在端側(cè)對(duì)不同應(yīng)用和大模型的需求,天璣9400與阿里云,、百川智能,、百度智能云、Google,、零一萬(wàn)物,、面壁智能、Meta,、Microsoft,、騰訊混元等全球領(lǐng)先的大模型廠商深度合作,實(shí)現(xiàn)了對(duì)這些主流大模型的深度適配優(yōu)化,,讓用戶自由選擇不受限,。
在面向應(yīng)用開(kāi)發(fā)者的天璣AI先鋒計(jì)劃推動(dòng)和引領(lǐng)下,目前已經(jīng)有海量AI先行者加入到天璣AI生態(tài)中,,共同探索端側(cè)AI技術(shù)創(chuàng)新路線和應(yīng)用前景,,天璣在端側(cè)AI的領(lǐng)導(dǎo)和行業(yè)聚合效應(yīng)無(wú)疑正在為端側(cè)AI用戶帶來(lái)更多可能性。
生成式AI的迅速普及,,推動(dòng)了移動(dòng)生態(tài)的快速發(fā)展,,天璣9400正是這股浪潮的核心推動(dòng)力之一。憑借其強(qiáng)大的NPU和深度學(xué)習(xí)能力,,聯(lián)發(fā)科不僅展示了其技術(shù)實(shí)力,,還為智能手機(jī)領(lǐng)域開(kāi)辟了新的應(yīng)用場(chǎng)景。隨著天璣9400的持續(xù)發(fā)展,,我們將見(jiàn)證移動(dòng)設(shè)備如何成為智能生活的重要組成部分,。