天璣9400首發(fā)端側(cè)AI生成視頻，太神奇了！

最近，聯(lián)發(fā)科發(fā)布了全新的旗艦芯片天璣9400，這是天璣第二代全大核SoC，更是業(yè)界首款旗艦5G智能體AI芯片。繼天璣9300在行業(yè)第一個(gè)將生成式AI能力落地到智能手機(jī)之后，聯(lián)發(fā)科天璣在端側(cè)AI領(lǐng)域就一直高歌猛進(jìn)，不斷地推出新的技術(shù)，并擴(kuò)大天璣端側(cè)AI的產(chǎn)品優(yōu)勢(shì)和生態(tài)優(yōu)勢(shì)。最新的天璣9400不僅拿下了端側(cè)的AI性能第一，更是領(lǐng)先行業(yè)首發(fā)手機(jī)端側(cè)視頻生成、端側(cè)AI訓(xùn)練等一系列最先進(jìn)的生成式AI功能，并聯(lián)合應(yīng)用生態(tài)打造了豐富的端側(cè)AI創(chuàng)新應(yīng)用。

先進(jìn)技術(shù)創(chuàng)新，開(kāi)啟“端側(cè)視頻”和“端側(cè)訓(xùn)練”的新篇章

天璣9400還帶來(lái)了多項(xiàng)震驚整個(gè)行業(yè)的前沿技術(shù)，首發(fā)了端側(cè)視頻生成應(yīng)用，這在整個(gè)業(yè)界包括云端都是最前沿的功能。據(jù)介紹，天璣9400的NPU 890通過(guò)內(nèi)建時(shí)域張量（Temporal Tensor）硬件指令加速技術(shù)和端側(cè)高畫(huà)質(zhì)Diffusion Transformer（DiT）技術(shù)，在端側(cè)實(shí)現(xiàn)了類(lèi)似Sora的視頻生成功能，開(kāi)創(chuàng)了手機(jī)端側(cè)AI生成視頻的新篇章。

從生成圖像到生成視頻，這是AI技術(shù)上的一大跨越，意味著端側(cè)AI從此擁有了像云端一樣理解物理世界規(guī)則的能力，可以期待天璣這項(xiàng)技術(shù)的成熟和進(jìn)化，這或許將帶來(lái)一場(chǎng)手機(jī)應(yīng)用生態(tài)和手機(jī)生產(chǎn)力角色的巨大變革。

智慧的AI體驗(yàn)，一定是個(gè)性化的服務(wù)。基于強(qiáng)悍的端側(cè)算力和生成式AI能力，天璣9400首發(fā)端側(cè)LoRA訓(xùn)練，可以讓用戶(hù)利用個(gè)人資料在端側(cè)訓(xùn)練和生成個(gè)性化內(nèi)容，并建立專(zhuān)屬于個(gè)人的AI數(shù)字分身。整個(gè)過(guò)程無(wú)需連網(wǎng)，既保護(hù)了用戶(hù)隱私，又實(shí)現(xiàn)了AI的專(zhuān)屬個(gè)人化，無(wú)限地拓展創(chuàng)意。這是智能手機(jī)和應(yīng)用升級(jí)為智能體化的關(guān)鍵，在保護(hù)用戶(hù)隱私的前提下，智能體化的手機(jī)會(huì)基于個(gè)人數(shù)據(jù)越來(lái)越懂用戶(hù)的偏好、習(xí)慣，甚至在未來(lái)會(huì)理解用戶(hù)的情感和行動(dòng)趨勢(shì)。

聯(lián)發(fā)科還與虹軟合作，基于端側(cè)個(gè)性化模型訓(xùn)練，打造了生成式AI修圖解決方案，讓搭載天璣9400的手機(jī)擁有更好的AI修圖效果。

天璣讓AI更懂你，先進(jìn)生成式AI讓創(chuàng)意更隨心

天璣9400還帶來(lái)了一系列的端側(cè)AI應(yīng)用底層技術(shù)創(chuàng)新。天璣9400的Stable Diffusion性能相較前代提升了2倍，可以根據(jù)用戶(hù)照片的身體姿態(tài)，生成各種頗具創(chuàng)意的動(dòng)圖，讓用戶(hù)在手機(jī)端側(cè)就可以輕松發(fā)揮創(chuàng)造力。

聯(lián)發(fā)科還和小紅書(shū)深度合作，首發(fā)推出端側(cè)SDXL高清風(fēng)格圖，可以將用戶(hù)的個(gè)人照片通過(guò)端側(cè)的AI處理生成各種風(fēng)格的魔幻照片，而且相比云端平均生成時(shí)長(zhǎng)還要快2倍，本地AI運(yùn)算快速的優(yōu)勢(shì)體現(xiàn)出來(lái)了。

此外，聯(lián)發(fā)科還和全民K歌深度合作，首發(fā)推出端側(cè)AI純凈人聲萃取技術(shù)，通過(guò)天璣AI音源分軌技術(shù)，將K歌時(shí)的人聲提取出來(lái)，再搭配stable diffusion算法做人聲還原，可以打造出純凈動(dòng)聽(tīng)的歌聲，然后再搭配音樂(lè)混音， 可以為用戶(hù)提供媲美專(zhuān)業(yè)錄音室的的K歌作品，讓唱歌愛(ài)好者用手機(jī)就可以享受媲美專(zhuān)業(yè)錄音室級(jí)別的效果。

同時(shí)，天璣9400的端側(cè)長(zhǎng)文本處理能力大幅提升，支持32K Tokens，提升到上一代的8倍，極大的提升了端側(cè)大語(yǔ)言模型的溝通能力。這意味著可以錄入更多的內(nèi)容給生成式AI應(yīng)用，人機(jī)溝通更加不受限，AI也變得越來(lái)越聰明，可以快速學(xué)習(xí)更豐富的知識(shí)來(lái)生成更準(zhǔn)確的內(nèi)容。

更驚艷的是，天璣9400端側(cè)多模態(tài)AI運(yùn)算性能達(dá)到業(yè)界第一的50 Tokens每秒，可以大幅度減少用戶(hù)等待內(nèi)容生成的時(shí)間?；趶?qiáng)大的端側(cè)多模態(tài)AI運(yùn)算性能，天璣9400可以理解與推理圖片的內(nèi)容，還可以理解圖片中文字和數(shù)字的相對(duì)關(guān)系，并根據(jù)用戶(hù)的喜好提供更加個(gè)性化的服務(wù)。

聯(lián)發(fā)科技與面壁智能合作，提升端側(cè)多模態(tài)AI的理解和推理能力，只需要用手機(jī)拍一張圖，就可以讓AI幫你解題。除了做數(shù)學(xué)題，還可以實(shí)現(xiàn)更多場(chǎng)景應(yīng)用，比如點(diǎn)餐，只需要拍一張菜單照片，智能體AI就可以根據(jù)你的喜好幫你點(diǎn)餐。

今年，聯(lián)發(fā)科提出的天璣端側(cè)AI技術(shù)路線(xiàn)包括“芯片、模型、應(yīng)用”三個(gè)維度。為了滿(mǎn)足用戶(hù)在端側(cè)對(duì)不同應(yīng)用和大模型的需求，天璣9400與阿里云、百川智能、百度智能云、Google、零一萬(wàn)物、面壁智能、Meta、Microsoft、騰訊混元等全球領(lǐng)先的大模型廠(chǎng)商深度合作，實(shí)現(xiàn)了對(duì)這些主流大模型的深度適配優(yōu)化，讓用戶(hù)自由選擇不受限。

在面向應(yīng)用開(kāi)發(fā)者的天璣AI先鋒計(jì)劃推動(dòng)和引領(lǐng)下，目前已經(jīng)有海量AI先行者加入到天璣AI生態(tài)中，共同探索端側(cè)AI技術(shù)創(chuàng)新路線(xiàn)和應(yīng)用前景，天璣在端側(cè)AI的領(lǐng)導(dǎo)和行業(yè)聚合效應(yīng)無(wú)疑正在為端側(cè)AI用戶(hù)帶來(lái)更多可能性。

NPU性能稱(chēng)霸，以最強(qiáng)端側(cè)AI構(gòu)筑“智能體化”堅(jiān)實(shí)基底

看天璣9400的AI性能提升。天璣9400搭載聯(lián)發(fā)科全新的第八代AI處理器NPU 890，AI性能和能效都有著飛躍式的提升。在蘇黎世ETHZ AI Benchmark v6.0 芯片AI性能的測(cè)試中，天璣9400以絕對(duì)高分的成績(jī)一騎絕塵，相比友商芯片直接就是倍數(shù)級(jí)的領(lǐng)先。此外，天璣9400相較于上一代功耗降低可達(dá)35%。AI性能第一、功耗大幅降低，輕松拿下最強(qiáng)手機(jī)NPU。聯(lián)發(fā)科對(duì)于低功耗的重視真是刻到了骨子里，畢竟只有更好的功耗控制，才有更大的潛力運(yùn)行各類(lèi)創(chuàng)新的AI應(yīng)用。

天璣9400統(tǒng)治級(jí)的AI性能已經(jīng)遠(yuǎn)超一般迭代的范圍，但聯(lián)發(fā)科花費(fèi)這么大的力氣提升AI其實(shí)并不意外。早在今年上半年聯(lián)發(fā)科就召開(kāi)了開(kāi)發(fā)者大會(huì)MDDC 2024，與眾多合作伙伴聯(lián)合發(fā)布了《生成式AI手機(jī)產(chǎn)業(yè)白皮書(shū)》，詮釋了手機(jī)發(fā)展與變革的新趨勢(shì)，手機(jī)和AI應(yīng)用的智能體化是未來(lái)手機(jī)進(jìn)化的主要路線(xiàn)，移動(dòng)芯片毫無(wú)疑問(wèn)是這一場(chǎng)變革的關(guān)鍵。聯(lián)發(fā)科作為端側(cè)AI的率先布局者和引領(lǐng)者以及端側(cè)AI生態(tài)的建設(shè)者，在AI技術(shù)和能力上的巨大投入是必然。

面向AI手機(jī)和AI應(yīng)用智能體化這一關(guān)鍵趨勢(shì)，天璣9400集成了MediaTek天璣AI智能體化引擎，可將傳統(tǒng)AI應(yīng)用程序升級(jí)為更先進(jìn)的智能體化AI應(yīng)用。聯(lián)發(fā)科正在積極與開(kāi)發(fā)者合作，為 AI智能體、第三方應(yīng)用程序和大模型之間提供統(tǒng)一的標(biāo)準(zhǔn)接口，實(shí)現(xiàn)AI跨應(yīng)用串聯(lián)，從而高效地運(yùn)行邊緣AI計(jì)算和云服務(wù)。天璣AI智能體化引擎具備自主化、推理化和行動(dòng)化三大特性，可以自主感知環(huán)境理解目標(biāo)，可根據(jù)環(huán)境的變化調(diào)整策略以及支持多個(gè)智能體交流和協(xié)作，作為集成于天璣9400中的先進(jìn)AI技術(shù)，一經(jīng)發(fā)布就受到了行業(yè)的廣泛關(guān)注。

同時(shí)，該技術(shù)還可縮短AI產(chǎn)品的開(kāi)發(fā)周期，有利于加速構(gòu)建應(yīng)用更豐富、體驗(yàn)更出色的天璣AI生態(tài)。

不論端側(cè)AI技術(shù)發(fā)展的如何快速，能夠落地到端側(cè)應(yīng)用，帶給用戶(hù)最智能、智慧的體驗(yàn)才是最終目的。在天璣開(kāi)發(fā)者大會(huì)上，聯(lián)發(fā)科聯(lián)合眾多合作伙伴發(fā)布了天璣AI先鋒計(jì)劃，用端側(cè)AI生態(tài)的基礎(chǔ)設(shè)施建設(shè)為AI應(yīng)用大爆發(fā)埋下了第一個(gè)伏筆。天璣AI智能體化引擎則為應(yīng)用開(kāi)發(fā)者帶來(lái)了更加便捷的解決方案，可以加快移動(dòng)應(yīng)用大面積智能體化的進(jìn)程。

發(fā)布會(huì)上，聯(lián)發(fā)科發(fā)布天璣AI智能體化引擎先鋒計(jì)劃，在未來(lái)將聯(lián)合榮耀、OPPO、vivo、小米、傳音等多個(gè)業(yè)界重磅合作伙伴，攜手打造先進(jìn)的智能體化AI應(yīng)用體驗(yàn)。這便是聯(lián)發(fā)科為端側(cè)AI應(yīng)用大爆發(fā)埋下的第二個(gè)伏筆。聯(lián)發(fā)科正在從芯片、開(kāi)發(fā)者解決方案、終端合作構(gòu)建全鏈路的智能體化AI應(yīng)用創(chuàng)新環(huán)境。相信很快，在天璣AI生態(tài)深刻而廣泛的推進(jìn)作用下，端側(cè)AI應(yīng)用將迎來(lái)無(wú)比繁榮的景象，各種最懂用戶(hù)的端側(cè)智能體化應(yīng)用將帶來(lái)全面智慧的AI生活體驗(yàn)。

“端側(cè)生成式AI”在去年還是一個(gè)前瞻性的詞匯，而僅僅過(guò)去一年，創(chuàng)新的端側(cè)AI技術(shù)和應(yīng)用就如同雨后春筍般潮涌而來(lái)，整個(gè)移動(dòng)硬件和軟件行業(yè)被徹底盤(pán)活，這背后正是芯片廠(chǎng)商聯(lián)合整個(gè)產(chǎn)業(yè)創(chuàng)造的巨大推手。天璣9400的強(qiáng)悍NPU、AI能力和智能手機(jī)的個(gè)人化、場(chǎng)景化特點(diǎn)正在完美結(jié)合，手機(jī)作為端側(cè)AI最佳載體的優(yōu)勢(shì)已經(jīng)顯露無(wú)疑，天璣9400領(lǐng)先行業(yè)的AI性能、生成式AI能力，以及聯(lián)發(fā)科對(duì)于整個(gè)AI生態(tài)的聚攏和引領(lǐng)，也讓天璣9400成為了智能體化AI手機(jī)的最佳選擇。

讓人十分期待的是，一個(gè)由AI芯片、應(yīng)用生態(tài)和終端設(shè)備引領(lǐng)的全場(chǎng)景智慧生活時(shí)代，正在徐徐到來(lái)。