聯發科在開發者大會上放大招,生成式AI成果太炸裂!
5月7日,聯發科在深圳召開天璣開發者大會2024(MDDC 2024),這屆大會的主題是“AI予萬物”,雷科技受邀參加並報道。毫無疑問,AI是這場活動的絕對關鍵詞,大會上一切分享和討論,都繞不開AI。
在小雷看來,在天璣開發者大會上,聯發科主要做了三件事:聯合平臺夥伴啓動“天璣AI先鋒計劃”,並聯合業界生態夥伴發佈《生成式AI手機產業白皮書》;帶來了端側生成式AI解決方案“天璣AI開發套件”;發佈了天璣9300+芯片和遊戲領域關鍵技術星速引擎。
(圖源:雷科技攝製)
業內首份白皮書發佈,生成式AI手機該如何定義?
首先來說下《生成式AI手機產業白皮書》,除了聯發科,參與制定的還有Counterpoint、阿里雲通義千問、百川大模型、虎牙、酷狗音樂、零一萬物、OPPO、Soul、騰訊AI Lab、騰訊混元、vivo。這其中,既有市場調研機構,也有手機終端品牌,還有大模型、互聯網廠商。
這份白皮書的主要內容,在於嘗試給生成式AI手機下一個定義,制定一個標準。在白皮書中,Counterpoint認爲,生成式AI手機需要滿足支持大模型的本地部署、具備多模態能力以及交互方式、用戶體驗要自然流暢。
(圖源:Counterpoint)
而要滿足這些條件,手機本身需要具備硬件級的、能支持大模型運行的算力,芯片毫無疑問是關鍵。聯發科向來注重天璣芯片的AI算力,目前,無論是旗艦定位的天璣9300,還是面向中高端市場的天璣8200,均配置了算力強勁的AI計算單元APU。
搭載天璣中高端和旗艦芯片的手機,基本都能滿足生成式手機的條件,只要對應的手機品牌能夠在系統層面和應用層面提供更多的支持,就能給用戶帶來較出色的生成式AI體驗。
擁抱開發者,聯發科帶來天璣AI開發套件
另外,除了提供具有端側AI能力的SoC,聯發科還帶來了配套的方案“天璣AI開發套件”。這份套件由多個模塊組成,每個模塊都有相應的技術或能力。
其中,GenAI Model Hub打包整合了全球多款主流大模型,成爲可供開發者選擇的大模型庫;Neuron Studio則爲開發者提供了一站式視覺化開發環境,大幅降低了開發難度。天璣AI開發套件還支持推測解碼加速、LoRA Fusion等AI優化技術。
(圖源:雷科技攝製)
簡單來說,天璣AI開發套件能夠幫助開發者快速、高效地完成端側AI應用的開發,並且將其先進的AI技術落地。通過它,聯發科也能吸引到更多開發者,從而加速天璣AI生態的建設,讓更多創意能夠快速變成應用,讓普通用戶也能看得到、摸得着。
天璣9300+登場,首發機型定了
而天璣9300+,自然是天璣9300的升級版。從參數來看,天璣9300+的基礎架構沒有改變,超大核心Cortex-X4從3.25GHz提升到了3.4GHz。這款芯片的一大看點是AI方面的能力,聯發科表示,它是“業界首款”實現更高速 Llama 2 7B 端側大模型運行的芯片,速度達到了22 tokens/秒。
(圖源:聯發科)
值得一提的是,天璣9300+的首發機型爲vivo X100s。在會場外的展示區,我們見到了這款尚未發佈的機型。當然,由於還在保密期內,我們只能透過玻璃罩看到外觀,還不能上手體驗。但可以確定的是,vivo X100s上的AI尤其是端側生成式AI將是核心賣點。
(圖源:雷科技攝製)
至於星火引擎,它能夠幫助開發者更好地開發遊戲,實現高性能、高畫質和低功耗的效果。具體來說,它包含了自適應技術,能夠將芯片的性能、功耗、利用率等詳細信息傳遞給開發者,開發者可以更加精確地獲取天璣芯片的實時信息,更高效地調用硬件資源,從而讓遊戲在性能、功耗等維度上有更好的表現。
同時,星火引擎還包含了光線追蹤技術。和端遊一樣,在手游上實現光追落地,就能夠給用戶帶來更好的遊戲畫面,尤其是光影效果,更真實、更細膩的畫質,也能提升用戶遊玩的沉浸感。當然,光追在應用時,對芯片性能、功耗提出了更高的要求,星火引擎能夠在硬件資源平衡、性能調度上爲開發者和用戶提供幫助。
生成式AI落地,應用和用戶場景很關鍵
總的來說,聯發科在這場開發者大會上,公佈了大量生成式AI技術成果和解決方案。不過,以普通用戶的角度來說,小雷個人更關注具體應用場景的落地。在現場的體驗區,小雷體驗到了部分天璣生成式AI技術和具體App結合的場景。
比如,紅米K70E搭載了天璣8300-Ultra,通過天璣的端側生成式AI能力,可以實現AI擴圖、圖片消除等功能。現場上手體驗後,感覺這項功能還是很強大的。
(圖源:雷科技攝製)
而天璣和酷狗音樂合作,則實現快速配圖功能,用戶在歌曲播放界面輸入關鍵詞,就能自動生成一張圖片,以滿足用戶個性化配圖、換圖的需求。
(圖源:雷科技攝製)
從目前的AI發展趨勢來看,雲端和端側都有其難以替代的優勢,未來它們將協同進化。手機作爲體量最大、用戶黏性最高的智能設備,天然就能成爲端側AI的良好載體。而端側AI能力的強弱,直接和手機SoC相關。作爲手機芯片行業的領導品牌,聯發科在這個過程中自然會發揮舉足輕重的作用。
通過這場開發者大會,我們能感覺到,聯發科不僅是芯片供應商,同時也是AI應用生態的建設者。它將手機品牌、大模型廠商、互聯網大廠等一衆行業內的夥伴聚攏起來,讓大家在各自擅長的領域發力,從而推動整個AI產業的發展。至於,未來端側生成式AI還能迸發出怎樣的威力,還需要更多時間來給出答案。