安霸在CES 2024上發(fā)布了全新的N1系列生成式AI芯片,這是一款專門為前端設(shè)備設(shè)計(jì)的芯片,支持本地運(yùn)行大型語言模型(LLM)應(yīng)用。其單顆SoC能夠支持1至340億參數(shù)的多模態(tài)大模型(Multi-Modal LLM)推理,從而實(shí)現(xiàn)低功耗的生成式AI功能。
在展會(huì)期間,安霸展示了在其新款N1系列SoC上運(yùn)行多模態(tài)大模型的強(qiáng)大能力。令人印象深刻的是,與當(dāng)前市場上的通用GPU解決方案相比,該芯片每次推理的功耗顯著降低。這顯示出安霸在提高AI處理效率和降低功耗方面的領(lǐng)先技術(shù)。
安霸計(jì)劃在中高端SoC上提供已優(yōu)化的生成式AI處理,以滿足不同應(yīng)用場景的需求。這些AI SoC包括了功耗低于5瓦的CV72芯片以及最新的N1芯片,后者可應(yīng)用于服務(wù)器端,功耗低于50瓦。這樣的設(shè)計(jì)使得安霸的解決方案更具競爭力,尤其是在需要高效能、低功耗的邊緣計(jì)算領(lǐng)域。
相比其他AI加速器,如GPU,安霸提供的完整SoC解決方案具有顯著的優(yōu)勢(shì)。其每生成一個(gè)token的能效比最高可提高3倍,這意味著在相同的性能下,安霸的解決方案能夠顯著降低能耗,從而延長設(shè)備的續(xù)航時(shí)間。此外,安霸的解決方案還具有快速、低成本的部署優(yōu)勢(shì),使得終端產(chǎn)品能夠更快地進(jìn)入市場并降低總體成本。
總而言之,安霸的N1系列生成式AI芯片為前端設(shè)備提供了強(qiáng)大的AI處理能力,同時(shí)實(shí)現(xiàn)了低功耗和高能效比。這將有助于推動(dòng)生成式AI在各種終端設(shè)備中的應(yīng)用,包括智能手機(jī)、智能家居、智能汽車等領(lǐng)域的創(chuàng)新和發(fā)展。隨著技術(shù)的不斷進(jìn)步和應(yīng)用的不斷擴(kuò)展,安霸有望成為AI芯片市場的領(lǐng)導(dǎo)者之一。
-
soc
+關(guān)注
關(guān)注
38文章
4212瀏覽量
219190 -
AI芯片
+關(guān)注
關(guān)注
17文章
1911瀏覽量
35244 -
安霸
+關(guān)注
關(guān)注
3文章
43瀏覽量
13003
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
Gauzy和安霸的戰(zhàn)略合作取得突破性進(jìn)展
安霸發(fā)布N1-655前端生成式AI芯片
Imagination 系列研討會(huì) |中國生成式 AI 的發(fā)展
![Imagination <b class='flag-5'>系列</b>研討會(huì) |中國<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b> 的發(fā)展](https://file.elecfans.com/web2/M00/4E/DC/poYBAGLCjeiALm_WAAAYmfR7Qec474.png)
LG與安霸攜手推動(dòng) AI 艙內(nèi)安全解決方案的發(fā)展
![LG與<b class='flag-5'>安</b><b class='flag-5'>霸</b>攜手推動(dòng) <b class='flag-5'>AI</b> 艙內(nèi)安全解決方案的發(fā)展](https://file1.elecfans.com/web3/M00/01/1F/wKgZO2dRAfSAPw3CAAAymtQwVJw584.png)
NVIDIA推出全新生成式AI模型Fugatto
生成式AI工具作用
天璣9400生成式AI技術(shù)太牛了!打造最強(qiáng)AI體驗(yàn)
![天璣9400<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>技術(shù)太牛了!打造最強(qiáng)<b class='flag-5'>AI</b>體驗(yàn)](https://file1.elecfans.com//web2/M00/09/6B/wKgZomcMtPeAR57GAAEWNe0dLjM71.jpeg)
安謀科技異構(gòu)算力組合,破局生成式AI算力挑戰(zhàn)
安霸生成式AI芯片解決方案助力本地處理大型語言模型
聯(lián)發(fā)科發(fā)布天璣AI開發(fā)套件,賦能終端生成式AI應(yīng)用
聯(lián)發(fā)科攜生態(tài)伙伴發(fā)布《生成式AI手機(jī)產(chǎn)業(yè)白皮書》,引領(lǐng)手機(jī)生成式AI風(fēng)潮
![聯(lián)發(fā)科攜生態(tài)伙伴<b class='flag-5'>發(fā)布</b>《<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>手機(jī)產(chǎn)業(yè)白皮書》,引領(lǐng)手機(jī)<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>風(fēng)潮](https://file1.elecfans.com//web2/M00/E3/27/wKgaomY7SeaAfzgvAAsOji9whoo223.png)
評(píng)論