7月16日，Nullmax在上海舉辦“AI無止境，智變新開端”2024技術(shù)發(fā)布會(huì)，正式推出新一代自動(dòng)駕駛技術(shù)Nullmax Intelligence（簡稱“NI”）。新技術(shù)著重于打造全場景的自動(dòng)駕駛應(yīng)用，以純視覺、真無圖、多模態(tài)的技術(shù)特點(diǎn)，助力汽車智能進(jìn)化。

NI包含了創(chuàng)新的多模態(tài)模型和安全類腦，幫助汽車獲得能看、會(huì)聽、可讀的感官能力，并輸出可視化結(jié)果、場景描述以及駕駛行為。基于NI，Nullmax計(jì)劃2025年實(shí)現(xiàn)全場景智駕應(yīng)用的落地，并將“用眼觀察、用腦思考、與物理世界交互”的AI能力廣泛拓展到載人、運(yùn)貨和機(jī)器人等領(lǐng)域。

智能更進(jìn)一步，NI加速進(jìn)化

近年來，汽車智能化程度快速提升，智駕應(yīng)用場景逐步擴(kuò)大，高階功能向城市加速滲透。但是由于重規(guī)則、泛化差、成本高、開不好等問題，智能駕駛的普及受到限制，范圍、規(guī)模有待提升。

比如城市自動(dòng)領(lǐng)航功能，表現(xiàn)保守機(jī)械；技術(shù)方案對(duì)激光雷達(dá)、特殊地圖信息存在不同程度的依賴，應(yīng)用局限在部分地區(qū)或道路；非豪華、非頂配車型較少擁有高階功能，等等。同時(shí)在無人駕駛方面，應(yīng)用也難以快速擴(kuò)大范圍，無法創(chuàng)造更大價(jià)值。

在發(fā)布會(huì)上，Nullmax正式推出了新一代的自動(dòng)駕駛技術(shù)Nullmax Intelligence，以更聰明、更擬人的方式應(yīng)對(duì)行業(yè)自動(dòng)駕駛難題。在視覺基礎(chǔ)上，NI增加了對(duì)聲音、文本、手勢等信息的輸入支持，通過多模態(tài)的端到端模型進(jìn)行任務(wù)的推理，并構(gòu)建了基于類腦神經(jīng)網(wǎng)絡(luò)的安全類腦，由系統(tǒng)整體輸出可視化結(jié)果、場景描述和駕駛行為。

在技術(shù)層面，Nullmax Intelligence不僅深度整合了Nullmax在靜態(tài)感知、動(dòng)態(tài)感知、時(shí)序融合方面的多項(xiàng)高水平研究，包括今年入選計(jì)算機(jī)視覺頂級(jí)會(huì)議CVPR 2024、ECCV 2024等視覺檢測相關(guān)工作。同時(shí)將巖芯數(shù)智全國首個(gè)非Attention機(jī)制通用大模型Yan1.2在車端進(jìn)行部署，并與巖思類腦研究院合作構(gòu)建類腦神經(jīng)網(wǎng)絡(luò)。

這種獨(dú)特的架構(gòu)設(shè)計(jì)，使得Nullmax Intelligence既可以像人類一樣，根據(jù)接收的圖像、聲音、文字等各種信息進(jìn)行思考，同時(shí)也具有“趨利避害”的生物本能，能夠根據(jù)環(huán)境情況作出反應(yīng)，從而實(shí)現(xiàn)更高程度的安全、智能、自由。

純視覺、真無圖、多模態(tài)，開拓廣闊應(yīng)用

Nullmax Intelligence的最大特點(diǎn)在于支持純視覺、真無圖、多模態(tài)的全場景自動(dòng)駕駛應(yīng)用。

在不依賴激光雷達(dá)、雙目相機(jī)的情況下，Nullmax可以通過純視覺進(jìn)行精準(zhǔn)障礙物檢測和三維重建，并通過實(shí)時(shí)生成局部地圖結(jié)合基礎(chǔ)導(dǎo)航，實(shí)現(xiàn)不依賴高精地圖、輕地圖、低精地圖、眾包地圖的真無圖應(yīng)用。多模態(tài)以視覺為核心，可以輸出包含靜態(tài)感知、動(dòng)態(tài)感知、場景描述和駕駛行為在內(nèi)的多種信息。

這一系列的特點(diǎn)使得Nullmax的方案具有出色的泛化能力，支持全場景應(yīng)用，并且算力需求更低，小于100T的稀疏算力即可實(shí)現(xiàn)全場景的領(lǐng)航輔助駕駛。更低的傳感器成本和芯片成本，也令Nullmax的方案具有突出的性價(jià)比優(yōu)勢，更加適合普及應(yīng)用。

為支持Nullmax Intelligence模型壯大和應(yīng)用拓展，Nullmax構(gòu)建了數(shù)據(jù)平臺(tái)和算法平臺(tái)。

在真實(shí)數(shù)據(jù)基礎(chǔ)上，Nullmax通過AIGC方式生成虛擬數(shù)據(jù)，加速模型開發(fā)與迭代，尤其是稀缺的高價(jià)值數(shù)據(jù)。目前，Nullmax已經(jīng)實(shí)現(xiàn)了生成元素、圖片及視頻。面向真實(shí)數(shù)據(jù)和虛擬數(shù)據(jù)，在整個(gè)獲取、挖掘、標(biāo)注以及模型訓(xùn)練、評(píng)估、推送的全流程當(dāng)中，Nullmax均具備高效的自動(dòng)化處理。

通過對(duì)多模態(tài)輸入token化、多模態(tài)模型推理和自動(dòng)駕駛功能集成這三個(gè)環(huán)節(jié)進(jìn)行抽象，以及自研中間件MaxOS的平臺(tái)調(diào)度，Nullmax的算法平臺(tái)可以支持多種車型，適配不同數(shù)量傳感器，且易于部署。除了應(yīng)用于自動(dòng)駕駛汽車，這些算法能力同樣可以復(fù)用至機(jī)器人上，比如視覺導(dǎo)航、學(xué)習(xí)人類行為、理解并與物理世界進(jìn)行交互。

這意味著，Nullmax Intelligence不僅能夠升級(jí)Nullmax的全階智駕方案，提升高中低配置方案的擬人化、智能化程度，加速高階智駕的普及，同時(shí)還能推動(dòng)全場景的載人和運(yùn)貨應(yīng)用，實(shí)現(xiàn)真正有價(jià)值的大范圍無人駕駛；并且復(fù)用成套的AI技術(shù)能力，開拓更廣闊的具身智能應(yīng)用。

結(jié)語

自2016年成立以來，Nullmax堅(jiān)持以漸進(jìn)式路線打造無人駕駛，踐行打造全場景無人駕駛應(yīng)用，加速移動(dòng)出行智變的品牌使命。Nullmax先后推出和落地了包括行泊一體在內(nèi)的高中低配置智駕方案，為全球范圍內(nèi)的汽車廠商、Tier1等伙伴提供獨(dú)特的多樣化應(yīng)用。尤其是極致的技術(shù)和平臺(tái)化的產(chǎn)品，深受客戶認(rèn)可。

面向未來，Nullmax將持續(xù)探索最新技術(shù)，打造極致產(chǎn)品，推進(jìn)全場景的自動(dòng)駕駛載人和運(yùn)貨落地，擴(kuò)展具身智能應(yīng)用，實(shí)現(xiàn)科技普惠。