7月16日，Nullmax在上海舉辦“AI無(wú)止境，智變新開(kāi)端”2024技術(shù)發(fā)布會(huì)，正式推出新一代自動(dòng)駕駛技術(shù)Nullmax Intelligence（簡(jiǎn)稱(chēng)“NI”）。新技術(shù)著重于打造全場(chǎng)景的自動(dòng)駕駛應(yīng)用，以純視覺(jué)、真無(wú)圖、多模態(tài)的技術(shù)特點(diǎn)，助力汽車(chē)智能進(jìn)化。

NI包含了創(chuàng)新的多模態(tài)模型和安全類(lèi)腦，幫助汽車(chē)獲得能看、會(huì)聽(tīng)、可讀的感官能力，并輸出可視化結(jié)果、場(chǎng)景描述以及駕駛行為?；贜I，Nullmax計(jì)劃2025年實(shí)現(xiàn)全場(chǎng)景智駕應(yīng)用的落地，并將“用眼觀察、用腦思考、與物理世界交互”的AI能力廣泛拓展到載人、運(yùn)貨和機(jī)器人等領(lǐng)域。

智能更進(jìn)一步，NI加速進(jìn)化

近年來(lái)，汽車(chē)智能化程度快速提升，智駕應(yīng)用場(chǎng)景逐步擴(kuò)大，高階功能向城市加速滲透。但是由于重規(guī)則、泛化差、成本高、開(kāi)不好等問(wèn)題，智能駕駛的普及受到限制，范圍、規(guī)模有待提升。

比如城市自動(dòng)領(lǐng)航功能，表現(xiàn)保守機(jī)械；技術(shù)方案對(duì)激光雷達(dá)、特殊地圖信息存在不同程度的依賴(lài)，應(yīng)用局限在部分地區(qū)或道路；非豪華、非頂配車(chē)型較少擁有高階功能，等等。同時(shí)在無(wú)人駕駛方面，應(yīng)用也難以快速擴(kuò)大范圍，無(wú)法創(chuàng)造更大價(jià)值。

在發(fā)布會(huì)上，Nullmax正式推出了新一代的自動(dòng)駕駛技術(shù)Nullmax Intelligence，以更聰明、更擬人的方式應(yīng)對(duì)行業(yè)自動(dòng)駕駛難題。在視覺(jué)基礎(chǔ)上，NI增加了對(duì)聲音、文本、手勢(shì)等信息的輸入支持，通過(guò)多模態(tài)的端到端模型進(jìn)行任務(wù)的推理，并構(gòu)建了基于類(lèi)腦神經(jīng)網(wǎng)絡(luò)的安全類(lèi)腦，由系統(tǒng)整體輸出可視化結(jié)果、場(chǎng)景描述和駕駛行為。

在技術(shù)層面，Nullmax Intelligence不僅深度整合了Nullmax在靜態(tài)感知、動(dòng)態(tài)感知、時(shí)序融合方面的多項(xiàng)高水平研究，包括今年入選計(jì)算機(jī)視覺(jué)頂級(jí)會(huì)議CVPR 2024、ECCV 2024等視覺(jué)檢測(cè)相關(guān)工作。同時(shí)將巖芯數(shù)智全國(guó)首個(gè)非Attention機(jī)制通用大模型Yan1.2在車(chē)端進(jìn)行部署，并與巖思類(lèi)腦研究院合作構(gòu)建類(lèi)腦神經(jīng)網(wǎng)絡(luò)。

這種獨(dú)特的架構(gòu)設(shè)計(jì)，使得Nullmax Intelligence既可以像人類(lèi)一樣，根據(jù)接收的圖像、聲音、文字等各種信息進(jìn)行思考，同時(shí)也具有“趨利避害”的生物本能，能夠根據(jù)環(huán)境情況作出反應(yīng)，從而實(shí)現(xiàn)更高程度的安全、智能、自由。

純視覺(jué)、真無(wú)圖、多模態(tài)，開(kāi)拓廣闊應(yīng)用

Nullmax Intelligence的最大特點(diǎn)在于支持純視覺(jué)、真無(wú)圖、多模態(tài)的全場(chǎng)景自動(dòng)駕駛應(yīng)用。

在不依賴(lài)激光雷達(dá)、雙目相機(jī)的情況下，Nullmax可以通過(guò)純視覺(jué)進(jìn)行精準(zhǔn)障礙物檢測(cè)和三維重建，并通過(guò)實(shí)時(shí)生成局部地圖結(jié)合基礎(chǔ)導(dǎo)航，實(shí)現(xiàn)不依賴(lài)高精地圖、輕地圖、低精地圖、眾包地圖的真無(wú)圖應(yīng)用。多模態(tài)以視覺(jué)為核心，可以輸出包含靜態(tài)感知、動(dòng)態(tài)感知、場(chǎng)景描述和駕駛行為在內(nèi)的多種信息。

這一系列的特點(diǎn)使得Nullmax的方案具有出色的泛化能力，支持全場(chǎng)景應(yīng)用，并且算力需求更低，小于100T的稀疏算力即可實(shí)現(xiàn)全場(chǎng)景的領(lǐng)航輔助駕駛。更低的傳感器成本和芯片成本，也令Nullmax的方案具有突出的性?xún)r(jià)比優(yōu)勢(shì)，更加適合普及應(yīng)用。

為支持Nullmax Intelligence模型壯大和應(yīng)用拓展，Nullmax構(gòu)建了數(shù)據(jù)平臺(tái)和算法平臺(tái)。

在真實(shí)數(shù)據(jù)基礎(chǔ)上，Nullmax通過(guò)AIGC方式生成虛擬數(shù)據(jù)，加速模型開(kāi)發(fā)與迭代，尤其是稀缺的高價(jià)值數(shù)據(jù)。目前，Nullmax已經(jīng)實(shí)現(xiàn)了生成元素、圖片及視頻。面向真實(shí)數(shù)據(jù)和虛擬數(shù)據(jù)，在整個(gè)獲取、挖掘、標(biāo)注以及模型訓(xùn)練、評(píng)估、推送的全流程當(dāng)中，Nullmax均具備高效的自動(dòng)化處理。

通過(guò)對(duì)多模態(tài)輸入token化、多模態(tài)模型推理和自動(dòng)駕駛功能集成這三個(gè)環(huán)節(jié)進(jìn)行抽象，以及自研中間件MaxOS的平臺(tái)調(diào)度，Nullmax的算法平臺(tái)可以支持多種車(chē)型，適配不同數(shù)量傳感器，且易于部署。除了應(yīng)用于自動(dòng)駕駛汽車(chē)，這些算法能力同樣可以復(fù)用至機(jī)器人上，比如視覺(jué)導(dǎo)航、學(xué)習(xí)人類(lèi)行為、理解并與物理世界進(jìn)行交互。

這意味著，Nullmax Intelligence不僅能夠升級(jí)Nullmax的全階智駕方案，提升高中低配置方案的擬人化、智能化程度，加速高階智駕的普及，同時(shí)還能推動(dòng)全場(chǎng)景的載人和運(yùn)貨應(yīng)用，實(shí)現(xiàn)真正有價(jià)值的大范圍無(wú)人駕駛；并且復(fù)用成套的AI技術(shù)能力，開(kāi)拓更廣闊的具身智能應(yīng)用。

結(jié)語(yǔ)

自2016年成立以來(lái)，Nullmax堅(jiān)持以漸進(jìn)式路線打造無(wú)人駕駛，踐行打造全場(chǎng)景無(wú)人駕駛應(yīng)用，加速移動(dòng)出行智變的品牌使命。Nullmax先后推出和落地了包括行泊一體在內(nèi)的高中低配置智駕方案，為全球范圍內(nèi)的汽車(chē)廠商、Tier1等伙伴提供獨(dú)特的多樣化應(yīng)用。尤其是極致的技術(shù)和平臺(tái)化的產(chǎn)品，深受客戶(hù)認(rèn)可。

面向未來(lái)，Nullmax將持續(xù)探索最新技術(shù)，打造極致產(chǎn)品，推進(jìn)全場(chǎng)景的自動(dòng)駕駛載人和運(yùn)貨落地，擴(kuò)展具身智能應(yīng)用，實(shí)現(xiàn)科技普惠。