毫末智行與火山引擎合作,建成中國自動駕駛智算中心MANA,OASIS[MANAOASIS]?
1月5日消息,在今日舉辦的第七屆HAOMOAIDAY上,毫末智行宣布智算中心“雪湖·綠洲”(MANAOASIS)正式成立。MANAOASIS是中國自動駕駛行業(yè)最大智算中心,由毫末智行與火山引擎聯(lián)合打造,每秒浮點運算達67億億次,存儲帶寬每秒2T,通信帶寬每秒800G。
毫末智行CEO顧維灝表示,“MANAOASIS讓毫末擁有了超級計算能力,數(shù)據(jù)、算力充沛,毫末的技術(shù)產(chǎn)品能力將更加強大。在‘MANAOASIS’加持下,毫末將沖刺進入自動駕駛3.0時代。”
火山引擎總裁譚待表示,“我們很榮幸與毫末智行一道在智算中心領(lǐng)域達成深度合作,共同推動自動駕駛智能訓練平臺跨越式發(fā)展,加速自動駕駛技術(shù)敏捷迭代和商業(yè)化落地。”
數(shù)據(jù)驅(qū)動是自動駕駛發(fā)展的方向與趨勢,海量的產(chǎn)品數(shù)據(jù)、超大規(guī)模的數(shù)據(jù)訓練、大模型的應用等,都對算力提出了更龐大的需求。基于火山引擎豐富的大數(shù)據(jù)積累和底層技術(shù),MANAOASIS實現(xiàn)的計算、存儲、通訊能力,讓數(shù)據(jù)更快速轉(zhuǎn)化成知識,以實現(xiàn)將本增效的目的。
在數(shù)據(jù)管理能力方面,為充分發(fā)揮智算中心價值,讓GPU持續(xù)飽和運行,據(jù)介紹,毫末歷經(jīng)兩年研發(fā),建立了全套面向大規(guī)模訓練的DataEngine,實現(xiàn)了百P數(shù)據(jù)篩選速度提升10倍、百億小文件隨機讀寫延遲小于500微秒。在算力優(yōu)化方面,毫末與火山引擎合作,部署了Lego高性能算子庫、ByteCCL通信優(yōu)化能力、以及大模型訓練框架。軟硬一體,把算力優(yōu)化到極致。在訓練效率方面,基于SparseMoE,通過跨機共享,輕松完成千億參數(shù)大模型訓練,且百萬個Clips(毫末視頻最小標注單位)訓練成本只需百卡周級別,訓練成本降低100倍。
同時,在MANAOASIS的加持下,毫末MANA五大模型全新亮相升級,助力毫末自動駕駛高速發(fā)展:其中,視覺自監(jiān)督大模型,讓毫末在中國首個實現(xiàn)4DClip的自動標注;3D重建大模型,助力毫末做數(shù)據(jù)生成,用更低成本解決數(shù)據(jù)分布問題,提升感知效果;多模態(tài)互監(jiān)督大模型,則可以完成通用障礙物的識別;動態(tài)環(huán)境大模型則進一步使用重感知技術(shù),降低對高精地圖依賴;人駕自監(jiān)督認知大模型讓毫末的駕駛策略更加擬人化,安全及順暢。
MANA五大模型全面提升了毫末感知和認知層面系統(tǒng)化的底層技術(shù)能力。“在五大模型助力下,MANA最新的車端感知架構(gòu),從過去分散的多個下游任務集成到了一起,形成一個更加端到端的架構(gòu),包括通用障礙物識別、局部路網(wǎng)、行為預測等任務,毫末車端感知架構(gòu)實現(xiàn)了跨代升級。”顧維灝表示。這也意味著毫末的感知能力更強,產(chǎn)品力更強,向全無人駕駛加速邁進。