2022年1024 XPENG TECH DAY
智能駕駛方面,小鵬汽車不僅分享了行業(yè)首個(gè)量產(chǎn)落地的城市高等級(jí)輔助駕駛功能“城市NGP”的技術(shù)思考,并基于全新一代XNGP智能駕駛輔助系統(tǒng),展示其在軟件架構(gòu)、AI及數(shù)據(jù)體系方面的競爭優(yōu)勢,保持在智能駕駛下半場的持續(xù)領(lǐng)先。智能交互方面,全新一代的語音架構(gòu)及基礎(chǔ)語音能力自研讓小鵬語音的體驗(yàn)進(jìn)一步加強(qiáng),在全場景語音2.0的強(qiáng)大功能加持下,我們打造行業(yè)首個(gè)全車全時(shí)的語音交互系統(tǒng),并通過智能場景功能,讓用戶“自定義自己的智能汽車”變成可能。在智能機(jī)器人及飛行汽車領(lǐng)域,小鵬也分享了技術(shù)演進(jìn)的最新思考與成果,智能機(jī)器人與飛行汽車都有了全新一代的造型及功能設(shè)計(jì),飛行汽車已完成試驗(yàn)樣機(jī)的首次試飛。小鵬汽車期望通過持續(xù)的探索及思考,建立技術(shù)競爭優(yōu)勢,持續(xù)推動(dòng)行業(yè)向前,并通過智能科技的量產(chǎn)落地,真正為用戶帶來更美好出行生活。
以體系與效率優(yōu)勢 保持智能駕駛下半場的持續(xù)領(lǐng)先
9月17日起,城市NGP智能導(dǎo)航輔助駕駛開始在廣州試點(diǎn),陸續(xù)推送給P5用戶,全棧自研的小鵬汽車成為首個(gè)讓高階智能輔助駕駛在城市場景中量產(chǎn)落地的汽車品牌。小鵬汽車自動(dòng)駕駛副總裁吳新宙博士首先再次強(qiáng)調(diào)了城市場景對智能駕駛發(fā)展的意義。數(shù)據(jù)表明,用戶的總用車?yán)锍讨,城市道路占比高達(dá) 71%,換成用車時(shí)長維度則可以占到90%。同時(shí),每天僅有25%的用戶出行會(huì)通過高速,而城市道路則是100%。因此,城市場景不僅是用戶的高頻場景,也是剛需。為此,小鵬汽車的城市NGP及LCC增強(qiáng)版采用全新技術(shù)架構(gòu),包括定位、感知、預(yù)測、規(guī)控等方面能力全面提升。相比高速NGP,城市NGP的代碼量提升至6倍,感知模型數(shù)量提升至4倍,預(yù)測/規(guī)劃/控制相關(guān)代碼量提升至88倍。當(dāng)前,城市NGP周用戶滲透率達(dá)到84%,里程滲透率達(dá)到63%,通行效率可接近人類司機(jī)的90%,每百公里被動(dòng)接管僅0.6次?梢哉f,城市NGP已成為用戶日常通勤的最佳幫手。
小鵬智能輔助駕駛未來發(fā)展
城市場景的落地,只是智能輔助駕駛下半場的開局,小鵬G9搭載的XNGP智能輔助駕駛系統(tǒng),則具備全場景智能輔助駕駛能力,也是實(shí)現(xiàn)無人駕駛前,輔助駕駛的終極技術(shù)形態(tài)。它不僅無需高精地圖,全國各個(gè)城市和路段都能用,同時(shí)可覆蓋日常通勤,無縫連接高速、城市、地下停車場等各種場景,體驗(yàn)不中斷。在高速、城快接近零接管,安全性、道路博弈能力和通行效率上,XNGP的體驗(yàn)也將超過大部分司機(jī)。為了實(shí)現(xiàn)這一能力,小鵬汽車大幅升級(jí)硬件,采用508 TOP算力+雙激光雷達(dá)+800W像素高清攝像頭,并應(yīng)用能力再次提升的軟件架構(gòu)以及全閉環(huán)、自成長的AI和數(shù)據(jù)體系。
XNGP智能輔助駕駛系統(tǒng)
其中,XNet 深度視覺神經(jīng)網(wǎng)絡(luò)將多個(gè)攝像頭采集的數(shù)據(jù),進(jìn)行多幀時(shí)序前融合,輸出BEV視角下的動(dòng)態(tài)目標(biāo)物的4D信息(如車輛,二輪車等的大小、距離、位置及速度、行為預(yù)測等),以及靜態(tài)目標(biāo)物的3D信息(如車道線和馬路邊緣的位置)。XNet和小鵬汽車的第一代視覺感知架構(gòu)相比,利用神經(jīng)網(wǎng)絡(luò)替代了繁復(fù)的手寫邏輯,實(shí)現(xiàn)了端到端數(shù)據(jù)驅(qū)動(dòng)算法迭代。當(dāng)然,出色技術(shù)的背后,是龐大的數(shù)據(jù)采集、標(biāo)注、訓(xùn)練和間距的部署工作。以50萬段訓(xùn)練數(shù)據(jù)Clip,10億個(gè)物體為例,采用全人工標(biāo)注需2000人年,以2400TFLOPS算力的服務(wù)器進(jìn)行單機(jī)訓(xùn)練需276天。同時(shí),若將其不經(jīng)優(yōu)化的部署至車端,僅此單一網(wǎng)絡(luò)就可占用單個(gè)Orin-X算力的122%。因此,小鵬汽車打造全自動(dòng)標(biāo)注系統(tǒng),標(biāo)注效率是人工標(biāo)注的45000倍,即XNet所需2000人年的標(biāo)注量,現(xiàn)在僅需16.7天即可完成。此外,小鵬汽車在烏蘭察布建成中國最大的自動(dòng)駕駛智算中心“扶搖”,基于阿里云智能計(jì)算平臺(tái),算力可達(dá)600PFLOPS(每秒浮點(diǎn)運(yùn)算60億億次)。在“扶搖”的加持下,自動(dòng)駕駛模型訓(xùn)練效率提升602倍。與2400TOPS算力的服務(wù)器進(jìn)行單機(jī)訓(xùn)練相比,80機(jī)并行訓(xùn)練可將訓(xùn)練時(shí)長由276天縮短至11小時(shí)。同時(shí),自城市NGP研發(fā)積累的極致工程化能力,讓動(dòng)態(tài)XNet 所需的122%的Orin-X 算力,優(yōu)化后僅需 9%。極致的工程部署能力,是 XNet 上線的關(guān)鍵,更是未來持續(xù)迭代的關(guān)鍵。
XNet 深度視覺神經(jīng)網(wǎng)絡(luò)
此外,數(shù)據(jù)閉環(huán)的基礎(chǔ)能力由采集、標(biāo)注、訓(xùn)練、部署四大核心能力組成,效率是AI體系的重要KPI之一。因此,小鵬汽車通過定向采集的方式,可以通過海量車輛,收集到大量的訓(xùn)練數(shù)據(jù),在自動(dòng)標(biāo)注體系和扶搖的幫助下,快速進(jìn)行修正。即使是一些非常少見的極端場景,也可以通過仿真系統(tǒng),生成大量的同類型數(shù)據(jù),進(jìn)行快速迭代訓(xùn)練。通過定向采集和仿真結(jié)合,一年內(nèi)累計(jì)解決1000個(gè)以上Corner case(極限場景),高速NGP事故率降低95%。同時(shí),每一行代碼改動(dòng),都需要經(jīng)過行駛 5 千萬公里的仿真里程,5000+ 個(gè)核心模擬場景,挑戰(zhàn) 17000+ 個(gè)專項(xiàng)模擬場景,確保功能迭代的可靠及正向演進(jìn)。
小鵬汽車自動(dòng)駕駛副總裁 吳新宙發(fā)表演講
在軟硬件體系帶來的高效率下,XNGP系統(tǒng)將在2023年上半年之前,除G9 Max版本車型交付即有高速NGP、記憶泊車、LCC、智能泊車等功能外,在全國范圍(所有無圖城市)開放識(shí)別紅綠燈并直行通過路口能力,城市NGP覆蓋廣州、深圳、上海三座城市。2023年下半年,大在部分無圖城市開放變道、超車、左右轉(zhuǎn)能力(部分高等級(jí)能力可用范圍將根據(jù)用戶數(shù)量和測試進(jìn)度分階段開放),2024年完成全場景打通,實(shí)現(xiàn)從車位到車位的智能導(dǎo)航輔助駕駛能力。此外,針對XPILOT版本的用戶,小鵬的智能輔助駕駛能力也將持續(xù)更新。2022年起至2023年上半年,小鵬G9 Pro版在交付即有高速NGP、記憶泊車、LCC、智能泊車等功能基礎(chǔ)上,開放紅綠燈識(shí)別、車道級(jí)導(dǎo)航功能,該功能在小鵬P5 P版、E版,小鵬P7 E版、智尊版也將開放,小鵬P5 P版的城市NGP將新增開放城市深圳、上海,城市NGP與LCC增強(qiáng)版性能也將進(jìn)一步提升。2023年下半年,小鵬G9 Pro版的高速 NGP、VPA、LCC 將迎性能提升,以上所有版本車型的高速NGP功能也將在該周期內(nèi)迎來在限速調(diào)節(jié)、脫手檢測方面的策略優(yōu)化。(注:城市NGP城市開放進(jìn)度以O(shè)TA計(jì)劃為準(zhǔn),部分功能升級(jí)需具備相應(yīng)軟件及服務(wù))
XNGP發(fā)布計(jì)劃
XPILOT發(fā)布計(jì)劃
近日,小鵬汽車還完成了一項(xiàng)創(chuàng)舉,成功通過了自動(dòng)駕駛封閉場地測試,并取得了智能網(wǎng)聯(lián)汽車道路測試許可,G9成為行業(yè)首款在不改變硬件的情況下,僅通過自動(dòng)駕駛軟件升級(jí)強(qiáng)化而順利通過自動(dòng)駕駛封閉場地測試并獲得“智能網(wǎng)聯(lián)汽車道路測試”許可的在售量產(chǎn)車。未來小鵬汽車將通過自動(dòng)駕駛和高等級(jí)輔助駕駛雙線并行,實(shí)現(xiàn)數(shù)據(jù)和能力的反哺閉環(huán)。
語音交互更快更自由 小鵬汽車升級(jí)自研語音架構(gòu)并首個(gè)進(jìn)行語音基礎(chǔ)能力自研
在2020年的1024上,小鵬汽車行業(yè)首創(chuàng)“全場景語音”功能技驚四座,成為行業(yè)首個(gè)全語音交互系統(tǒng)。2年過去,小鵬依然未滿足,以不斷精進(jìn)的探索精神推動(dòng)改善用戶體驗(yàn),讓交互更快更自由,帶來行業(yè)首個(gè)全車全時(shí)的語音交互功能——全場景語音2.0。它首次將MIMO多音區(qū)技術(shù)應(yīng)用在車載語音系統(tǒng),實(shí)現(xiàn)小P全程待命,車內(nèi)多位乘員無需喚醒,多人同時(shí)人車語音對話;G9還高效利用本地算力實(shí)現(xiàn)了本地對話,在弱網(wǎng)、無網(wǎng)條件下也可穩(wěn)定控制600多項(xiàng)車輛功能;此外,依托完善的語音端云一體化方案,G9的語音響應(yīng)速度達(dá)到毫秒級(jí),更貼近人性化溝通,說到即做到。
全場景語音2.0
為了實(shí)現(xiàn)這一點(diǎn),小鵬汽車不僅升級(jí)了語音交互自研技術(shù)架構(gòu),擁有功能領(lǐng)先、架構(gòu)靈活、性能提升等特點(diǎn),并可解決半自研內(nèi)外對接復(fù)雜、周期長、進(jìn)度和關(guān)鍵技術(shù)風(fēng)險(xiǎn)不可控等研發(fā)和項(xiàng)目風(fēng)險(xiǎn),并進(jìn)一步提高隱私安全級(jí)別,保障用戶利益。該技術(shù)架構(gòu)可以實(shí)現(xiàn)全車多路語音流并行處理,支持處理四音區(qū)并發(fā)、端云一體、實(shí)時(shí)流式識(shí)別理解、并行指令等各種功能交織的語音交互請求;并可全車多路上下文理解,同時(shí)既維護(hù)單人的對話和上下文管理,也兼容多人的對話和上下文理解。全時(shí)多路拒識(shí)在噪聲請求量數(shù)倍于單路拒識(shí)噪聲量的情況下,仍能保證準(zhǔn)確率不下降,并解決多發(fā)聲通道、四路語音交互之間的回復(fù)沖突,讓用戶都能實(shí)現(xiàn)語音交互時(shí)也有較好的反饋。
行業(yè)首家車企自研語音基礎(chǔ)能力
除此以外,小鵬汽車也作為行業(yè)首家自研語音基礎(chǔ)能力的車企,包含聲學(xué)信號(hào)處理、本地語音識(shí)別、在線語音識(shí)別及語音喚醒等方面。這將幫助小鵬解決新一代系統(tǒng)下,對信號(hào)處理的更高要求,解決更高復(fù)雜度的語音問題,使性能指標(biāo)大幅提升,如回聲消除最多可支持30dB,識(shí)別準(zhǔn)確率高達(dá)97%,錯(cuò)誤率相比非基礎(chǔ)能力自研,標(biāo)準(zhǔn)安靜場景降低7.7%、中英文混合場景降低7.16%、噪聲環(huán)境場景降低36.79%、帶地域口音場景降低33.84%。同時(shí),自研語音基礎(chǔ)能力也讓語音的CPU使用率降低65.9%,內(nèi)存使用降低42.3%,優(yōu)化工程能力的同時(shí)實(shí)現(xiàn)快速迭代、用戶隱私安全保障,降低數(shù)據(jù)成本。
未來,小鵬汽車的語音能力還將向著更接近人人交互的方向進(jìn)化:讓語音助手可聽音、察言、觀色,實(shí)現(xiàn)無拘無束的輕松交流;可理解、學(xué)習(xí)、推理、記憶,做更懂用戶的鵬友;可感知、共情、表達(dá),成為陪伴用戶全場景的可靠伙伴。
智能場景 讓用戶可以“自定義你的智能汽車”
智能場景是小鵬智能座艙的全新自定義能力,讓用戶擁有專屬的座艙功能服務(wù)。它將行業(yè)領(lǐng)先的整車能力原子開放,創(chuàng)造無限用車場景,讓用戶可以定義自己的智能汽車。同時(shí),率先研發(fā)的遠(yuǎn)程智能場景,用戶不在車上時(shí),車輛依然可根據(jù)自身感知能力,繼續(xù)執(zhí)行用戶定義的場景;多個(gè)場景之間,可根據(jù)上一個(gè)場景的執(zhí)行結(jié)果,并主動(dòng)判斷串聯(lián)后續(xù)場景,滿足用戶整個(gè)行程周期的全時(shí)需求;普通用戶可直接選擇自己喜歡的場景,一鍵開啟全程服務(wù),并支持社區(qū)、社媒傳播和跨車型繼承;極客用戶更可深度參與共創(chuàng),一鍵串聯(lián)開拓想象。
智能場景功能示意
智能機(jī)器人 “小白龍”又長大了一歲
小鵬鵬行的智能機(jī)器人自2021年首次亮相后,在這一年里持續(xù)探索,迎來了新一代原型機(jī)。相比上一代,現(xiàn)款機(jī)型造型更加科幻,擁有未來風(fēng)格:頭部集成了AR投影,是對機(jī)器人交互形式的探索;在足底使用與高端跑鞋相同的“EVA超臨界發(fā)泡”及耐磨橡膠,提供優(yōu)秀的緩震、靜音與耐磨性能;頸部等區(qū)域使用新型彈性織物與液態(tài)硅膠材料,解決多自由度運(yùn)動(dòng)的設(shè)計(jì)問題,且耐沖擊、耐刮擦。
小鵬鵬行新一代智能機(jī)器人
除造型升級(jí)外,“小白龍”也迎來架構(gòu)升級(jí)。身體及腿部的“骨骼”借鑒了汽車領(lǐng)域的輕量化設(shè)計(jì)思路,相比初代更堅(jiān)固,且更輕盈;新一代AI計(jì)算單元與智能汽車同代算力,大幅提升機(jī)器人智能潛力;同時(shí),它還配備了高保真音響系統(tǒng)帶來細(xì)膩語音及影音娛樂享受;當(dāng)然,最顯著的一點(diǎn)是,升級(jí)后的“小白龍” 搭載6軸協(xié)作機(jī)械臂,與四足底盤協(xié)作,可執(zhí)行家居環(huán)境下的多種功能,大幅提升了機(jī)器人與物理環(huán)境交互的潛力。
在小鵬生態(tài)體系下,智能機(jī)器人在研發(fā)過程中,動(dòng)力系統(tǒng)、自動(dòng)駕駛、人機(jī)交互、研發(fā)體系等技術(shù)方面從智能汽車研發(fā)領(lǐng)域得到了有效賦能,包括動(dòng)力系統(tǒng)、自動(dòng)駕駛、人機(jī)交互及AI能力等。AI能力將成為驅(qū)動(dòng)機(jī)器人智能與汽車智能技術(shù)發(fā)展的“引擎”,數(shù)據(jù)將成為驅(qū)動(dòng)技術(shù)發(fā)展的“能源”,汽車智能與機(jī)器人智能將互相“成就彼此”。當(dāng)前,機(jī)器人最佳形態(tài)的探討仍在進(jìn)行中,未來鵬行的產(chǎn)品可能會(huì)具備全新形態(tài)。
小鵬匯天 全球首個(gè)電動(dòng)垂起飛行汽車
2021年1024科技日,何小鵬帶來了飛行汽車的概念車型。一年過去,在原有基礎(chǔ)上,小鵬匯天也在不斷以量產(chǎn)為目標(biāo)推進(jìn)。本屆1024,小鵬匯天發(fā)布了飛行汽車最新構(gòu)型,具備機(jī)臂折疊收納系統(tǒng),可進(jìn)行陸行和飛行模式的切換。在機(jī)臂折疊收納狀態(tài),它的尺寸和常規(guī)汽車相當(dāng),能夠在開放道路自由行駛;可進(jìn)行陸行和飛行模式的切換。在法規(guī)、環(huán)境允許的條件下垂直起降,飛行跨越擁堵、障礙、河流等,滿足人們短距離低空出行的需求。
小鵬匯天飛行汽車陸行/飛行狀態(tài)
相比去年的概念車型,最新設(shè)計(jì)由橫列雙旋翼構(gòu)型優(yōu)化為分布式多旋翼構(gòu)型。現(xiàn)方案機(jī)臂及槳葉更短,飛行狀態(tài)總長、總寬更小,對起降場地的尺寸限制更小,飛行的可通過性更好,使用更便捷。同時(shí),取消槳葉折疊、周期變距槳轂,折疊收納方式更簡單。整體系統(tǒng)設(shè)計(jì)復(fù)雜度降低,安全及可靠性提升的同時(shí)獲得更低噪聲水平。此外,它具備飛控的容錯(cuò)控制功能和動(dòng)力的雙備份,即使發(fā)生單點(diǎn)失效,依然能夠保持可控飛行和安全著陸,當(dāng)前小鵬匯天已成功在前期探索產(chǎn)品上進(jìn)行多次單電機(jī)失效試驗(yàn)。
小鵬匯天飛行汽車試驗(yàn)樣車成功首飛
當(dāng)前,小鵬匯天飛行汽車已完成試驗(yàn)樣車的成功首飛,這是全球首個(gè)真正的電動(dòng)垂起飛行汽車。要讓約2噸重的試驗(yàn)樣車成功起飛,需要克服飛行控制、動(dòng)力等多方面困難,業(yè)內(nèi)無成熟經(jīng)驗(yàn)可以借鑒,小鵬匯天通過全棧自研達(dá)成挑戰(zhàn),讓飛行汽車的研發(fā)有了實(shí)質(zhì)性的突破。
飛行汽車還將創(chuàng)新性的采用小鵬匯天自研的飛行汽車駕駛操控系統(tǒng)。它耦合飛機(jī)與汽車操控的各項(xiàng)功能,滿足飛行和陸行兩種方式的駕駛需求。陸行狀態(tài)下,與現(xiàn)有汽車的駕駛方式基本一致;飛行狀態(tài)下,通過方向盤與右側(cè)檔桿的配合,輕松實(shí)現(xiàn)飛行汽車在空中的前進(jìn)、后退、轉(zhuǎn)彎,以及上升、懸停、下降等。該操作系統(tǒng)的出現(xiàn),真正讓“路空一體”變成了可能。當(dāng)前,飛行汽車的研發(fā)進(jìn)度正在有序進(jìn)行中,小鵬匯天也呼吁國家能夠加快飛行汽車行業(yè)相關(guān)政策和標(biāo)準(zhǔn)的落地,讓飛行汽車的發(fā)展擁有配套政策的支持。
小鵬汽車董事長 CEO 何小鵬在1024發(fā)布會(huì)分享探索成果
從預(yù)見,到不止遇見,中間的挑戰(zhàn)與探索往往是最容易被忽略的部分。小鵬汽車作為“未來出行探索者”,從不會(huì)只為了噱頭打造產(chǎn)品,而是希望通過一個(gè)個(gè)新科技的量產(chǎn),真正為用戶創(chuàng)造更美好的出行生活,讓用戶小時(shí)候?qū)ξ磥淼哪切╊A(yù)見,在不久的將來也可以“不止遇見”。而在此過程中,小鵬汽車也將持續(xù)打造技術(shù)競爭優(yōu)勢,在不斷的探索和對未來的創(chuàng)造中,保持持續(xù)的領(lǐng)先優(yōu)勢。1024小鵬汽車科技日,明年見!