日韩美精品视频 I 黄色一级视频免费看 I 嫩草黄色影院 I 人人澡人人草 I 成人动漫av网站 I 日韩搞逼 I 日韩成人综合网 I 国产精品久久a I 国产一级片一区二区 I 久久久精彩视频 I 99亚洲综合 I 五月天综合视频 I 黄色av成人在线观看 I 超碰aⅴ人人做人人爽 I 国产啪精品视频网站免费尤物 I 免费人成精品欧美精品 I 777天堂麻豆爱综合视频 I 久久无码中文字幕无码 I 日本在线观看中文字幕 I 天使色吧 I 国产午夜高清高清在线观看 I 亚洲成亚洲乱码一二三四区软件 I 三级经典在线 I 成人性生交大全免费中文版 I 国产久爱免费精品视频 I 久操免费在线观看 I 国产网址视频 I 美国女人精69xxxxxx I 九九热毛片 I 亚洲a毛片 I 亚洲无吗一区二区 I 日韩h在线观看 I 国产超碰网页 I av资源毛片网 I 国产调教视频在线观看
請輸入網站標題
首頁
關于我們
產品中心
關鍵技術
新聞中心
加入我們
聯系我們
發展歷程
企業榮譽
合作伙伴
物流線控底盤
安防線控底盤
移動充電底盤
滑板底盤
線控底盤改制服務
場景應用案例
公司新聞
行業新聞
首頁
關于我們
發展歷程
企業榮譽
合作伙伴
產品中心
物流線控底盤
安防線控底盤
移動充電底盤
滑板底盤
線控底盤改制服務
場景應用案例
關鍵技術
新聞中心
公司新聞
行業新聞
加入我們
聯系我們
當前位置:
首頁
>
新聞中心
>
行業新聞
>
自動駕駛感知系統
公司新聞
行業新聞
公司新聞
行業新聞
自動駕駛感知系統
在自動駕駛賽道中,感知的目的是為了模仿人眼采集相關信息,為后續做決策提供必要的信息。根據所做決策的任務不同,感知可以包括很多子任務:如車道線檢測、3D目標檢測、障礙物檢測、紅綠燈檢測等等;再根據感知預測出的結果,完成決策;**根據決策結果執行相應的操作(如變道、超車等);
2024-04-18 17:21:57
感知是什么?
如何進行感知?
在自動駕駛賽道中,感知的目的是為了模仿人眼采集相關信息,為后續做決策提供必要的信息。根據所做決策的任務不同,感知可以包括很多子任務:如車道線檢測、3D目標檢測、障礙物檢測、紅綠燈檢測等等;再根據感知預測出的結果,完成決策;**根據決策結果執行相應的操作(如變道、超車等);
由于感知是為了模仿人眼獲取周圍的環境信息,那就必然需要用到傳感器來完成信息的采集工作;目前在自動駕駛領域中用到的傳感器包括:攝像頭(camera)、激光雷達(lidar)、毫米波雷達(radar)等;
可以看到傳感器的種類眾多且成本參差不齊,所以如何使用這些傳感器進行感知任務,各個自動駕駛廠商都有各自的解決方案;
純視覺的感知方案
目前Tesla是純視覺感知方案的典型**;
純視覺感知方案的優缺點也很明顯:優點:價格成本很低;缺點:攝像頭采集到的圖片是2D的,缺少深度信息,深度信息需要靠算法學習得到,缺少魯棒性;
多傳感器融合的感知方案
目前大多數廠商采用的都是多傳感器融合的解決方案;其優缺點是:優點:能夠充分利用不同工作原理的傳感器,提升對不同場景下的整體感知精度,也可以在某種傳感器出現失效時,其他傳感器可以作為冗余備份,提高系統的魯棒性;缺點:由于采用多種傳感器價格相比純視覺高很多;
多傳感器融合的感知方案
傳感器后融合
所謂后融合,是指各傳感器針對目標物體單獨進行深度學習模型推理,從而各自輸出帶有傳感器自身屬性的結果;每種傳感器的識別結果輸入到融合模塊,融合模塊對各傳感器在不同場景下的識別結果,設置不同的置信度,最終根據融合策略進行決策。
整體流程圖如下:
圖源:https://mp.weixin.qq.com/s/bmy9EsQaLNPQQKt9mPTroA
優點:不同的傳感器都**進行目標識別,解耦性好,且各傳感器可以互為冗余備份;同時后融合方案便于做標準的模塊化開發,把接口封裝好,提供給主機廠“即插即用”;對于主機廠來說,每種傳感器的識別結果輸入到融合模塊,融合模塊對各傳感器在不同場景下的識別結果,設置不同的置信度,最終根據融合策略進行決策。
缺點:存在“時間上的感知不連續”及“空間上的感知碎片化”
空間上的感知碎片化
由于車身四周的lidar、camera角度的安裝問題,多個傳感器實體無法實現空間域內的連續覆蓋和統一識別,導致攝像頭只捕捉到了目標的一小部分,無法根據殘缺的信息作出正確的檢測結果,從而使得后續的融合效果無法保證。
時間上的感知不連續
攝像頭采集到的結果是以幀為單位的,常用的感知方法是把連續單幀的檢測結果串聯起來,類似后融合的策略,無法充分利用時序上的有用信息。
傳感器前融合
所謂前融合,是將各個傳感器采集到的數據匯總到一起,經過數據同步后,對這些原始數據進行融合。
整體流程圖如下:
圖源:https://mp.weixin.qq.com/s/bmy9EsQaLNPQQKt9mPTroA
優點:讓數據更早的做融合,使數據更有關聯性;比如把激光雷達的點云數據和攝像頭的像素級數據進行融合,數據的損失也會比較少。
缺點:由于不同傳感器獲取的數據(攝像圖獲取的像素數據以及激光雷達獲取的點云數據),其坐標系是不同的;視覺數據是2D空間,而激光雷達的點云數據是3D空間。所以在異構數據的融合時,有兩種途徑:途徑一:在圖像空間利用點云數據提供深度信息;途徑二:在點云空間利用視覺數據提供語義特征,進行點云染色或特征渲染;
圖源:https://mp.weixin.qq.com/s/bmy9EsQaLNPQQKt9mPTroA
所以為了保證將不同坐標系下的數據(像素數據、點云數據)轉換到同一坐標系下進行數據融合方便后續的感知任務,BEV(Bird Eye View)視角下的感知逐漸受到廣泛的關注。
傳感器中融合
所謂中融合,就是先將各個傳感器采集到的數據通過神經網絡提取數據的特征,再對神經網絡提取到的多種傳感器特征進行特征級的融合,從而更有可能得到**感知結果。對異構數據提取到的特征在BEV空間進行特征級的融合,一來數據損失少,二來算力消耗也較少(相對于前融合),所以針對BEV視角下的感知任務,采用中融合的策略比較多。
BEV視角下的感知任務范式
將攝像頭數據(2D圖片)輸入到特征提取網絡中完成多個攝像頭數據的特征提取;
將所有攝像頭數據提取到的特征通過網絡學習的方式映射到BEV空間下;
在BEV空間下,進行異構數據的融合,將圖像數據在BEV空間下映射的特征與激光雷達點云特征進行融合;(可選,如BEVFormer*用6個攝像頭構建BEV空間特征)
進行時序融合,融合前幾個時刻的特征,增強感知能力;(個人認為:引入時序特征后可以在一定程度上解決遮擋問題)
根據獲得到BEV特征,用于下游任務;(車道線檢測、障礙物檢測、3D目標檢測等子任務,相當于整個模型是一個多任務學習模型)
BEV視角下的感知具有的優勢
跨攝像頭融合和異構數據融合更容易實現
跨攝像頭融合或者異構數據進行融合時,由于不同數據其表示的坐標系不同,需要用很多后處理規則去關聯不同傳感器的感知結果,流程非常復雜。在BEV空間內做融合后,通過網絡自主學習映射規則,產生BEV特征用于感知下游任務,算法實現更加簡單,并且BEV空間內視覺感知到的物體大小和朝向也都能直接得到表達。
分享
微信
新浪微博
QQ
分享到微信
×
微信
新浪微博
QQ
瀏覽器自帶分享功能也很好用哦~
上一篇:
備受青睞的4D毫米波成像雷達,何以助力高階自動駕駛落地?
下一篇:
一文讀懂無人駕駛 - 感知模塊
相關新聞
智能駕駛在研究中的問題
2023-02-17
無人駕駛汽車在其優勢凸顯的同時也更加暴露出其問題。無人駕駛汽車的問題包括局限性高、人文接受程度問題和安全防御性低等...
滬公網安備 31011402011805號
?2022 上海濟馭科技有限公司 版權所有
滬ICP備2022018020號-1
您的瀏覽器不支持 HTML5 video 標簽
選擇區號
主站蜘蛛池模板:
妺妺窝人体色www在线小说
|
精品尤物
|
精品人伦一区二区三区潘金莲
|
成人免费毛片网站
|
国产人成午夜免视频网站
|
久草视频官网
|
亚洲色片网站
|
国产精品自产拍在线观看
|
久久久久久综合一区中文字幕
|
久久不见久久见www日本网
|
国产成人福利
|
91亚洲免费视频
|
狠狠色噜噜狠狠狠狠色吗综合
|
欧美日韩在线视频播放
|
亚洲欧美中文日韩在线v日本
|
亚洲啪啪
|
欧性猛交ⅹxxx乱大交
|
国产午夜三级一区二区三桃花影视
|
熟女肥臀白浆大屁股一区二区
|
久久97久久97精品免视看
|
韩国资源视频一区二区三区
|
日韩欧美人妻一区二区三区
|
伊人情人色综合网站
|
一个色综合亚洲伊人久久
|
久久久久se色偷偷亚洲精品av
|
国内精品九九久久精品
|
成人小视频在线观看
|
www.alijizz.info
|
激情六月综合
|
无码日韩人妻精品久久蜜桃
|
欧美日韩中文在线观看
|
成人性视频免费网站
|
jizzjizzjizzjizz日本
|
国内久久久久影院精品
|
亚洲一区二区综合
|
亚洲国产精品日本无码网站
|
亚洲综合色自拍一区
|
国产精品va无码免费麻豆
|
av免费在线观看国产
|
日韩精品久久一区二区三区
|
丁香六月婷婷在线
|
久久精品亚洲综合专区
|
精品性高朝久久久久久久
|
风韵丰满熟妇啪啪区老老熟女百度
|
狠狠躁夜夜躁人人爽天天miya
|
182tv成人网182tv香蕉
|
久久成人免费观看草草影院
|
日韩人妻熟女中文字幕a美景之屋
|
国产欧美熟妇另类久久久
|
国产美女亚洲精品久久久综合
|
成人禁在线观看网站
|
国产不卡在线观看视频
|
国内精品久久久久久久小说
|
日本黄页免费大片在线观看
|
亚洲精品国产综合一线久久
|
丰满人妻一区二区三区视频
|
亚洲一区二区三区免费看
|
国产亚洲欧美日韩亚洲中文色
|
亚洲午夜精品一级在线
|
欧美亚洲精品中文字幕乱码
|
成人羞羞网站
|
欧美综合自拍亚洲综合百度
|
美女张开腿黄网站免费
|
夜夜骚
|
少妇无码av无码专区在线观看
|
欧美成人在线免费观看
|
美女扒开屁股让男人桶
|
久久人人玩人妻潮喷内射人人
|
午夜精品久久久久久久久久久久久
|
国产成人一区二区
|
业余 自由 性别 成熟偷窥
|
乱淫毛片
|
国产精品爽爽久久久久久
|
日韩毛片欧美一级a网站
|
国产精品视频一区二区噜噜
|
在线色网
|
av无码小缝喷白浆在线观看
|
无码精品人妻一区二区三区中
|
亚洲一区在线免费
|
亚洲国产精品久久久久秋霞蜜臀
|
99视频精品
|
久久五月天婷婷
|
国产福利视屏
|
99久久久国产精品免费观看
|
521国产精品视频
|
涩涩屋av
|
国产午夜精品一区二区三区四区
|
国产免费av在线
|
亚洲精品无码久久久久秋霞
|
挺进朋友人妻雪白的身体韩国电影
|
免费无码毛片一区二区三区a片
|
日韩综合无码一区二区
|
香港全黄一级毛片在线播放
|
国产精品高清m3u8在线播放
|
午夜伦费影视在线观看
|
秋霞av在线露丝片av无码
|
国产亚洲美女精品久久久久
|
十八禁在线观看视频播放免费
|
69精品国产久热在线观看
|