智汇工业-智慧工业、智能制造及工业智能、工业互联门户网站,专业的工业“互联网+”传媒

【深度】分析無人駕駛汽車運用有哪些

來源:網絡

點擊:1517

A+ A-

所屬頻道:新聞中心

關鍵詞: 無人駕駛,傳感器

    深度學習在無人駕駛領域主要用于圖像處理,也就是攝像頭上面。當然也可以用于雷達的數據處理,但是基于圖像極大豐富的信息以及難以手工建模的特性,深度學習能最大限度的發揮其優勢。

    現在介紹一下全球攝像頭領域的巨擘,以色列的mobileye公司是怎么在他們的產品中運用深度學習的。 深度學習可以用于感知,識別周圍環境,各種對車輛有用的信息;也可以用于決策,比如AlphaGo的走子網絡(Policy Network),就是直接用DNN訓練, 如何基于當前狀態作出決策。

    環境識別方面,mobileye把他們識別方面的工作主要分為三部分,物體識別,可行駛區域檢測,行駛路徑識別。

    物體識別

    一般的物體識別是這樣子的:

    深度學習在無人駕駛汽車上面的運用有哪些?

    有一個長方形框框能識別出來車在哪里,很好,很不錯,但是Mobileye出來的是這樣子的:

    深度學習在無人駕駛汽車上面的運用有哪些?

    以及這樣子的:

    深度學習在無人駕駛汽車上面的運用有哪些?

    很明顯的區別就是Mobileye可以實現非常準確的車的正面以及側面的檢測,以及完全正確的區分左邊側面以及右邊側面(黃色和藍色)。

    深度學習在無人駕駛汽車上面的運用有哪些?

    這兩種檢測結果的信息量是完全不同的,左邊這個檢測結果告訴我們什么位置大概有一輛車,但是他的具體位置,車的朝向信息完全沒有。但是從右邊的檢測結果,就可以相對精確的估算出來車的位置,行駛方向等重要信息,跟我們人看到后可以推測的信息差不多了。

    這樣出眾的結果,對于較近距離的車,用其他基于幾何的方法,多跟蹤幾幀,可能可以做到接近的效果,但是留意遠處很小的車,結果也完全正確,這就只可能是深度學習的威力了。可惜Mobileye創始人兼CTO總愛四處顯擺他們技術怎么怎么牛,之前也常發論文共享一些技術,但是在車輛識別怎么建模神經網絡可以輸出這么精確帶orientation的bounding box,他只是微微一笑,說這里面有很多tricks……

    可行駛區域(free space)檢測

    深度學習以前的可行駛區域檢測,有兩種方法,一是基于雙目攝像頭立體視覺或者Structure from motion, 二是基于局部特征,馬爾科夫場之類的圖像分割。結果是這樣的:

    深度學習在無人駕駛汽車上面的運用有哪些?

    綠色部分是可行駛區域檢測,看著還不錯對不對? 但是注意左邊的綠色部分涵蓋了馬路“倒鴨子”(雷鋒網按:路邊石)以及人行道部分,因為“倒鴨子”也就比路面高十厘米左右, 靠立體視覺是很難跟馬路區分開來的。而傳統的圖像分割也很困難,因為局部特征上,“倒鴨子”上和路面的顏色極其接近。區分二者需要對環境整個context的綜合理解。

    自從有了深度學習可以做scene understanding之后,這個問題終于被攻克了:

    深度學習在無人駕駛汽車上面的運用有哪些?

    綠色部分還是可行駛區域,馬路右邊的路肩跟路面的高度相差無幾,顏色texture也是一模一樣,用立體視覺的方法不可能區分開來。

    而且不僅僅可行駛區域的邊界準確檢測出來了,連為什么是邊界的原因也可以檢測出來:

    深度學習在無人駕駛汽車上面的運用有哪些?

    紅色表示是物體跟道路的邊界,鼠標位置那里表示的是Guard rail(護欄),而上一張圖應該是Flat。這樣在正常情況下知道哪些區域是可以行駛的,而在緊急情況下,也可以知道哪里是可以沖過去的。

    當然,相較于第一部分,這一部分的原理是比較清楚的,就是基于深度學習的scene understanding。學術界也有蠻不錯的結果了,比如下圖(Cambridge的工作),路面跟倒鴨子就分的很好(藍色跟紫色):

    深度學習在無人駕駛汽車上面的運用有哪些?

    行駛路徑檢測

    這一部分工作要解決的問題主要是在沒有車輛線或者車輛線狀況很差的情況下,車怎么開的問題。如果所有的路況都如下:

    深度學習在無人駕駛汽車上面的運用有哪些?

    那當然很完美,但是由于路況或者天氣,有些時候車輛線是很難檢測到的。

    深度學習為此提供了一個解決辦法。我們可以用人在沒有車道線的路況下開車的數據來訓練神經網絡,訓練好之后,神經網絡在沒有車道線的時候也能大概判斷未來車可以怎么開。這一部分原理也是比較清楚的,找一個人開車,把整個開車的過程攝像頭的錄像保存下來,把人開車的策略車輛的行駛路徑也保存下來。用每一幀圖片作為輸入,車輛未來一段時間(很短的時間)的路徑作為輸出訓練神經網絡。之前很火的Comma公司,黑蘋果手機那個創立的,做的無人駕駛就是這種思路,因為其可靠性以及原創性還被LeCun鄙視了。

    結果如下,可以看到神經網絡提供的行駛路徑基本上符合人類的判斷:

    深度學習在無人駕駛汽車上面的運用有哪些?

    更極端的情況:

    深度學習在無人駕駛汽車上面的運用有哪些?

    綠色是預測的行駛路徑。沒有深度學習,這種場景也是完全不可能的。當然,我在最近的另外一個答案里面提到了,不能完全依靠神經網絡來做路徑規劃,Mobileye也是綜合傳統的車道線檢測,上面提到的場景分割檢測到的護欄等,這一部分的神經網絡輸出等等,做信息融合最后得到一個穩定的完美的行駛路徑。

    (審核編輯: 林靜)

    聲明:除特別說明之外,新聞內容及圖片均來自網絡及各大主流媒體。版權歸原作者所有。如認為內容侵權,請聯系我們刪除。

    主站蜘蛛池模板: 正拓夏令营官网-中小学生军事夏令营-研学军旅训练拓展夏令营 | 水溶肥料-大量元素水溶肥-含氨基酸水溶肥料-高塔复合肥-水溶肥生产厂家-河南中黄特肥科技有限责任公司 | 三菱plc_触摸屏_变频器_欧姆龙plc_普洛菲斯_安川伺服电机-广州凌控 | 西安logo设计公司/西安包装设计公司/西安画册设计公司/西安广告公司/西安品牌设计公司/泰勒广告 雾度计-雾度仪-透光率测试仪-3nh品牌雾度仪生产厂家 | 首页-南德电气集团-电能质量产品解决方案|能源数字化系统解决方案|新能源检测评估服务|电力/光伏/储能EPC工程总承包 | 全国重点实验室--人民网| 连云港机械手厂家_全自动焊接机械手_刀轴焊接机_智能轴类焊接机_连云港建博自动化设备有限公司 | 箱式电炉,箱式烧结炉,箱式马弗炉,箱式实验炉,高温箱式电阻炉,箱式加热炉,箱式退火炉,箱式真空气氛炉洛阳研博炉业有限公司 | 天象文仪办公家具,25年一站式配齐经验厂家-办公家具官网 | 轴流风机_混流风机_排烟防火阀-德州辰特空调设备有限公司 | 原子灰厂家—长兴宝迪环保科技有限公司【官网】 | 开关柜无线测温_电缆接头测温系统_六氟化硫sf6气体泄漏报警监测_卫星同步时钟-山东正瑞电子有限公司 | 金属探测机_食品金属探测仪_食品金属探测器_广东善安金属检测机 金属剪切机,金属打包机,废钢剪切机,废铁压块机,金属压块机,废纸打包机,重废龙门剪,废钢龙门剪,箱式剪,液压剪切机-瑞顿机械装备制造江阴有限公司 | 陕西筱润智能科技有限公司 干部人事智能档案柜 智能密集架 智能档案柜 部队选层文件智能柜 智能枪弹柜 财务智能档案柜 边防武警智能密集架 医院智能档案柜 部队选层文件智能柜智能枪弹柜 学校医院文件柜 企事业单位公检法智能文件柜 生产厂家-筱润智能科技有限公司 RFID射频智能密集架 全自动智能选层档案柜 智能密保柜 枪柜部队营房营具床桌椅办公家具 办公用品档案盒设备货架 全自动智能选层柜生产厂家-筱润智能科技有限公司 | 水晶粉丝机_粉丝机_粉皮机-开封市晟丰机械设备有限公司 | 江苏维赛科技生物发展有限公司 | 兰州沙盘模型公司_兰州模型公司_兰州沙盘模型厂家_地形沙盘制作_兰州沙盘模型制作公司 | 廊坊微信营销,廊坊小程序开发,廊坊APP开发(安卓_苹果ios开发),微信朋友圈广告,百度推广,廊坊网络公司品牌服务商-河北盛秋网络科技有限公司 | 化妆粉扑厂家【秀兰】一线品牌资格供应商_海绵粉扑批发_气垫粉扑价格_广州秀兰生物科技有限公司 化工招聘网 化工人才网|化工英才网-化工企业招聘首选网站 | 企业信息安全整体解决方案提供商-上海华垸信息技术有限公司 | 转炉挡渣机构,转炉滑板挡渣,滑动水口生产厂家-河北瑞华冶金科技有限公司 | 山东货架,山东仓库货架,临沂仓库货架,临沂仓储货架-山东兴博物流设备有限公司 | 消泡剂厂家-水处理消泡剂-有机硅消泡剂-广东广州多美多消泡剂厂家 | 聚氨酯碰头,聚氨酯托辊,聚氨酯地辊/地滚轮/地轮/托绳轮-济宁卓力聚氨酯制品有限公司 | 铜排,异型紫棒,紫铜棒,紫铜微孔管,异型黄管,黄铜管,异形紫管,紫铜管,焊接铜管,散热器铜管,电力铜管_河间市通海铜业有限公司 | 球磨机配件_烘干机配件_回转窑配件_球磨机小齿轮_球磨机大齿轮-巩义市兴农机械制造公司 | 珀金斯动力设备扬州有限公司| 泥沙泵_脱硫泵_潜水泵_离心泵_渣浆泵厂家|诚信为先-泰安华泰泵业制造有限公司 | 上海森信实验仪器有限公司| 上海物业管理_写字楼物业管理_厂房物业管理_上海企福物业管理有限公司 | 碳化硅微粉_超细碳化硅微粉-潍坊凯华碳化硅微粉有限公司 | 新颖科技 - 家电及汽车外饰面板供应商 | 垃圾桶_垃圾桶厂家_临沂市旭宏塑料有限公司| 柱塞泥浆泵|压滤机专用泵|陶瓷泥浆泵_咸阳华星泵业有限公司 | 山东汇河环保科技集团有限公司,水囊水袋,水罐,油囊,预压水袋,吊重水袋_山东汇河环保科技集团有限公司,水囊水袋,水罐,油囊,预压水袋,吊重水袋 | 压力蒸汽灭菌器_脉动真空灭菌器_环氧乙烷灭菌器_等离子灭菌器_广州市科洋 | 兰州物流公司_兰州货运公司_兰州物流电话上门取货_兰州立辉物流公司 | 液晶拼接屏_三星46寸/55寸/LG液晶拼接屏_深圳拼接墙厂家_电视大屏幕液晶拼接_高清工业级液晶监视器 | 上饶建盛建设,建盛建设,上饶市建盛建设工程质量检测有限公司-房屋鉴定 | 深山工作室提供网络投票系统|微信公众号投票|微信公众号小程序|抖音小程序|百度小程序|微信公众号开发|企业网站建设 | 铸铁平台,三维柔性焊接平台,划线平台,大理石平台,检验平板,花岗石平台_泊头市恒量机械设备有限公司 |