1.4 面临的困难和挑战
无人驾驶感知面临的困难和挑战有以下几点。
(1)感知场景是复杂的。感知不仅要识别出常见的车辆、拥挤的行人、自行车等,也要识别出一些标志物、警示物、施工点和动物等,如图1.9所示。
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_24_1.jpg?sign=1739643020-4IDfCPnx83otKtStwM40qIHK5VPjFUw6-0-146cacac5353db7c219411f96ea9c569)
图1.9 感知场景的复杂性
(2)类内差异大。虽然都是货车和摩托车,但是外观差异很大,如图1.10所示。
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_24_2.jpg?sign=1739643020-0LUs4s2HSC4JBCIoelsldCwoyRys97Jn-0-58c3214b42ba023882c24ede0b06c3f2)
图1.10 类内的差异性
(3)类间差异小。如图1.11所示是激光雷达得到的点云数据,由于缺少了纹理信息,货车、公交车等车在激光雷达中看到的区别很小。
(4)未定义的类别。如图1.12所示,感知过程中会有一些诸如倒下的单车、轮胎、玩具等未定义的物体出现。
(5)恶劣天气影响。如图1.13所示,这些天气对激光雷达和RGB摄像头的成像都会有较大影响。
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_25_1.jpg?sign=1739643020-Cd52JIGaMiwwivJLHV0DTStFyj14ffNq-0-b5a6a09bf5174553dd831be6c3f6ccab)
图1.11 激光雷达得到的点云数据
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_25_2.jpg?sign=1739643020-sD7okBkuNNSXIf3X6WxjjOcbz04AvsKx-0-1217425d885e602331811c5e167b3bd4)
图1.12 未定义的类别
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_25_3.jpg?sign=1739643020-9GydWMRJ2k8p9bAlTmvPIBhuKVWtx11V-0-53f92c7b1bb96f4012f55b4f6416d4bc)
图1.13 恶劣天气的影响
(6)噪声。如图1.14所示,在汽车行驶的过程中,不仅有传感器的噪声,也会有环境的噪声,如路面溅起的水花、扬起的灰尘。
![](https://epubservercos.yuewen.com/C06DEA/26947614402684006/epubprivate/OEBPS/Images/45325_25_4.jpg?sign=1739643020-WMEkeJIYG3tLmzuNpYwIJcF7AshcyoB3-0-fbf856a435bcbe75630a9083e98be906)
图1.14 噪声
(7)移动端的实时性和功耗。无人驾驶的算法复杂,传感器获得的数据量多,但由于功耗限制,无人驾驶车载计算单元的算力非常有限,同时无人驾驶需要满足低延时的要求。所以,要求感知模块需要在有限算力的基础上对数据进行实时处理。