论文总结（3）：Intelligent Traffic Monitoring Systems for Vehicle Classification: A Survey

这是一篇综述的论文。

领域是车辆检测领域，主要是智能交通系统相关的方法。

方法如下：

文章主要讲了三个点：

1）基于 In Roadway 

2）基于Over Roadway

3）基于Side Roadway

1）基于 In Roadway 

2）基于Over Roadway

 

基于路面的车辆分类系统在路面上安装传感器，提供不需要路面物理变化的非侵入性解决方案，大大降低了施工和维护成本。此外，这些分类系统能够覆盖多个车道，在某些情况下可以覆盖整个道路段(如空中平台[831])。由于相机是这些车辆分类系统[29][30]中应用最广泛的传感器，因此本节主要介绍基于相机的车辆分类系统。我们也讨论基于相机的分类系统使用空中平台，如无人驾驶飞行器(uav)和卫星。尽管基于摄像头的车辆分类系统有许多优点，如高分类精度和覆盖多车道的能力，但一个主要缺点是隐私问题。我们讨论了一些隐私保护的解决方案，如基于红外传感器[26]和激光扫描仪[871。表2总结了本节讨论的基于路波的车辆分类系统的特点。

 

一个相机在基于道路的车辆分类系统中，最广泛采用的传感器是[29]、[30]摄像头。相机为车辆分类提供了丰富的信息，如过往车辆的视觉特征和几何形状等[88]。与基于道路的车辆分类系统相比，基于道路的车辆分类系统需要多个传感器覆盖多个车道(即每个车道至少有一个传感器)，一个摄像头就足以对多车道的车辆进行分类(图5)充分的处理能力支持的先进图像处理技术可以非常快速和准确地对多辆车辆进行分类。图5。基于摄像头的交通监控系统[7]。

基于摄像头的车辆分类系统的一般工作是捕捉路过车辆的图像，从图像中提取特征，运行算法进行车辆分类。

因此，基于摄像头的系统可以根据如何捕捉车辆图像(例如，减少背景图像影响的方法)、从车辆图像中提取的特征类型以及基于提取的特征进行分类的机制进行分类。

最近的一个趋势是，越来越多的机器学习技术被用于自动有效地提取特征，并对特征进行处理，建立分类模型。

而早期的系统使用基于支持向量机的简单分类模型。

kNN和决策树，更先进的机器学习算法，如深度学习，被越来越多地采用。

Chen等人专注于从[29]视频片段中有效地捕捉汽车图像。

采用背景高斯混合模型(GMM)[89]和阴影去除算法[90]来减少阴影、相机振动、光照变化等对车辆分类的负面影响。

采用卡尔曼滤波对车辆进行跟踪，支持向量机对车辆进行分类。

实验用的是部署在英国泰晤士河畔金斯敦的摄像机拍摄的真实视频。

车辆分为五类，即摩托车、轿车、货车、公共汽车和未知车辆。这些车型的分类准确率为94.6%。

Unzueta等人也致力于有效地捕捉汽车图像[711]。具体来说，作者解决了光照变化和前照灯反射等具有挑战性的环境下背景的动态变化问题，以提高分类精度。提出了一种多背景减法，动态调整分割阈值以适应背景的动态变化，并补充从梯度差异中提取的额外特征来增强分割[71]。

提出了一种两步法来获取车辆的空间和时间特征，用于分类，即首先生成二维轮廓，然后将其扩展到三维车辆体积，以获得更准确的车辆分类。

三种类型的车辆考虑分类，即两轮，轻型车辆，和重型车辆。分类精度是92.6%。

Mithun等人提出了一种基于多虚拟检测线(MVDLs)的车辆分类系统[70]。

VDL是一帧的线索引集，其位置垂直于车辆的移动方向(图6)。按时间顺序帧的VDL上的像素条创建了时间空间图像(TSI)。

采用多个TSIs对车辆进行检测和分类，以减少由于遮挡造成的误检。

具体来说，提出了两步分类方法。

首先根据形状特征将车辆分为四类。

在此之后，另一个基于纹理和形状不变特征的分类方案将车辆分类为更具体的类型，包括摩托车、人力车、机动三轮车、汽车、吉普车、有篷货车和公共汽车。
分类正确率在88% ~ 91之间。

从汽车图像中识别有效特征是基于摄像头的车辆分类系统面临的另一个重要挑战。

为了提高分类性能，Karaimer等人将基于形状的分类方法与基于梯度方向直方图(Histogram of Oriented Gradient, HOG)特征的分类方法相结合[73]。

具体来说，基于形状的特征包括凸性、矩形性和伸长率使用kNN, SVM与HOG特征一起使用。

这两种方法采用不同的组合方案，即求和规则和乘积规则进行组合。

求和规则确定车辆类别，使两个分类器的两种概率之和最大，乘积规则根据两种概率的乘积确定车辆类别。

实验使用了三种车辆类别，即汽车、货车和摩托车。分类准确率为96.5%。

使用机器学习算法自动提取有效特征。Huttunen等人设计了一种深度神经网络(DNN)，从带有背景的汽车图像中提取特征，去除从图像中检测汽车的预处理步骤，并对准汽车周围的包围框[74]。

神经网络的超参数是通过随机搜索来选择的，并找到参数的良好组合[91]。该系统通过一个数据库进行评估，该数据库包含6555张图像，包含四种不同的车辆类型，即小型轿车、公共汽车、卡车和货车。分类准确率为97%。

Dong等人采用半监督卷积神经网络(CNN)进行特征提取[72]。在本研究中，使用汽车前视图像进行分类。具体来说，我们提出的CNN分为两个阶段。

在第一阶段，作者设计了一种无监督学习机制来获取有效的CNN滤波器组来捕捉车辆的判别特征。

在第二阶段，基于多任务学习训练Softmax分类器[92]，提供每种车型的概率。

实验使用了两个数据集，分别是位车数据集[93]和彭等[94]使用的数据集。

前者的数据集包括9,850辆汽车图像，分为六大类型:客车、微型客车、小型货车、轿车、SUV和卡车;

后者包括3,618张白天图像和1,306张夜间图像，包括卡车、小型货车、公共汽车、乘用车和轿车。

两组数据的分类准确率分别为88.1%和89.4%。

Adu-Gyamfi等人基于先进机器学习技术的研究，利用深度卷积神经网络(deep convolutional neural network, DCNN)开发了一种车辆分类系统，旨在快速准确地提取车辆特征[75]。

与其他方法相比，DCNN模型使用一个辅助数据集进行预训练[95]，然后使用从弗吉尼亚和爱荷华州DOT CCTV摄像机数据库收集的领域特定数据进行微调。

车辆被分为FHWA的13种车辆类型。

结果表明，该方法的分类准确率达到89%以上。

尽管机器学习技术使特征提取过程更加有效，从而提高了车辆分类的准确性，但仍有许多挑战有待解决。

其中一个挑战是如何对视觉上相似的车辆进行分类。

Javadi等人提出基于车速的模糊c均值(FCM)聚类[96]作为解决这一挑战的附加特征[76]。

具体来说，他们利用不同的交通规则和车速的先验知识来提高相似尺寸车辆的分类精度。

该分类方法通过10小时的真实公路车辆图像进行评估，将车辆分为四种类型，即私家车、轻型挂车、巴士和重型挂车。分类准确率达到96.5%。将机器学习技术用于自动背景处理和特征提取的另一个挑战是，对经过的汽车图像的不同部分进行无区别处理，降低了性能[61]，[97]。

Zhao等人关注的是这个问题可能会忽略汽车图像的关键部分[77]。他们的工作受到人类视觉系统的推动，该系统将图像的关键部分与背景区分开来，这被称为多一瞥和视觉注意机制[98]。

这种只关注图像相关部分的非凡能力使人类能够非常准确地对图像进行分类。

因此，他们工作的关键思想是利用视觉注意机制首先生成聚焦图像，并将图像作为输入给CNN，以获得更准确的车辆分类。

他们通过实验将一辆车分为轿车、货车、卡车、suv和客车五种类型，分类准确率达到了97.9%。

Theagarajan等人观察到，机器学习算法只有在极其大量的图像数据下才能有效工作[78]。

作者还发现，大多数基于摄像头的分类系统是建立在小型交通数据集之上的，这些数据集没有充分考虑到天气条件、摄像头视角和道路配置的变化。为了解决这个问题，他们开发了一种基于深度网络的车辆分类机制，利用了迄今为止研究社区所知的最大数据集。该数据集包含了来自美国和加拿大8000个不同地点的摄像机的786,702张汽车图像。根据大量的数据，他们将车辆分为11种类型，包括铰接式卡车、背景车、公共汽车、自行车、汽车、摩托车、非机动车辆、行人、皮卡、单件卡车和工作货车。
分类准确率达到97.8%。

Kim和Lim[79]使用了相同的数据集[78]。与其他基于CNN的研究不同的是，作者应用了一种数据增强技术来增强不同类型的汽车在不同样本大小下的性能。
作者还应用了一种称重机制，根据不同的车辆类型关联一个重量。分类准确率为97.8%。
Liu等[80]也解决了数据集不平衡的问题。具体来说，为了增加某些车型的样本数量，他们应用了各种数据增强技术，如随机旋转、裁剪、翻转和移位，并根据从增强数据集获得的参数创建了CNN模型集成。在MIO-TCD分类挑战数据集上测试了所提出的工作，该数据集将车辆划分为11种类型。
分类准确率达到97.7%。

车辆遮挡问题是将机器学习算法应用于基于摄像头的车辆分类的另一个挑战。Chang等人提出了一种基于递归分割和凸包(RSCH)的有效模型来解决这一问题[81]。
将车辆假设为凸区域，推导出一种分解优化模型，将车辆从多车辆遮挡中分离出来。解决遮挡问题后，使用常规的CNN进行车辆分类。我们使用CompCars数据集[99]进行了实验，该数据集由136,726辆汽车图像组成，包括5种类型:轿车、suv、面包车、巴士和卡车。对于该数据集，作者的分类准确率达到了97.6%。

一些车辆分类系统集成了摄像头和不同类型的传感器。Hasnat等通过将相机与光学传感器集成，显著提高了分类精度[82]。
他们称之为混合分类系统。具体来说，该系统包括基于光学传感器的分类器和基于cnn的分类器。然后，他们应用梯度增强技术[100]结合这些分类器的决策，在基础预测器的基础上构建一个更强的预测器。将车辆分为五类:轻型(高度小于2米)、中型(高度在2米至3米之间)、重型(高度大于3米)、两轴以上重型车辆和摩托车。
分类准确率为99.0%。

 

3）基于Side Roadway

4）参考文献：

[1] M. Won, T. Park, and S. H. Son, ‘‘Toward mitigating phantom jam using vehicle-to-vehicle communication,’’ IEEE Trans. Intell. Transp. Syst., vol. 18, no. 5, pp. 1313–1324, May 2017.

[2] FHWA. The 2016 Traffic Monitoring Guide. Accessed: Apr. 12, 2019. [Online]. Available: https://www.fhwa.dot.gov/policyinformation/ tmguide/tmg_fhwa_pl_17_003.pdf

[3] M. Won, S. Sahu, and K.-J. Park, ‘‘DeepWiTraffic: Low cost WiFi-based traffic monitoring system using deep learning,’’ 2018, arXiv:1812.08208. [Online]. Available: http://arxiv.org/abs/1812.08208

[4] H. Lee and B. Coifman, ‘‘Using LiDAR to validate the performance of vehicle classification stations,’’ J. Intell. Transp. Syst., vol. 19, no. 4, pp. 3