一种自动驾驶场景一致性对比方法、装置及电子设备与流程

1.本技术涉及自动驾驶算法技术领域，尤其涉及一种自动驾驶场景一致性对比方法、装置及电子设备。


背景技术：

2.目前，仿真-实车测试数据的对比主要是包括定性分析和定量分析。
3.定性分析包括测试结果曲线的图形比较等，由于定性分析主观性强，方法较为粗糙，科学性差，定量分析则包括两组数据之间的对比以及多组数据之间的对比两种情况。
4.对于两组数据之间进行对比的情况，通常采用相对误差或均方根误差以反映数据比对情况，但是相对误差会出现多次试验结果偏差较大造成实验不准的问题，而均方根误差与场景参数相关，易受异常值影响。
5.对于多组数据之间进行对比的情况，包括利用kappa统计量和组内相关系数（icc）两种系数反映比对结果，但是，kappa统计量只能用于相同试验对象多次测试结果，而组内相关系数则会默认试验对象是有特定关系的。
6.综上所述，现有技术中，定性分析会影响仿真-实车测试数据之间的对比结果的准确性且比对效率低，而定量分析比对场景不仅受局限，且比对结果准确性也不高。


技术实现要素：

7.有鉴于此，本技术的目的在于至少提供一种自动驾驶场景一致性对比方法、装置及电子设备，通过场景一致性比对模型，保证多组仿真与多组实测数据之间比对效率的同时，使方法使用所有试验场景。
8.本技术主要包括以下几个方面：第一方面，本技术实施例提供一种自动驾驶场景一致性对比方法，方法包括：在同一功能测试场景下，获取多组测试数据，多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。
9.在一种可能的实施方式中，通过以下方式得到每个待比对参数对应的一致性系数：由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵；根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩；根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，一致性系数反映了待比对参数在不同测试环境下的一致性程度。
10.在一种可能的实施方式中，通过以下公式确定每个待比对参数对应的一致性系
数：在该公式中，表示第j个待比对参数对应的一致性系数，表示第j个待比对参数对应的观测值数量，其中，的取值范围为，表示待比对参数数量；其中：；表示第个待比对参数中的第个观测值对应的秩。
11.在一种可能的实施方式中，通过以下方式确定每个待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果：判断该待比对参数对应的一致性系数是否大于或等于第一预设阈值；若该待比对参数对应的一致性系数大于或等于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果具备一致性；若该待比对参数对应的一致性系数小于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果不具备一致性。
12.在一种可能的实施方式中，在确定每个待比对参数对应的一致性比较结果之前，方法还包括：获取场景一致性比对模型输出的每个待比对参数对应的显著性系数，显著性系数用于指示一致性系数是否可信；针对每个待比对参数，若该待比对参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于第二预设阈值，则确定该待比对参数对应的一致性系数不可信。
13.第二方面，本技术实施例还提供一种自动驾驶场景一致性对比装置，装置包括：获取模块，用于在同一功能测试场景下，获取多组测试数据，多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；一致性比对模块，用于将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；结果确定模块，用于针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。
14.在一种可能的实施方式中，一致性比对模块，还用于：由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵；根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩；根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，一致性系数反映了待比对参数在不同测试环境下的一致性程度。
15.在一种可能的实施方式中，装置还包括可信度验证模块，用于：在确定每个待比对参数对应的一致性比较结果之前，获取场景一致性比对模型输出的每个待比对参数对应的显著性系数，显著性系数用于指示一致性系数是否可信；针对每个待比对参数，若该待比对
参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于第二预设阈值，则确定该待比对参数对应的一致性系数不可信。
16.第三方面，本技术实施例还提供一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过所述总线进行通信，所述机器可读指令被所述处理器运行时执行上述第一方面或第一方面中任一种可能的实施方式中所述的自动驾驶场景一致性对比方法的步骤。
17.第四方面，本技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述第一方面或第一方面中任一种可能的实施方式中所述的自动驾驶场景一致性对比的步骤。
18.本技术实施例提供的一种自动驾驶场景一致性对比方法、装置及电子设备，方法包括：在同一功能测试场景下，获取多组测试数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。本技术通过场景一致性比对模型，保证多组仿真与多组实测数据之间比对效率的同时，使方法使用所有试验场景。
19.本技术有益之处在于：本技术提供的自动驾驶场景一致性对比方法，首先保障实测-多组仿真数据之间的对比效率；其次，能够定量分析仿真-实测数据，避免kappa只能用于相同试验对象的名义分类，同时避免icc的只能对特定关系的试验对象进行对比，且避免出现无法对比的问题；再次，能够得到多次仿真-实车对比试验的结果趋势保持一致的情况；最后，保障比对方法对所有试验场景/项目均适用。
20.为使本技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
21.为了更清楚地说明本技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
22.图1示出了本技术实施例所提供的一种自动驾驶场景一致性对比方法的流程图之一；图2示出了本技术实施例提供的一种自动驾驶场景一致性对比方法的流程图之二；图3示出了本技术实施例提供的一种自动驾驶场景一致性对比装置的功能模块图；
图4示出了本技术实施例所提供的一种电子设备的结构示意图。
具体实施方式
23.为使本技术实施例的目的、技术方案和优点更加清楚，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，应当理解，本技术中的附图仅起到说明和描述的目的，并不用于限定本技术的保护范围。另外，应当理解，示意性的附图并未按实物比例绘制。本技术中使用的流程图示出了根据本技术的一些实施例实现的操作。应当理解，流程图的操作可以不按顺序实现，没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外，本领域技术人员在本技术内容的指引下，可以向流程图添加一个或多个其他操作，也可以从流程图中移除一个或多个操作。
24.另外，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本技术实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本技术的实施例的详细描述并非旨在限制要求保护的本技术的范围，而是仅仅表示本技术的选定实施例。基于本技术的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的全部其他实施例，都属于本技术保护的范围。
25.目前，仿真-实车测试数据的对比主要是包括定性分析和定量分析。
26.定性分析主要包括测试结果曲线的图形比较等，但由于定性分析主观性强，意味着其只适合用来支持仿真-实车对比的第一步，由于定性分析主观性强，方法较为粗糙，科学性差。
27.定量评估是通过对多组模拟仿真测试数据和一组封闭场地测试数据的关键性能指标的定量计算，来进行仿真-实车数据的对比，包括比较时间序列和概率分布等。
28.在定量评估中，对于两组数据之间对比，包括：（1）相对误差相对误差指的是测量所造成的绝对误差与被测量真值之比乘以100%所得的数值，以百分数表示。一般来说，相对误差更能反映测量的可信程度，但是，当为0时，出现无法计算问题，且多次试验结果偏差较大。
29.相对误差其中，q表示仿真实验次数，表示第q次仿真实验对应的测量值，表示实际测试对应的测量值。
30.（2）均方根误差均方根误差是预测值与真实值偏差的平方与观测次数比值的平方根，用来衡量观测值同真值，或者观测值与其模拟值之间的偏差。
31.其中，均方根误差s=，均方根误差与场景参数相关，无规律，易受异常值的影响。
32.对于定量评估中的多组数据之间对比：1）kappa衡量在评估相同试验对象时多次测试结果的一致程度。kappa值的范围
为
–
1到+1。kappa值越高，一致性就越强。当：kappa=1时，表明完全一致。kappa=0时，则一致性与偶然预期的相同。kappa《0时，一致性比偶然预期的还要弱，不过这种情况很少发生，但是此种对比方式只能用于相同试验对象多次测试结果，且分类是名义上的，例如真/假、好/坏等。
33.2）组内相关系数（icc）组内相关系数（intraclass correlation efficient，icc）常用于评价具有确定亲属关系的个体间某种定量属性的相似程度，也应用于评价不同测定方法或评定者对同一定量测量结果的可重复性或一致性，在一致性检验中，常使用icc指标评价不同研究者对同一组试验结果进行诊断的可重复性，但是，组内相关系数常用于评价具有某种特定关系的试验对象间的某种定量属性的相似程度，默认试验对象是有特定关系的。
34.基于此，本技术实施例提供了一种自动驾驶场景一致性对比方法、装置及电子设备，通过场景一致性比对模型，保证多组仿真与多组实测数据之间比对效率的同时，使方法使用所有试验场景，具体如下：请参阅图1，图1示出了本技术实施例所提供的一种自动驾驶场景一致性对比方法的流程图之一。如图1所示，本技术实施例提供的方法，包括以下步骤：s100、在同一功能测试场景下，获取多组测试数据。
35.其中，多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值。
36.s200、将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数。
37.s300、针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。
38.请参阅图2，图2示出了本技术实施例提供的一种自动驾驶场景一致性对比方法的流程图之二。如图2所示，在步骤s100中，可以先选取一功能测试场景并确定场景运行参数，例如前方车辆紧急制动场景，然后确定功能测试场景对应的多个待比对参数q1、q2...... qk，待比对参数可以为试验车辆速度、试验车辆加速度和试验车辆与目标车辆之间的相对纵向距离等，场景运行参数例如试验车辆初始速度40km/h。
39.然后分别在模拟仿真环境中和封闭场地实测环境中运行功能测试场景，并分别在模拟仿真环境中进行多组仿真测试（≥10次）和在封闭场地实测环境中进行一次封闭场地测试，并记录测试结果，得到多组测试数据，多组测试数据包括多组仿真测试数据s仿真1、s仿真2、s仿真3......，和实测数据s场地。
40.在步骤s200中，如图2，将多组测试数据输入预设对比工具，预设对比工具内置基于kendall系数的场景一致性比对模型，基于多组仿真测试数据和实测数据采用场景一致性比对模型分别对待比对k个待比对参数，，......进行的一致性比对，得到每个待比对参数对应的一致性系数w，针对每个待比对参数，根据一致性系数w，输出每个待比对参数对应的一致性比较结果。
41.在一优选实施例中，通过以下方式得到每个待比对参数对应的一致性系数：
由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵，根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩，根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，一致性系数反映了待比对参数在不同测试环境下的一致性程度。
42.在另一优选实施例中，通过以下公式确定每个待比对参数对应的一致性系数：在该公式中，表示第j个待比对参数对应的一致性系数，表示第j个待比对参数对应的观测值数量，其中，的取值范围为，表示待比对参数数量；其中：，=1，2，......n表示第个待比对参数中的第个观测值对应的秩。
43.一示例中，假设存在k个待比对参数，，......，受所进行的仿真测试和封闭环境测试数量限制，每个待比对参数共具备n个观测值（包括多组仿真测试下的观测值和封闭场地测试下的观测值），由于待比对参数对应的观测值会存在负值的情况（例如：加速度-0.2m/s2），则第个待比对参数所形成的一维矩阵为（，，......），假设场景一致性比对模型对应的检验问题为k个待比对参数不相关，则先确定在（，，......）的秩，然后再确定，其中，=1，2，......n，基于此，可计算出所有秩和为：基于计算出的全部秩和，利用统计量，得到对检验问题进行验证的一致性系数表达式：在一优选实施例中，通过以下方式确定每个待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果：判断该待比对参数对应的一致性系数是否大于或等于第一预设阈值，若该待比对参数对应的一致性系数大于或等于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果具备一致性，若该待比对参数对应的一致性系数小于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果不具备一致性。
44.本技术一优选实施例中，在确定每个待比对参数对应的一致性比较结果之前，方
法还包括：获取场景一致性比对模型输出的每个待比对参数对应的显著性系数，显著性系数用于指示一致性系数是否可信，针对每个待比对参数，若该待比对参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于第二预设阈值，则确定该待比对参数对应的一致性系数不可信。
45.在本技术中，如图2，场景一致性比对模型还会输出每个待比对参数对应的显著性系数p，对于每个待比对参数，最终输出一致性系数w和显著性系数p。
46.表1待比对参数测试总数一致性系数w显著性系数p速度50.8530.00022加速度50.6290.03相对位置50.7780.005表一示出一种一致性对比结果示例，如表1所示，待比对参数包括速度、加速度和相对位置，且进行了四组仿真测试和一组实测，测试总数共计5次，则以速度为例，最后一致性模型输出一致性系数为0.853，显著性系数为0.00022，其中，第二预设阈值为0.01，0.00022小于0.01，说明一致性系数结果可信，第一预设阈值为0.8，0.853大于0.8，说明速度在模拟仿真环境以及封闭场地实测环境下得到的实验结果具备一致性。
47.基于同一申请构思，本技术实施例中还提供了与上述实施例提供的自动驾驶场景一致性对比方法对应的自动驾驶场景一致性对比装置，由于本技术实施例中的装置解决问题的原理与本技术上述实施例的自动驾驶场景一致性对比方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
48.请参阅图3，图3示出了本技术实施例提供的一种自动驾驶场景一致性对比装置的功能模块图。如图3所示，装置包括：获取模块400，用于在同一功能测试场景下，获取多组测试数据，多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值。
49.一致性比对模块410，用于将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数。
50.结果确定模块420，用于针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。
51.优选的，一致性比对模块410，还用于：由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵；根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩；根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，一致性系数反映了待比对参数在不同测试环境下的一致性程度。
52.优选的，装置还包括可信度验证模块430，用于：在确定每个待比对参数对应的一
致性比较结果之前，获取场景一致性比对模型输出的每个待比对参数对应的显著性系数，显著性系数用于指示一致性系数是否可信；针对每个待比对参数，若该待比对参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于第二预设阈值，则确定该待比对参数对应的一致性系数不可信。
53.优选的，一致性比对模块410，还用于通过以下公式确定每个待比对参数对应的一致性系数：在该公式中，表示第j个待比对参数对应的一致性系数，表示第j个待比对参数对应的观测值数量，其中，的取值范围为，表示待比对参数数量；其中：；表示第个待比对参数中的第个观测值对应的秩。
54.优选的，结果确定模块420还用于：判断该待比对参数对应的一致性系数是否大于或等于第一预设阈值；若该待比对参数对应的一致性系数大于或等于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果具备一致性；若该待比对参数对应的一致性系数小于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果不具备一致性。
55.基于同一申请构思，请参阅图4，图4示出了本技术实施例提供的一种电子设备的结构示意图，电子设备500包括：处理器510、存储器520和总线530，存储器520存储有处理器510可执行的机器可读指令，当电子设备500运行时，处理器510与存储器520之间通过总线530进行通信，机器可读指令被处理器510运行时执行如上述实施例中任一提供的自动驾驶场景一致性对比方法的步骤。
56.基于同一申请构思，本技术实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器运行时执行上述实施例提供的自动驾驶场景一致性对比方法的步骤。
57.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本技术所提供的几个实施例中，应所述理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
58.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个
网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
59.另外，在本技术各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
60.所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者所述技术方案的部分可以以软件产品的形式体现出来，所述计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器（read-only memory，rom）、随机存取存储器（random access memory，ram）、磁碟或者光盘等各种可以存储程序代码的介质。
61.以上仅为本技术的具体实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本技术的保护范围之内。因此，本技术的保护范围应以权利要求的保护范围为准。

技术特征：
1.一种自动驾驶场景一致性对比方法，其特征在于，所述方法包括：在同一功能测试场景下，获取多组测试数据，所述多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；将所述多组测试数据输入基于kendall系数的场景一致性比对模型，利用所述场景一致性比对模型对所述多组仿真测试数据和所述至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。2.根据权利要求1所述的方法，其特征在于，通过以下方式得到每个待比对参数对应的一致性系数：由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵；根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩；根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，所述一致性系数反映了待比对参数在不同测试环境下的一致性程度。3.根据权利要求2所述的方法，其特征在于，通过以下公式确定每个待比对参数对应的一致性系数：在该公式中，表示第j个待比对参数对应的一致性系数，表示第j个待比对参数对应的观测值数量，其中，的取值范围为，表示待比对参数数量；其中：；表示第个待比对参数中的第个观测值对应的秩。4.根据权利要求1所述的方法，其特征在于，通过以下方式确定每个待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果：判断该待比对参数对应的一致性系数是否大于或等于第一预设阈值；若该待比对参数对应的一致性系数大于或等于第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果具备一致性；若该待比对参数对应的一致性系数小于所述第一预设阈值，则确定该待比对参数在模拟仿真环境以及封闭场地实测环境下得到的实验结果不具备一致性。5.根据权利要求1所述的方法，其特征在于，在确定每个待比对参数对应的一致性比较结果之前，所述方法还包括：获取所述场景一致性比对模型输出的每个待比对参数对应的显著性系数，所述显著性
系数用于指示所述一致性系数是否可信；针对每个待比对参数，若该待比对参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于所述第二预设阈值，则确定该待比对参数对应的一致性系数不可信。6.一种自动驾驶场景一致性对比装置，其特征在于，所述装置包括：获取模块，用于在同一功能测试场景下，获取多组测试数据，所述多组测试数据包括在模拟仿真环境中进行多次仿真测试得到的多组仿真测试数据以及在封闭场地实测环境下进行至少一次实测得到的至少一组实测数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；一致性比对模块，用于将所述多组测试数据输入基于kendall系数的场景一致性比对模型，利用所述场景一致性比对模型对所述多组仿真测试数据和所述至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；结果确定模块，用于针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。7.根据权利要求6所述的装置，其特征在于，所述一致性比对模块，还用于：由该待比对参数的每个观测值的绝对值，形成该待比对参数对应的一维矩阵；根据该待比对参数对应的一维矩阵，确定该待比对参数对应的每个观测值在该一维矩阵下的秩；根据该待比对参数的各观测值对应的秩，确定该待比对参数对应的一致性系数，所述一致性系数反映了待比对参数在不同测试环境下的一致性程度。8.根据权利要求6所述的装置，其特征在于，所述装置还包括可信度验证模块，用于：在确定每个待比对参数对应的一致性比较结果之前，获取所述场景一致性比对模型输出的每个待比对参数对应的显著性系数，所述显著性系数用于指示所述一致性系数是否可信；针对每个待比对参数，若该待比对参数对应的显著性系数小于第二预设阈值，则确定该待比对参数对应的一致性系数可信；针对每个待比对参数，若该待比对参数对应的显著性系数大于或等于所述第二预设阈值，则确定该待比对参数对应的一致性系数不可信。9.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过所述总线进行通信，所述机器可读指令被所述处理器运行时执行如权利要求1至5任一所述的自动驾驶场景一致性对比方法的步骤。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1至5任一所述的自动驾驶场景一致性对比方法的步骤。

技术总结
本申请提供了一种自动驾驶场景一致性对比方法、装置及电子设备，涉及自动驾驶算法技术领域，方法包括：在同一功能测试场景下，获取多组测试数据，每组测试数据包括在对应测试环境下得到的多个待比对参数对应的观测值；将多组测试数据输入基于kendall系数的场景一致性比对模型，利用场景一致性比对模型对多组仿真测试数据和至少一组实测数据进行一致性比对，得到每个待比对参数对应的一致性系数；针对每个待比对参数，根据该待比对参数对应的一致性系数，确定该待比对参数在模拟仿真环境以及封闭场地实测环境下的一致性比较结果。本申请通过场景一致性比对模型，保证多组仿真与多组实测数据之间比对效率的同时，使方法使用所有试验场景。验场景。验场景。


技术研发人员：何丰 白智敏 鞠晓男 薛晓卿
受保护的技术使用者：北京赛目科技股份有限公司
技术研发日：2023.08.08
技术公布日：2023/9/9