汽车智能座舱分级与综合评价白皮书

2024-11-19 08:03:57·  来源:智驾社  
 
3.2.3 面向产品的客观测试评价方法

在面向产品的评价体系中,主要使用客观测试评价方法,在将量化的测试结果统一转化为可对比的分数后,不同产品各自的特点能被更加直观地体现。智能座舱的客观测试评价方法主要包括静态测试、实车模拟驾驶平台测试、实际道路测试等。

静态测试指在车辆保持静止且车机系统正常运行的状态下对其进行测试,期间驾驶员无需进行驾驶相关的活动,智能座舱的大部分功能都可以在静态时完整使用。静态测试需要由专业素质较高的测试员执行,同时也可以使用专业测试设备来进一步提高结果的标准化程度。在测试座舱的语音交互能力时,使用符合相关标准的人工声源能够准确且不间断地说出语音指令,避免可能的人为误差。对于触屏相关测试任务,借助仿真机械手不但能重复、标准地进行测试, 还能通过编写程序实现一定程度的自动化,进一步优化测试流程。静态测试需要的专业测试设备还可能包括专业相机等,其目的都是为了提高测试效率,降低测试成本,以及保证测试结果的准确和可靠。

实车模拟驾驶平台测试是专门面向驾驶次任务的测试方法,能够全面、高效地测试真实车辆的人机交互系统。其中包括了视听仿真系统、驾驶仿真系统、实验系统接口、数据采集系统、测评管理系统。与自然驾驶相比, 在模拟驾驶环境中可以设计标准化的任务和事件,并由计算机来进行精确地触发,避免了自然驾驶研究中事件发生的随机性问题和安全隐患。模拟驾驶环境也方便控制环境变量,以避免实路测试中阳光角度、路面起伏等对测试员行为造成的潜在影响。这种新型的驾驶模拟测试方法既能够采集丰富的实时驾驶行为数据,又能够在评价中充分考虑真实车辆的人机交互布局和设计因素。该方法主要针对评价体系中的操作安全指标,其评价结果主要来自于对测试员驾驶行为数据和交互行为数据的综合交叉分析。

实际道路测试指测试车辆行驶于规定的实际道路上时的系统功能和表现,主要针对驾驶辅助类任务、导航类任务、驾驶员检测、语音交互等需要车辆在实际驾驶状态下才能够实现的功能。此外,智能座舱中还有在特定场景下才会被激发的智能功能,如远途自动规划加油站/充电站、到达目的地主动推荐兴趣点等,对于这类功能的评价也需要在实际道路测试中才能完成。

3.3 面向用户体验的评价体系

3.3.1 高效维度评价指标体系

高效维度的指标主要参考“ISO-9241-210 人机系统交互工效学标准”交互可用性中的绩效(effectiveness)和效率(efficiency)。其中,绩效包含准确性和完整性,效率包含用户完成任务所需资源。因此, 将高效维度的指标分为主要采用客观评价的操作绩效和可同时采用主观和客观评价的感知绩效,操作绩效和感知绩效两个二级指标分别对应上述标准中的绩效和效率,二者又可以同时作为彼此的补充和验证指标。

操作绩效主要包括任务完成程度、任务完成速度、任务完成准度。任务完成程度即任务完成的完整性,用户成功完成任务的数量或百分比可作为该方面的客观评价指标,反之,用户在完成任务过程中的失败数量或百分比也可作为评价指标。任务完成速度即完成任务所需时间资源,常用任务的持续时间、手指移动距离等作为评价指标,一般还会对任务的交互模式或功能等加以限制以便量化处理。任务完成准度即任务完成的准确性,这是对误差的量化评价,这种误差根据不同的交互任务有不同的量化指标,包括空间精度误差、信息检索误差、完成任务过程中的非必要操作步骤数等。

感知绩效主要包括易感知、易理解、易学习。易感知的主观评价反映了用户能否有效发现完成系统交互任务所需的关键元素、信息、功能入口。 感知是用户对交互体验过程中视觉、听觉等所有模态的信息的获取阶段。如座舱交互主要涉及到的视觉感知中,用户在不同注视点之间的眼跳数据,可以反映在执行任务过程中,用户在界面中搜索查找所需信息眼球移动的轨迹,可作为易感知的客观评价指标。易理解的主观评价反映了用户在执行任务过程中的认知努力。在操作任务中,一般认为,目标信息被注视的时间越长,说明用户需要花费更多的认知资源对其进行加工处理,注视持续时间可用于测量用户的认知理解过程。注视持续时间越长,用户理解效率越低,交互系统的易理解性越差。易学习的主观评价体现在用户快速掌握并使用交互系统完成任务的能力,客观评价可包括用户学习时间、次数、眼动、脑电等行为生理指标。

图片

图片

表 3-3  高效维度评价指标

分享到:
 
反对 0 举报 0 收藏 0 评论 0
沪ICP备11026917号-25