汽车驾驶自动化系统通用语料库 第 4 部分：语料数据清洗

【适用范围】 本文件规定了汽车驾驶自动化系统通用语料库语料数据清洗的流程，包括数据预处理、数据清洗和质量等方面的要求。本文件适用于企业、研究机构对汽车驾驶自动化系统通用语料库的研究、开发、维护、应用、评估等工作。 【主要技术内容】 本文件为《汽车驾驶自动化系统通用语料库 第4部分：语料数据清洗》，规定了语料数据清洗的流程，包括数据预处理、数据清洗和质量等方面的要求。数据预处理部分，规定了数据格式统一、完整性校验、数据抽帧的处理要求和问题处理规则，将待清洗的数据资源转换为统一、可解析、可追溯的结构化格式数据集。数据清洗部分，规定了噪声数据、重复数据、静止数据、无效/低价值数据等类型的清洗要求和问题处理规则，对高价值数据进行筛选。质量要求部分，规定了语料数据质量检验应包含完整性指标、准确性指标、一致性指标。本文件适用于企业、研究机构对汽车驾驶自动化系统通用语料库的研究、开发、维护、应用、评估等工作。