ETL – 测试人员的角色
ETL 测试人员主要负责验证数据源、提取数据、应用转换逻辑以及将数据加载到目标表中。
ETL 测试人员的主要职责如下。
验证源系统中的表
它涉及以下操作 −
- 计数检查
- 将记录与源数据进行核对
- 数据类型检查
- 确保没有加载垃圾数据
- 删除重复数据
- 检查所有键是否到位
应用转换逻辑
在加载数据之前应用转换逻辑。它涉及以下操作 −
数据阈值验证检查,例如,年龄值不应超过 100。
记录计数检查,在应用转换逻辑之前和之后。
从暂存区到中间表的数据流验证。
代理键检查。
数据加载
数据从暂存区加载到目标系统。它涉及以下操作 −
从中间表到目标系统的记录计数检查。
确保关键字段数据没有缺失或为空。
检查聚合值和计算度量是否已加载到事实表中。
根据目标表检查建模视图。
检查增量加载表是否已应用 CDC。
维度表和历史表中的数据检查。
根据加载的事实和维度表并按照预期结果检查 BI 报告。
测试 ETL 工具
ETL 测试人员还需要测试工具和测试用例。它涉及以下操作 −
- 测试 ETL 工具及其功能
- 测试 ETL 数据仓库系统
- 创建、设计和执行测试计划和测试用例。
- 测试平面文件数据传输。