大数据测试工程师岗位职责

职责描述：
1、根据需求文档、设计文档分析测试点、确定测试范围、制定测试策略、编写测试计划及用例
2、能独立完成测试任务并对所在项目进行测试过程和测试方法的持续改进
3、独立构建测试数据进行数据测试
4、自动化脚本开发
任职要求：
1. 一年以上开发经验或三年以上测试经验，有大数据测试经验优先；
2. 精通SQL，能熟练进行测试数据的增删改查；
3. 具备较高的质量意识、分析问题和处理问题能力；能独立完成项目测试；
4、熟悉常见软件测试流程、方法、Linux命令行和脚本使用
5、具有较强的执行力，工作细心，耐心，有责任心，有较强的沟通能力和团队协作精神；
6、善于发现问题，有较强的学习能力

岗位职责：
1. 参与金融数据类产品的全流程，包括参与需求分析、设计评审，制定测试计划和用例，编写测试脚本，进行缺陷跟踪和软件质量分析等；
2. 根据业务需要开发大数据相关测试工具，自动化脚本等；
3. 负责日常部署、维护大数据测试环境。
任职要求：
1、具有 3 年及以上大数据测试工作经验；
2、熟悉Hadoop、Spark、Hbase、Kafka等分布式开源项目及工作原理；
3、熟悉数据仓库理论架构，熟悉测试理论方法，能够针对不同测试方案的设计。
4、掌握SQL语言，熟悉至少一种脚本语言（shell/python等），具备自动化测试优先。
5、了解Hadoop生态圈技术，主要包括sqoop、hive、hdfs等组件。
6、有大数据测试工具开发经验优先。

岗位职责：
一:大数据平台测试体系建设
1、负责险资投资板块大数据平台(Hadoop/Spark/Flink/Hive等生态)的功能测试、性能测试及稳定性测试。
2、参与构建自动化测试框架，提升大数据任务(ETL/数仓建模/实时计算)的测试效率
二:数据质量与准确性验证
1、负责核心投资业务数据在大数据链路中的数据一致性、完整性、准确性校验。
2、设计并执行数据比对方案，确保源系统(核心业务系统)到数仓(ODS/DWD/DWS/ADS)的数据转换逻辑正确无误。
三:数据链路监控与异常排查
1、参与大数据任务调度(如Airflow/DolphinScheduler)的测试，监控任务运行状态。
2、协助定位数据延迟、数据丢失、数据倾斜等大数据常见问题，并推动开发团队修复。
四:性能与容量规划测试:
1、针对海量数据场景(亿级/十亿级数据量)，进行大数据计算任务的性能压测，评估集群资源负载，为容量规划提供数据支持。
任职要求：
一:学历与经验:
1、本科及以上学历，计算机、统计学、数学或相关专业。
2、5年以上软件测试经验，其中至少1-2年大数据领域测试或数据开发测试经验。
二:技术技能:
1、SQL精通:能够编写复杂SQL进行数据验证、数据比对和异常数据分析
2、大数据组件:熟悉Hadoop、Hive、Spark、Fink、Kafka等至少一种主流大数据组件的原理及常见故障排查
3、编程能力:熟练使用Python、Java或Scala中至少一种语言，具备编写自动化测试脚本的能力。
4、测试工具:熟悉JMeter、LoadRunner 或自研大数据性能测试工具;了解 CI/CD流程(Jenkins/GitLab C).
三:业务理解:
1、有险资投资行业(产险/寿险)，统信监管报送相关数据测试经验者优先。
2、熟悉数据仓库分层理论(ODS/DWD/DWS/ADS)，理解数仓建模基本概念。
四:软性素质:
1、具备极强的数据敏感度和逻辑思维能力，对数据错误有“零容忍”态度。
2、具备良好的沟通协调能力，能在技术团队与业务团队之间有效传递信息。
[加分项]
有平安集团内部大数据平台使用经验或熟悉平安内部数据标准者优先。
熟悉数据治理相关工具(如Atlas、DataHub)或数据质量平台(如Great Expectations、Deequ)者优先。
有实时数仓(Real-time Data Warehouse)测试经验者优先