大数据测试岗位职责

岗位职责：
1. 参与金融数据类产品的全流程，包括参与需求分析、设计评审，制定测试计划和用例，编写测试脚本，进行缺陷跟踪和软件质量分析等；
2. 根据业务需要开发大数据相关测试工具，自动化脚本等；
3. 负责日常部署、维护大数据测试环境。
任职要求：
1、具有 3 年及以上大数据测试工作经验；
2、熟悉Hadoop、Spark、Hbase、Kafka等分布式开源项目及工作原理；
3、熟悉数据仓库理论架构，熟悉测试理论方法，能够针对不同测试方案的设计。
4、掌握SQL语言，熟悉至少一种脚本语言（shell/python等），具备自动化测试优先。
5、了解Hadoop生态圈技术，主要包括sqoop、hive、hdfs等组件。
6、有大数据测试工具开发经验优先。

岗位职责：
一:大数据平台测试体系建设
1、负责险资投资板块大数据平台(Hadoop/Spark/Flink/Hive等生态)的功能测试、性能测试及稳定性测试。
2、参与构建自动化测试框架，提升大数据任务(ETL/数仓建模/实时计算)的测试效率
二:数据质量与准确性验证
1、负责核心投资业务数据在大数据链路中的数据一致性、完整性、准确性校验。
2、设计并执行数据比对方案，确保源系统(核心业务系统)到数仓(ODS/DWD/DWS/ADS)的数据转换逻辑正确无误。
三:数据链路监控与异常排查
1、参与大数据任务调度(如Airflow/DolphinScheduler)的测试，监控任务运行状态。
2、协助定位数据延迟、数据丢失、数据倾斜等大数据常见问题，并推动开发团队修复。
四:性能与容量规划测试:
1、针对海量数据场景(亿级/十亿级数据量)，进行大数据计算任务的性能压测，评估集群资源负载，为容量规划提供数据支持。
任职要求：
一:学历与经验:
1、本科及以上学历，计算机、统计学、数学或相关专业。
2、5年以上软件测试经验，其中至少1-2年大数据领域测试或数据开发测试经验。
二:技术技能:
1、SQL精通:能够编写复杂SQL进行数据验证、数据比对和异常数据分析
2、大数据组件:熟悉Hadoop、Hive、Spark、Fink、Kafka等至少一种主流大数据组件的原理及常见故障排查
3、编程能力:熟练使用Python、Java或Scala中至少一种语言，具备编写自动化测试脚本的能力。
4、测试工具:熟悉JMeter、LoadRunner 或自研大数据性能测试工具;了解 CI/CD流程(Jenkins/GitLab C).
三:业务理解:
1、有险资投资行业(产险/寿险)，统信监管报送相关数据测试经验者优先。
2、熟悉数据仓库分层理论(ODS/DWD/DWS/ADS)，理解数仓建模基本概念。
四:软性素质:
1、具备极强的数据敏感度和逻辑思维能力，对数据错误有“零容忍”态度。
2、具备良好的沟通协调能力，能在技术团队与业务团队之间有效传递信息。
[加分项]
有平安集团内部大数据平台使用经验或熟悉平安内部数据标准者优先。
熟悉数据治理相关工具(如Atlas、DataHub)或数据质量平台(如Great Expectations、Deequ)者优先。
有实时数仓(Real-time Data Warehouse)测试经验者优先

工作职责
1、负责数据相关产品的测试工作，包括数据基建、数据采集、数据处理、数据分析、数据可视化等全流程测试，保障功能和数据链路的准确性、完整性和稳定性。
2、参与产品需求评审和技术方案评审，识别数据口径、链路依赖、重跑回刷、性能稳定性等质量风险，对数据准确性、完整性、一致性、时效性保持高度敏感，主动发现并定位异常数据。
3、建设和维护测试工具和平台，包括不限于接口和UI自动化、SQL自动化验数、数据对账、任务链路巡检、测试数据构造、回归测试集、CI/CD 集成和自动化测试报告。
4、使用AI辅助完成测试工作，包括需求解析、测试点提取、测试用例生成、SQL生成与检查、代码变更影响分析、日志分析、缺陷归因、测试报告总结等。
5、结合业务场景建设AI+自动化测试工具链，提升测试效率、测试覆盖率和问题发现能力。
任职要求
1、1年及以上大数据测试或数据平台测试经验，熟悉大数据相关技术栈；
2、熟悉数据仓库和数据链路测试方法，熟悉SQL，能独立编写复杂查询，具备数据分析和数据验证能力；
3、熟悉常用测试方法和流程，能独立设计测试用例，具备缺陷分析和定位能力；
4、熟悉至少一种编程语言，如 Python、Java、Go 等，能够开发自动化测试脚本、数据校验工具、接口测试脚本或测试辅助工具；
5、具备良好的沟通能力、团队协作能力和学习能力，责任心强，工作细致认真；
6、有大数据平台开发、数据治理、数据安全、数据可视化等相关经验者优先；
7、有性能测试、压力测试、数据安全测试等经验者优先；
8、有AI辅助测试经验，能够熟练使用大模型或AI工具提升测试设计、测试执行、问题定位和测试总结效率。
加分项
1、有自动化测试平台、数据对账平台、数据质量规则平台等测试平台建设经验。
2、有AI Agent、LLM 应用、RAG、工作流编排、智能助手类产品测试经验。