负责实验平台(分流SDK、流量模型、实验分析报告等)的全链路质量保障工作,深入理解实验分流机制、流量分配逻辑及实验生命周期,制定覆盖功能、稳定性、一致性与性能的测试策略与保障方案;
主导实验平台核心模块(如分流服务、配置管理、指标计算、实验分析等)的功能、边界、异常及高可用性测试,确保实验结果的准确性与系统运行的稳定性;
构建并优化实验平台自动化测试体系,包括分流一致性验证、数据埋点对齐、指标口径校验等关键场景的自动化覆盖,提升测试效率与回归质量;
深度参与实验平台稳定性建设,识别潜在风险点,推动监控告警、容灾演练、故障自愈等质量左移措施落地,保障平台在高并发、大规模实验场景下的可靠运行;
对实验平台线上问题进行根因分析、复盘总结,并推动架构、流程或工具层面的改进,持续提升平台健壮性与用户体验。
能力要求:
计算机及相关专业背景,3-5年测试开发或质量保障经验,有大型实验平台或数据平台相关测试经验者优先;
深入理解A/B实验原理、分流算法(如分层分流、用户/设备粒度分流)、正交实验设计及统计显著性判断逻辑;
熟悉实验平台典型技术栈,如配置中心、实时计算(Flink/Spark)、OLAP引擎(StarRocks/MaxCompute/Hologress)及埋点上报链路,具备端到端链路排查能力;
精通至少一种编程语言(Java/Python/Go),能独立开发测试工具、自动化脚本及稳定性验证框架;
具备良好的业务抽象能力和质量敏感度,能从业务目标出发反推质量保障重点,推动质量内建与效能提升。