数据开发岗位职责

1、拥有3年以上大数据开发实战经验，具备从需求分析到生产落地的全生命周期实施能力；有金融行业大型数据项目经验者优先。
2、精通Hive SQL，具备处理PB级数据量的复杂逻辑开发经验，擅长SQL执行计划分析与瓶颈调优；精通Spark生态，熟练掌握Spark Core/SQL/Streaming，深刻理解Spark和Hive的集成机制，具备解决内存溢出、数据倾斜等疑难问题的能力；深入理解Apache Tez执行引擎原理，有大规模集群下从MR迁移至Tez/Spark的重构或性能优化成功案例者极佳。
3、熟练掌握Java/Scala/Python中至少一门语言，具备良好的面向编程思想、设计模式应用能力及代码规范意识。
4、熟悉腾讯云的大数据组件及其运维管理；熟练使用Airflow、DolphinScheduler等主流调度工具进行复杂依赖任务的编排与管理。

1、负责异构数据系统和大数据平台（数据中台）的集成与融合
2、负责数据挖掘算法的设计及对海量数据进行挖掘分析
3、负责分布式数据仓库平台、海量数据批处理平台、实时数据处理平台等系统开发
4、参与数据治理方面工作，对平台的技术架构、数据架构等进行方案规划管理；
5、参与海量数据处理，业务数据体系的设计、数据统计、分析及数据建模
6、参与数据平台各系统的性能分析与系统优化，不断提高系统运行效率
7、完成领导交办的其他任务。

岗位职责：
1、根据监管总局的要求，负责EAST解构与数据报送重点项目，需要熟悉EAST监管报送。
2、负责一表通监管明细数据报送与质量提升，保证数据报送稳健运行。
3、负责搭建“一表通”银行端数据区，上线面向总行、一级分行、部分二级分行的行内重点监管监测指标报表和中间层信贷风险类指标报表。
4、负责一表通运营管理系统建设，实现全流程可视化监控，覆盖从数据采集、加工、推送到报送的全过程，推动数据治理优化。
任职要求：
1、了解基础金融知识和银行基本业务概念，熟悉银行业监管报送（EAST、一表通）制度和产品开发。
2、有监管合规意识，能深刻理解监管数据的严肃性和准确性要求，具备高度数据安全与保密意识。
3、熟悉敏捷开发流程敏，如每日站会、迭代计划会、代码评审等敏捷实践。
4、能严格遵守团队编码规范、文档编写标准和版本管理流程。
5、具备丰富的HIVE SQL、SHELL脚本开发经验或者精通GBASE 8A，代码注释规范易懂，并编写相应的单元测试案例。
6、具备独立排查和解决开发测试环境中大部分问题的能力。
7、8年以上大数据开发经验，熟悉银行业监管报送产品开发。
8、具备强烈的责任心和团队协作精神，能积极参与代码互审。
9、学信网可查本科及以上学历；
10、有相应年限的社保记录.
11、能接受现场面试。