高级大数据开发岗位职责

工作职责：
1.构建大规模分布式大数据服务平台，包括海量多媒体数据存储、离线/实时计算、数据分析和数据挖掘；
2.针对各种业务增长和业务需求，设计、部署、调优大数据组件；
3.参与软件工程系统的设计、开发，编写软件说明书 ；
4.跟踪行业动态，引入新的技术组件，推广新技术应用。

能力要求：
1.计算机科学/自动化控制相关专业，本科及以上学历，5年及以上平台架构经验；
2.具有大规模分布式系统设计、开发、维护经验，有故障处理能力
3.精通一个及以上的常用开源分布式系统，包括Hadoop/Hive/Spark/Flink/HBase/Kafka/ElasticSearch；
4.精通Shell/Python/java中至少一种语言；
5.对海量存储、性能调优、平台可靠性有深入研究；
6.良好的沟通能力和团队合作精神；
7.快速学习掌握新技术。

加分项：
1.精通实时大数据处理系统；
2.有业务架构经验；
3.有数据安全架构经验；
4.开源工具社区开发经验；
5.英文文档阅读能力。

岗位描述：
1、负责海鼎数据中台技术架构、核心开发工作，参与构建离线/实时数据处理平台，为业务决策和运营改进提供数据支持
2、深入理解业务，数据技术驱动产品发展，能够负责独立的数据核心系统，并做出合理的技术规划，驱动产品技术落地
任职要求：
1、5年及以上相关的数据研发经验，对数据治理、数据建模、数据分析等有深刻认识。
2、较为丰富的数据仓库及数据平台的架构经验，精通数据仓库建模及ETL设计开发；有较为系统的海量数据性能处理经验；
3、有从事分布式数据存储与计算平台应用开发经验，有doris、greenplum、Flink 等离线/实时计算数据研发经验者优先。
4、具备较扎实的理论基础和工程能力，具备一定的JAVA、Python语言的开发能力，具备机器学习算法能力优先

1. 5年以上大数据平台和数据仓库建设经验，有数据治理、数据分析、数据建模、数据仓库的设计及实施经验优先；
2. 精通Linux系统，熟悉Shell/Python脚本编写，有脚本调优经验的优先；
3. 熟练使用Java、Scala等语言，有基于Spark、Hadoop、Flink计算框架的大数据发开经验，有性能调优经验者优先；
4. 熟悉Java的基础技术体系，包括JVM、类装载、线程、并发、IO资源管理、网络；
5. 熟练使用常用Java技术框架，对新技术框架有敏锐感知能力；深刻理解面向对象、设计原则、封装抽象；
6. 熟悉大数据相关技术栈包括Hadoop/Hive/HBase/Spark/Flink/Kafka/Zookeeper/Sqoop等；
7. 对ETL、数据管理、数据治理有一定的理解和认识，有ETL数据处理方案的设计与实施经验、有数据治理经验；
8. 精通一种以上主流数据库MySQL、Oracle、Postgres等，熟练使用SQL，对SQL性能调优有一定的理论及实践经验；
9. 具备代码架构设计能力优先；
10. 对大型项目，海量数据处理有过实际项目开发经验者优先。
11. 有Java服务端开发经验者优先；
12. 具备较强的逻辑思维能力、学习创新能力、数据分析能力，以及良好的沟通技巧和团队合作能力。
职位福利：五险一金、绩效奖金、餐补、节日福利