大数据研发岗位职责

职责描述：
1、数据中台产品的研发工作；
2、基于数仓的大数据平台系统设计、开发、维护；
3、承担公司大数据相关项目的需求分析、开发、实施。
任职要求：
1、计算机类本科或以上学历；
2、3年以上相关工作经验，熟练掌握Java或Scala或python编程语言；
3、熟练使用Hadoop、Spark、flink、Hive、HBase，kafka进行应用开发；
4、熟悉搜索引擎，例如Impala，Presto，Elasticsearch，kylin,phoenix等；
5、大数据其他组件：datax,flume,sqoop等数据同步
7、了解数据安全ranger，kerberos等
5、具备基本的Hadoop运行环境的运维管理经验；
6、有实际的大数据应用工程开发经验；
7、熟悉金融领域相关知识或有金融系统开发经验的优先。
8、熟悉数据中台开发，数据质量，数据血缘，数据安全，数据地图等优先

岗位职责：
1、负责搜索推荐服务数据体系的研发设计和建设，通过数据产品和数据服务等方式，赋能商家、运营的业务增长；
2、负责搜索推荐服务的数据建设、数据服务化的设计、开发、性能优化，为上层分析和挖掘提供可靠、统一的离线+实时数据服务；
3、负责搜索推荐场景的用户画像、正倒排索引开发；
4、负责搜索推荐系统的实时监控大盘、实验指标监控、数据质量监控等功能的开发。
任职要求：
1、计算机相关专业，本科及以上学历，1-5年大数据开发相关工作经验，有电商搜索/推荐系统相关研发经验者优先；
2、熟悉Kafka/Spring/MyBatis/Elastic Search/Redis等相关开发技术；
3、精通Java/Python/Scala等至少一门语言，熟悉Hadoop/Spark/Hive/HBase/Flink等大数据研发工具；
4、对流式计算系统有深入的了解，深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块，有Flink源码阅读经验优先；
5、熟悉常见消息队列原理，有Kafka、Plusar、RocketMQ等项目源码阅读经验优先；
6、优秀的自我驱动力和责任心，良好的沟通表达能力和团队合作精神，学习能力强有责任心，不断挑战自己。
加分项：
1、有出海电商经验者优先，熟悉多国家、多语言环境下的架构设计者优先；
2、大型互联网系统（广告、搜索、推荐）开发经验者优先。

岗位职责：
1. 数据战略与规划：
- 制定并执行企业级大数据战略，结合业务目标设计数据架构、治理框架及长期发展规划；
- 主导数据驱动决策的文化建设，推动数据资产化与商业化应用。
2. 数据平台建设与优化：
- 负责大数据平台（如Hadoop、Spark、Flink、Kafka等）的搭建、运维及性能优化，确保高可用性与扩展性；
- 设计并实施数据仓库、数据湖架构，整合多源异构数据，保障数据采集、存储、处理的效率与安全性。
3. 数据分析与挖掘：
- 主导复杂业务场景下的数据建模与分析（如用户行为分析、风险预测、精准营销），输出可落地的数据洞察与策略建议；
- 推动机器学习、AI技术与业务场景结合，挖掘数据价值并赋能业务增长。
4. 团队管理与协作：
- 领导数据团队（数据工程师、数据分析师、数据科学家等），制定目标并推动高效执行；
- 跨部门协同业务、技术、产品团队，确保数据需求与解决方案的无缝对接。
5. 数据治理与合规：
- 建立数据质量管理体系，监控数据一致性、完整性及准确性；
- 确保数据安全与合规（如GDPR、数据隐私保护），制定应急预案与风险管理机制。
岗位要求：
1. 基本条件：
- 全日制本科及以上学历，计算机、统计学、数学等相关专业；
- 8年以上大数据领域经验，3年以上团队管理经验，主导过大型数据平台或分析项目。
-具备整车、金融、电商等高数据密度行业的实战经验
2. 技术能力：
- 精通大数据技术栈：Hadoop/Spark/Flink/Kafka/Hive等，熟悉云计算平台（AWS、阿里云等）；
- 熟悉数据仓库建模（Kimball/Inmon）、ETL开发及实时流处理技术；
- 掌握Python/SQL等数据分析语言，了解机器学习框架（TensorFlow/PyTorch）及BI工具（Tableau/Power BI）。
3. 核心素质：
- 具备极强的业务敏感度，能将数据洞察转化为商业价值；
- 优秀的项目管理能力，熟悉敏捷开发与DevOps流程；
- 出色的沟通能力，能向非技术人员清晰传达复杂技术概念。