数据仓库工程师岗位职责

职责描述：1、负责制定数据项目数据源抽取、数据清洗、数据加工、数据展现执行规范2、负责大数据平台ETL调度设计及架构规划3、负责数据平台模型表、宽表、展现表设计4、负责或参与需求沟通及评审类工作5、负责或参与项目技术管理工作任职要求：1、实施项目于保险行业相关优先；2、实施项目规模大于6人优先；3、实施项目中承担负责人或技术骨干者优先；项目或产品实施类型：1、数据仓库平台；2、大数据平台；3、数据分析平台；4、精准营销分析平台；

岗位要求：
1. 负责业务模型设计
2. 负责离线数据ETL处理
3. 负责数仓业务监控管理，数据质量和及时性保障
任职要求：
1. 2-3年数据开发相关工作经验
2. 熟悉数据仓库设计、维度建模
3. 精通Python、SQL语言，熟悉主流数据库技术，如mysql、postgresql、db2、oracle等其中一种数据库，了解redis等非关系型数据库
4. 熟悉并掌握分布式并行计算技术（如hadoop、mapreduce、hive、spark、hbase、kafka等）
5. 精通flink，Spark任务开发
6. 熟悉数据质量、元数据管理、数据安全管理
7. 良好的沟通能力和协调能力，出色的团队合作精神
8. 工作积极、有较强的责任心

岗位职责：
1. 调研现有系统数据情况，并根据业务模块和需求，参与数据仓库设计与研发，建设电驱/电池工业化核心数据资产；
2. 负责从多个系统及数据源进行数据获取，并根据数据标准同步至数据湖，保证数据的完整性和准确性；
3. 负责不同技术场景下的数据获取和使用开发方案落地（实时、离线）；
4. 负责数据治理体系的完善和实施，打造稳定可靠的数据服务和保障体系；
5. 与业务团队、算法团队、产品团队紧密合作，参与数据产品和应用的数据研发，与产品一起打造极致体验的数据产品。
6. 负责数据化运营，沉淀算法和数据分析思路，协作并推动数据化运营项目落地；
任职要求：
1. 计算机、软件工程、自动化等相关专业本科及以上；
2. 3-7年大数据工程实施经验，数据仓库建模和开发，了解目前主流大数据技术，如流批一体、数据湖等；
3. 熟练掌握hive、spark等大数据工具，具备海量数据加工处理（ETL）相关经验，具备丰富的优化经验。熟练使用Java、Python等语言，熟悉hive UDF开发；
4. 能独立负责业务域数据仓库开发及维护、数据仓库模型、数据报表等工作内容；熟悉数据仓库模型设计，掌握常用数据建模方法；
5. 熟悉数据治理方法论、具备一定的数据治理经验；
6. 较好的业务理解和数据洞察能力，能直接和业务对话，快速进行需求的理解和落地；
7. 具有良好的团队合作和沟通能力，有很强的自驱力，能主动为结果负责；