大数据开发工程师岗位职责

工作职责
1. 负责大规模 Kubernetes 集群的调优与稳定性提升，解决复杂环境下的性能瓶颈和故障处理；
2. 设计并实现 GPU资源管理与调度方案，提升资源使用率；
3. 熟悉微服务治理和容器编排技术，参与离线混部工作，优化部署流程；
4. 负责Kubernetes 集群的监控和故障排除，保障 AI 平台的稳定运行；
5. 参与云原生大数据与 AI 套件开发，推动创新和优化。

任职资格
1. 本科及以上学历，计算机、软件工程、人工智能等相关专业，3年以上软件开发工作经验；
2. 深入了解 Kubernetes 架构和原理，有大规模集群运维与调优经验；
3. 熟悉云原生生态，如Argo、Kubeflow、Mlflow、Koordinator等，有AI云原生平台项目经验优先；
4. 熟悉 Kubernetes 微服务架构和相关治理工具，如 Istio、Linkerd 等；
5. 对微服务架构和容器化部署有深入理解，能够解决复杂的技术挑战；
6. 熟练掌握至少一种编程语言，如Python、Golang、Java等；
7. 具备良好的沟通协作素质，及解决问题和学习新知识的能力。

职位描述 任职要求：
1. 统招本科及以上学历
2. 具备2年以上大数据开发实战经验
3. 熟悉主流大数据技术栈，如Hive、Hbase、Spark、Kafka、Flume等，能够独立完成实时与离线数据处理开发任务
4. 具备良好的Java编程能力
5. 有Hive运维相关经验者优先
6. 具备一定数据仓库建设实践经验者优先
【工作内容】负责大数据平台的开发与维护，包括数据采集、清洗、存储及分析模块的设计与实现；运用Hive、Spark、Kafka等技术构建实时与离线数据处理流程；参与数据仓库建设与优化，确保数据质量与系统稳定性；进行代码审查与性能调优，提升数据处理效率。
【基本条件】统招本科及以上学历，具备2年以上大数据开发实战经验，熟悉主流大数据技术栈（如Hive、Hbase、Spark、Kafka、Flume等），能独立完成实时与离线数据处理开发任务，具备良好Java编程能力，有Hive运维或数据仓库建设经验者优先。

1.大学本科及以上学历，计算机科学与技术、软件工程等计算机相关专业;
2.有金融、保险、资产管理、投行、金融证券或其它类似行业的数据仓库开发经验优先;
3.有良好的oracle的技术功底及良好的编程习惯和质量意识;或熟悉掌握hadoop、HBASE、Hive、spark等相关开发经验;
4.参加过完整的数据采集、数据清洗、数据建模和分析项目者优先;
5.熟练掌握SQL语法和关系数据库开发、数据模型设计;
6.熟悉基本编码规范，能高效完成编码工作;
7有良好的程序性能调优能力;
8.有良好的沟通能力和团队协作精神。