22人订阅,更新于2026.11.18,大数据工程师是做什么的?有前途吗?工资待遇怎样?62.8%的岗位拿¥10-30K/月。招聘要求高吗?学历本科最多占74.9%,经验3-5年最多占34.1%。应该学什么专业?数学与应用数学专业、应用统计学专业、统计学专业等。
工作职责】
职位概述:参与企业级应用系统的开发和维护。该职位需要具备扎实的开发技能,熟悉容器化技术,并有丰富的数据库设计和优化经验。岗位职责:1、根据业务需求,独立完成企业级应用的功能模块设计与开发;2、负责系统架构设计、数据库设计及性能优化;3、使用容器化技术进行应用部署和运维;4、参与代码审查,确保代码质量和系统稳定性;5、协作解决系统运行中的技术问题任职资格:1、开发经验:具备3年以上企业应用开发经验,熟练掌握主流框架(如、、等),熟悉异步编程、多线程多进程编程,具备设计和开发能力,熟悉单元测试和集成测试编写,能够独立完成功能模块的设计与开发;2、容器化技术:熟悉、等容器技术框架,具备容器镜像构建、服务编排、集群管理经验,熟悉、等云原生工具,有实际项目部署和运维经验,了解微服务架构和流程;3、数据库经验:丰富的数据库存储经验,熟练掌握或其他大数据存储系统(如、、等),具备数据库设计、优化和调优能力,熟悉优化、索引设计、分库分表策略,了解数据库高可用和灾备方案;4、其他技术要求:熟悉操作系统,具备脚本编写能力;掌握版本控制工具和敏捷开发流程;了解消息队列技术(如、等);熟悉缓存技术(、等)及其应用场景;了解监控和日志系统(如、、等);具备良好的代码规范和文档编写习惯。优先条件:有建模平台或数据分析平台开发经验者优先;有机器学习模型部署或经验;熟悉实时数据处理和流式计算;有金融、交易系统或大数据处理平台开发经验;加分项:具备良好的英文读写能力;有开源项目贡献经验;持续学习新技术并应用于实际项目。
岗位职责:1、负责相关各类网站及平台的数据采集方案设计与开发,搭建高效、稳定的爬虫系统,确保数据采集的准确性、完整性和时效性;2、针对目标平台的反爬机制(如 加密、 验证、验证码、 封禁等),进行 逆向分析与破解,优化爬虫策略,解决采集过程中的技术难题;3、重点负责相关平台的数据采集,深入理解电力行业数据结构与业务逻辑,保障行业数据的有效获取;4、开发新的爬虫项目,监控数据采集状态,及时处理异常情况(如网站结构变更、反爬升级等),确保系统稳定运行;5、配合项目需求,接受短期出差任务, 可完成出差期间的现场工作安排。任职要求:1、本科及以上学历,计算机科学与技术、软件工程、电气等相关专业优先,1-5 年爬虫开发经验;2、精通 编程语言,熟练使用 、、、、 等爬虫框架及工具;熟悉 协议、 协议,能熟练分析请求头、、 等参数;3、熟练掌握 语言,能使用 、 等工具分析网站请求流程,破解 加密、参数签名、动态 等反爬措施;有过复杂网站(如电商、金融、能源类平台) 逆向经验者优先;4、熟悉常见的数据库(如 、)操作,能将采集的数据高效存储与管理;5、接受短期出差(每年出差频次及时长根据项目需求调整),持有 1 及以上驾驶证,驾驶技术良好优先。6、工作认真,责任心强。
说明:工作经验是影响工资水平的重要因素,一般经验越丰富工资越高。大数据工程师工资按经验统计,应届生工资¥14.6K,想知道其他经验工资,请点击查看
数据统计来自近一年 912 份样本,截至 2026-11-18
说明:大数据工程师一个月多少钱?数据统计依赖于各平台发布的公开薪酬,仅供参考。