职责描述:
1、负责自动驾驶数据平台的方案规划与设计,为自动驾驶数据设计合理的数仓分层结构,构建合规、合理的数据存储体系,实现数据的⾼效流转与应⽤;
2、搭建支持海量数据的高效检索分析系统,支持高并发环境下的高性能、高可用;
3、构建数据版本管理和回溯系统,实现数据集迭代过程的可追溯性,满足模型训练需求;
4、持续优化数据质量和效率,提供面向算法的各类数据服务/平台,推动数据驱动模型改善和整体自动驾驶能力的提升;
5、构建训练数据全⽣命周期管理体系,覆盖数据元数据、血缘、质量评估、自动化评估,保障大模型训练的数据可控与高质量。
任职要求:
1. 本科以上学历,计算机相关专业,3年以上工作经验;
2. 2年以上java 开发经验,熟练掌握Spring/Spring Boot/MyBatis等主流开发框架及其运行机制;
3. 熟悉MySQL、MongoDB等数据库,并具有一定DB性能优化经验;
4. 熟悉分布式系统的设计和应用,熟悉分布式、缓存、消息等机制;
5. 沟通良好,善于分析和解决问题,注重团队合作,具有较强的奉献精神;
6. 有基于云平台的数据服务开发经验、海量文件数据的处理经验优先。