大数据数据湖工程师【2027届校招】
文远知行 · 南山区 / 海珠区 / 北京市 / 徐汇区 · 校招
AI 摘要智能生成
参与自动驾驶大数据湖仓一体架构的开发与维护
职位描述
1. 参与自动驾驶大数据湖仓一体架构的开发与维护,支撑海量多模态数据(日志、点云、视频等)的存储与查询系统建设 2. 协助构建数据湖元数据管理、数据治理及血缘体系,在导师指导下保障数据资产的质量、安全与可追溯性 3. 参与存储引擎性能分析与优化实践,针对自动驾驶业务场景探索读写加速与成本优化方案 4. 开发和维护数据入湖ETL Pipeline及同步工具,提升数据流转效率,保障链路稳定性 5. 与算法团队及平台团队协作,参与标准化数据服务接口开发,支持算法迭代与数据分析需求
任职要求
- 计算机科学及相关领域的本科及以上学历
- 熟练掌握Go/Java/Python/C++至少一种编程语言,数据结构、算法、操作系统、计算机网络基础扎实
- 了解Hudi/Iceberg/Delta Lake等数据湖框架或Spark/Flink等计算引擎的基本原理,有相关课程项目或实习经验者优先
- 具备良好的编码习惯与工程素养,熟悉Linux基本操作,有个人技术博客或开源贡献者优先
- 对自动驾驶或大数据技术有热情,学习能力强,愿意主动钻研新技术,具备良好的团队协作与沟通能力
- 加分项:有ACM/ICPC等算法竞赛获奖经历,或有分布式系统、数据库内核、云原生存储相关的竞赛/科研/实习经历