大数据开发工程师

AI 摘要智能生成

参与公司数据中台的架构设计、开发与维护

职位描述

1. 参与公司数据中台的架构设计、开发与维护，搭建高可用、高并发的大数据处理集群； 2. 负责海量业务数据的采集、清洗、存储、处理与分析，构建数据仓库与数据湖，保障数据质量与数据时效性； 3. 基于大数据技术，开发分布式数据处理任务与实时计算引擎，支撑业务数据分析与算法模型落地； 4. 与业务团队对接，梳理数据需求，提供数据接口与数据服务，支撑业务数字化转型与智能决策； 5. 负责数据中台平台的性能优化、故障排查与安全保障，持续提升平台的稳定性与处理效率。

任职要求

• 1. 熟练掌握Java/Scala/Python至少一种编程语言，熟悉Linux操作系统与Shell脚本开发；
• 2. 深入理解主流大数据技术栈的原理与应用，有相关项目开发经验；
• 3. 熟悉数据仓库建模理论，掌握模型设计，有海量数据仓库建设经验优先；
• 4. 了解MySQL、Redis、ClickHouse等数据库技术，有SQL优化与数据调优经验；
• 5. 具备良好的逻辑思维能力、沟通协调能力与问题解决能力，有轨道交通、工业大数据相关项目经验者优先。