大数据平台开发工程师

岗位描述

1. 负责大数据离线计算平台的建设与优化，保障大规模离线计算任务的稳定性与性能。
2. 基于 Iceberg / Lance 构建湖仓一体架构，支撑海量多模态数据资产的统一管理与治理。
3. 推动数据湖与 AI、数据分析等业务场景的深度融合，实现数据价值的落地转化。
4. 参与核心计算组件演进、性能调优与疑难问题攻关。
5. 3-5 年大数据开发经验，熟悉离线计算引擎的存储、调度、执行等底层原理。
6. 精通 Hadoop、Spark 等核心大数据生态技术栈，具备大规模集群调优经验。
7. 熟悉 Iceberg / Lance 等数据湖技术及湖仓一体架构，理解其存储格式、元数据管理与表格式原理。
8. 熟悉…