岗位职责
- 参与主导公司物流大数据平台整体架构演进,构建海量实时计算链路,提升大规模集群的稳定性和性能治理,优化成本管理。
- 设计以数据湖(Paimon / Iceberg / Hudi)为核心的湖仓一体架构,统一离线与实时存储,推动流批一体计算范式落地。
- 演进现有 Lambda 架构为 Kappa / 流批一体架构,统一批流 SQL 开发规范,降低数据冗余与口径不一致问题。
- 面向仓/运/配/末端/跨境场景,落地实时履约监控、大促实时大屏、异常预警、时效诊断等核心应用,
- 紧跟前沿Flink / StarRocks / Paimon 社区演进与业界湖仓实践,主导技术选型、POC 与内外部技术影响力建设。
职位要求
- 本科 8 年+ / 硕士 5 年+ 大数据经验,3 年以上架构师经验;有大规模(PB 级、万级任务)数据平台架构与治理经验。
- 深入理解 Flink 内核与生态(State、Checkpoint、Exactly-Once、SQL 引擎、Agents),社区 Committer 或 Contributor优先,。
- 精通 StarRocks / Doris 架构原理与性能优化,有实时数仓与高并发分析场景落地经验;了解 Presto / Trino / ClickHouse 者优先。
- 熟悉 Paimon / Iceberg / Hudi 等湖表格式,理解流批一体架构设计(Kappa 架构、批流统一 SQL、一致性保障),有 Lambda 向流批一体迁移的实战经验优先。
- 理解物流仓配一体、履约时效、网络规划、大促保障等核心业务,有电商/物流/供应链大数据背景者优先。 符合京东价值观:客户为先、创新、拼搏、担当、感恩、诚信。