大数据开发工程师-流式计算方向

字节跳动推荐架构团队实时计算方向，负责字节跳动旗下超10亿用户产品推荐系统架构实时计算系统的设计和开发，保障系统稳定和高可用；抽象通用实时计算系统、构建统一的推荐特征中台，实现灵活可扩展的高性能存储系统和计算模型，为推荐业务实现先进的消重、计数、特征服务等实时数据系统；

1. 为大规模推荐系统设计和实现合理的实时（流式计算）数据系统；
2. 设计和实现灵活可扩展、稳定、高性能的存储系统和计算模型；
3. 生产系统的trouble-shooting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性；
4. 打造业界领先的流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。

1. 对流式计算系统有深入的了解，在生产环境有TB级别Flink实时计算系统开发经验，深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块，有Flink源码阅读经验优先；
2. 熟悉常见消息队列原理和应用调优，有Kafka、Plusar、RocketMQ等项目源码阅读经验优先；
3. 熟悉Java、C++、Scala、Python等编程语言，有强悍的编码和 trouble-shooting 能力；
4. 乐于挑战没有明显答案的问题，对新技术有强烈的学习热情，有PB级别数据处理经验加分；
5. 有数据湖开发经验，熟悉Hudi、Iceberg、DeltaLake等至少一项数据湖技术，有源码阅读经验优先；
6. 熟悉其他大数据系统经验者优先，YARN、K8S、Spark、SparkSQL、Kudu等；
7. 有存储系统经验加分，HBase、Casscandra、RocksDB等。