部门介绍
数据平台是字节跳动数据中台部门,为公司多业务线(包括抖音、电商、直播和生活服务等)提供一站式大数据解决方案,涵盖数据的生产、清洗、传输、建模、分析等全流程链路,提供数据开发、实验评估、画像标签、增强分析等多元场景解决能力。同时,数据平台部门也致力于把字节跳动积累沉淀的数据中台解决方案做商业化输出,让更多行业能够应用我们的产品能力构建自己的数据中台。在火山引擎上,我们提供了营销增长套件,数据中台等相关产品解决方案,为泛互联网、金融、汽车、新零售等行业提供了行业解决方案。
岗位职责
- 探索并实现基于AI驱动的数据集成平台,打造面向全球业务的多机房数据同步解决方案;
- 负责面向海量数据的异构数据源同步系统,提供离线、实时、CDC、数据湖等场景下的全域数据集成解决方案;
- 推进底层引擎架构的优化和迭代,打造行业内领先的流批一体、湖仓一体数据同步引擎;
- 参与团队的技术决策,持续推动平台架构优化,提升系统的稳定性、可扩展性和易维护性;
- 关注业界大数据开发工具和产品最新进展,推动相关技术在团队内的落地与实践。
职位要求
- 计算机、软件工程、数据工程等相关专业本科及以上学历;对技术有热情,愿意不断尝试新技术和业务挑战;
- 计算机基础:拥有扎实的计算机基础,熟悉Java生态以及Spring框架,对并发编程、性能调优有较好理解和实践,追求高标准的工程质量;
- 系统工程与架构能力:熟练使用大数据生态相关中间件;具备面向海量数据处理的分布式系统设计能力;拥有LLM应用和工程落地实践经验;
- 大数据生态认知:对大数据生态体系比较熟悉并有相关实践经验,包括但不限于存储与计算(如Hadoop,Spark,Flink,Hive,Presto、ClickHouse等)、数据湖引擎(如Paimon,Hudi、Iceberg等);向开源社区贡献过patch者优先;
- 产品与协作:具备较好的用户和产品意识,能从业务价值出发思考技术方案,拥有较好的沟通与跨团队协作能力,能高效推动跨团队项目落地。