岗位职责
- 负责携程国际站后台数据仓库(BigQuery和Hive)、数据模型的设计与开发,支持业务的发展;
- 基于BigQuery和Hive的数据仓库ETL流程的优化及解决ETL相关技术问题;
- 基于BigQuery和Hive的数据仓库自动化工具和脚本开发;
- 支持数据分析师完成数据驱动的业务需求;
- 数据仓库元数据的维护和分析,挖掘数仓中存在的问题并加以改进,包括数据安全、数据质量、性能优化等问题;
- 业务相关数据指标自动化计算;
职位要求
- 计算机、数学或统计等专业,本科以上学历;
- 精通数据仓库建模和ETL开发,熟悉数据仓库主题域和分层方法;
- 精通SQL语言,熟练掌握Python、Java、Shell等一种或一种以上编程语言,有编写UDF函数经验;
- 具备高业务敏感度,能够快速学习、理解业务;
- 有企业级数据中台工作相关经验。熟悉数据血缘追踪,数据质量监控等数仓元数据和平台的概念和使用;
- 熟悉批量离线式分布式并行计算技术(如Hadoop、MapReduce、Hive、Spark等),熟悉公有云数据仓库产品优先(如BigQuery、Redshift、Snowflake等);
- 英文听说读写熟练,有海外学习、工作背景优先;
- 有较强逻辑思考能力强,问题分析能力,思维缜密;
- 勤奋好学,良好的表达沟通能力、团队合作及文档交付能力;
- 忠诚、勤奋,对工作有责任感和团队精神,能够在压力下工作;
- 2年以上互联网行业数据仓库相关工作经验。