岗位职责
- 负责海量大数据处理、解析、分析、挖掘、研发及优化工作;
- 负责基于大数据体系的数据模型设计、数据分层架构建设与数据资产管理,支撑EB级数据的规范化、资产化管理;
- 负责元数据管理、数据血缘、数据质量监控、数据标准等核心数据资产模块的研发与落地,提升数据可信度与可用性;
- 参与大数据AI copilot、AI自动取数、AI自动数据分析,通过AI+大数据的力量,让数据价值最大化。
职位要求
- 本科及以上学历,计算机、统计、数学等相关专业优先;
- 熟悉大数据、数据仓库、分布式架构技术理论;具备大数据开发经验者优先;
- 熟练处理数据模型、数据ETL、sql、udf及存储管理,具备数据治理经验的优先;
- 对大数据技术及开源框架充满热情,具有钻研精神,强自我学习能力;
- 对AI、AI应用框架有一定的理解,使用python编程,并有实际LLM或者agent应用探索经验。