工作职责:
1、参与飞猪旅行行业中业务系统的数据模块开发,建设面向业务及研发构建分析型数据平台。
2、负责数据资产平台相关的数据管理和开发工作,如设计埋点采集方案、数据清洗、业务逻辑还原、海量数据即席或预计算、数据安全和使用权限规范的制定,并推动实施落地,提供数据解决方案。
3、推进湖仓一体架构演进,引入数据湖技术,设计混合计算架构,提升实时与离线任务的开发效率、可维护性及迭代敏捷性。
4、参与AI辅助效能提升。
1、有从事数据仓库领域工作经验,熟悉数据仓库模型设计方法论,并有实际模型设计及ETL开发经验。
2、掌握离线大数据开发技术,如Hive、Spark等等至少其中一种,灵活运用SQL实现海量数据ETL加工处理。
3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等。
4、掌握一门或多门编程语言优先,如Java、Python、shell等,能自主撰写高性能UDF等。
5、有AI大数据平台研发及应用经验者优先。
任职要求:
1、有从事数据仓库领域工作经验,熟悉数据仓库模型设计方法论,并有实际模型设计及ETL开发经验。
2、掌握离线大数据开发技术,如Hive、Spark等等至少其中一种,灵活运用SQL实现海量数据ETL加工处理。
3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等。
4、掌握一门或多门编程语言优先,如Java、Python、shell等,能自主撰写高性能UDF等。
5、有AI大数据平台研发及应用经验者优先。