大数据平台开发

发布时间: 2025-08-03 01:45 工作地点: 北京 薪资: 49-63万

必备条件:
1、本科211/985学历优先;
2、近5年3年以上大数据研发经验;
优先条件:
近5年3年以上大数据研发经验;
岗位职责:
1、包括实时数据采集计算、流式湖仓建设、现有平台架构调优、业务场景建模、数据产能提质增效。

2、应用场景:BI、OLAP、用户画像、群体分析、数据驱动等。

3、解决方案:基于Kafka、Flink的数据采集、流转、实时ETL平台建设;

基于Kyuubi、Trino、Doris、Hive、Hudi、Ceph、S3的流式湖仓建模、应用、维护;

4、Redis、MongoDB、ClickHouse、TiDB、Mysql等数据存储技术的应用。
任职要求:
技能要求:

1、SQL专家,精通复杂查询、性能优化、不同引擎SQL特性(必需);

2、精通数仓与数据湖架构设计及业务建模(必需);

3、熟悉ClickHouse、Doris、Trino、Kyuubi、Spark、Hive、S3等多类存储、计算引擎(必需)、掌握Python语言(必需)、掌握Kafka、Flink流计算平台、掌握Java/Scala语言


岗位要求:

1、本科211/985学历优先;

2、近5年3年以上大数据研发经验;

简历提交评估