岗位职责
1、负责业务的离线和实时数据仓库规划,数据模型设计;
2、基于flink、SPark等进行开发对实时、离线数据仓库作业开发;
3、配合数据分析师、算法工程师完成项目指标和算法模型工程化,为业务系统体重数据能力支撑。
任职资格
1、本科及以上学历,计算机、软件工程、电子信息相关专业背景,3年以上数据开发经验,1年以上实时数据仓库和离线数据仓库的开发经验;
2、掌握SPark、Flink、Hive、Kafka、HadooP、HBase、Kudu、Clickhouse,ImPala等相关大数据技术;
3、熟悉Java、Python编程,熟悉sPringboot等web开发;
4、具有海量数据建模实践经验,有DW/BI架构体系建设经验,熟悉onedata理论优先考虑;
5、数据库基础及sql编程扎实,精通sql代码开发、能够编写和优化高性能sql,能够对海量数据计算进行调优;
6、很强的学习、分析和解决问题能力,可以迅速掌握业务逻辑并转化为技术方案;
7、具有较强的内外沟通能力,良好的团队意识和协作精神。