岗位职责
1、架构设计:负责大数据相关产品的系统设计、架构优化、数据模型抽象等工作,提供稳定高效的数据服务能力,支撑产品侧的敏捷迭代和业务侧的数据分析服务;
2、数据治理:主导数据工作,包括数据采集、数据接入(多数据源)、数据存储、数据清洗、质量分析、数据开发等;
3、技术攻关:负责指导工程师进行技术验证与实现,核心技术问题的攻关,解决项目开发过程中的技术难题;
4、问题处理:跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;
5、技术研究:根据公司项目和业务发展特点,负责研究相关大数据前沿技术。
任职要求
1. 本科学历及以上,计算机相关专业,7年以上工作经验,不少于5年的大数据领域架构设计或研发管理工作经验;
2. 对大数据基础架构和平台、数仓建模、数据治理有深刻理解;
3. 精通Hadoop、Spark、Flink等框架,能够独立搭建离线、实时大数据平台;
4. 精通主流的数仓架构设计,熟悉Hbase、Hive、Doris、PostgreSQL等,理解HOLAP,可以进行海量数据模型的设计及开发;
5. 熟悉大规模数据采集技术,对爬虫、群控等技术方案有深入了解;
6. 有良好的数学基础,熟练掌握机器学习、深度学习基础知识;
7. 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力。