大数据开发工程师(数仓方向)薪资20-45k/远程
UnknownCompany
岗位摘要
该职位招聘大数据开发工程师,专注于数据仓库方向,要求5年以上大数据开发经验及3年以上数仓建设经验。核心职责包括设计维护大数据平台、开发ETL流程、构建企业级数据仓库分层模型、优化数仓架构等。需精通Hadoop、Spark、Flink、Kafka等技术栈,熟练使用Java、Python和SQL,具备数据血缘、元数据管理和数据质量监控能力。职位提供远程工作模式,薪资范围为20-45k。
技能要求:
岗位职责
公司简介 CMC TOP15 CEX直招 岗位职责: 1.设计、开发和维护大数据平台,支持海量数据的采集、存储、处理和分析; 2.根据业务需求,选择合适的大数据技术栈,如Hadoop、Spark、Flink、Kafka等; 3.开发ETL工具和流程,支持数据的抽取、转换和加载; 4.负责企业级数据仓库的架构设计和实施,构建符合业务特点的ODS、DWD、DWS、ADS分层模型; 5.基于Hive、Spark、Flink等框架开发高效稳定的ETL流程,支撑离线和实时需求; 6.建立完善的数据血缘和元数据管理体系; 7.负责数据质量监控体系的建设; 8.优化现有数仓架构,提升数据处理效率和资源利用率。 任职要求: 1.计算机科学、软件工程或相关专业本科及以上学历; 2. 5年以上大数据开发经验,3年以上数仓建设经验; 3.精通Hadoop、Spark、Flink、Kafka等大数据技术; 4.精通Java,熟练使用Python、Shell脚本; 5.精通SQL优化,熟练掌握HiveQL、FlinkSQL; 6.熟练使用 Flink SQL 或 DataStream API 开发实时计算任务; 7.熟练使用DolphinScheduler等开源调度工具; 8.熟练使用Doris或Clickhouse,并能调优; 9.主导过完整的企业级数据仓库项目优先; 10.强烈的责任心,能独立解决复杂技术问题; 11.良好的沟通能力和团队协作精神; 12.对新技术有强烈的学习兴趣和探索精神。 加分项: 1.有数据湖开发经验,如Iceberg、Paimon。 2.熟悉机器学习平台或AI相关技术。 3.有开源项目贡献经验。 4. 金融级系统设计和开发经验 面试流程 线上三面
福利待遇
请直接访问电鸭原帖查看详情并申请