职位描述
职位表述:
1、数据仓库和大数据处理模块的开发和维护,服务日益增长的业务和数据量;
2、数据清洗、加工、分类等开发工作;优化数据模型和ETL性能,参与数据治理,确保数据质量;
3、为项目提供大数据分析任务的方案设计及文档编写的工作。
4、响应各业务团队的数据需求,优化需求响应效率;
任职资格
1、本科及以上学历,5年以上数据研发经验;
2、熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理,数据体系和数据价值的建设及优化;
3、掌握数据管理治理的相关理论,熟悉数据治理、数据标准、企业级数据建模、主数据、元数据管理等方法论;
4、熟悉大数据架构,具备实时或离线数据研发能力,熟悉Hadoop、HDFS、MapReduce,Yarn、Hive,Kafka,Spark,Storm,Hbase,Flink、clickhouse、starrocks等相关技术并有实际生产经验;
5、具备快速学习能力、跨团队沟通协作能力,对数据敏感,有较强的逻辑思维能力和解决问题能力。