岗位职责(按要求重要程度由强到弱填写)
1、根据产品的设计要求,可独立完成功能模块的设计、编码与维护;
2、能够独立输出相关技术文档;
3、负责相关业务数据仓库的数据治理,对于数据质量,数据成本负责;
4、基于Seatunnel/Flink等平台建设离线/实时数据仓库;
5、负责数据模型的设计,etl实施,etl性能优化以及相关技术问题的解决;
6、负责面向业务的报表,数据提取工具等开发工作;
7、配合项目经理完成公司任务目标。
其他要求:
1)、熟悉大数据相关技术:Kafka/Flink/Hadoop/Doris等;
2)、熟练使用Java语言;
3)、具备数据仓库理论知识,掌握主流数据库管理和应用,精通SQL;
4)、了解统计以及数据挖掘、机器学习、人工智能技术,会使用关联分析、分类预测、聚类分析等常用分析方法;
5)、有分布式平台开发经验优先。