职位描述
岗位职责:
1、负责项目中数据处理工作,包括分析原始数据,采用合适的算法对数据进行去重、清洗、分析、转换与入库。
2、负责数据仓库的建设,包括设计数据模型、数据架构以及数据抽取和转换规则。
3、整体考虑数仓的架构、性能、存储、调度等问题,确保数据仓库的稳定性和高效性。
4、钻研业务,能够深层次地理解业务数据,为业务决策提供数据支持。
5、参与数据仓库相关技术的选型、研究与应用,提升数据仓库的技术水平。
任职要求:
1、本科及以上,具有三年以上数仓或ETL相关的工作经验,熟悉Flink、Hive等大数据处理工具。
2、精通SQL语句,对SQL查询优化有丰富的经验,熟悉PL/SQL,熟悉存储过程、函数、包、触发器等的开发。
3、了解ETL架构,有一定的ETL开发经验,了解日常作业的部署和调度,至少熟悉一种ETL开发工具,如DataX、Flume、Sqoop、Kettle等。
4、掌握Shell脚本编写,至少掌握一种编程语言如Python、Scala等,Python优先。
5、熟悉关系型数据库理论,熟悉掌握主流数据库系统中的一种或多种,例如Oracle、DB2、MySQL、SQL Server。
6、具备良好的业务理解能力,能够深入理解业务需求,并转化为数据仓库设计。
7、学习能力与沟通:具备持续学习的能力,能够快速掌握新技术;良好的沟通协调能力,能够与团队成员有效协作。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕