职位描述
岗位职责:
1、负责开发数据入湖,完成ETL集成方案设计、开发、测试。
2、负责研发数据宽表和api的开发、测试、发布。
岗位要求:
1、熟悉数据分层架构,包括数据层、数据存储层、数据处理层、数据服务层等,能够合理规划各层的数据存储和流转,确保数据一致性、完整性和安全性。
2、掌握数据仓库技术和相关工具,如:Hive、gauss、知识图谱等,能够设计和开发高效的数据抽取、转换和加载流程、实现数据从原系统到数据底座的集成。
3、能够开发数据处理脚本、数据服务接口、和数据质量监控程序等
4、熟悉数据清洗、转换、和标准化技术,能够运用数据挖掘和机器学习算法进行数据预处理和数据分析,提高数据质量和价值。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕