职位详情
数据湖开发工程师
1万-2万
云网易通信息技术(河南)有限公司
北京
1-3年
大专
07-29
工作地址

合生财富广场

职位描述
1. 学历要求:专科及以上学历,计算机科学、信息技术等计算机相关专业;
2. 工作经验:至少2年及以上数据湖建设经验,参与过数据湖的离线分析开发工作;
3. 技术能力:
(1) 熟悉Hive的使用,能够编写高效的HSQL查询语句;
(2) 理解Hive的内部原理,有Hive优化经验,能够针对复杂查询进行性能调优;
(3) 有实际的数据湖架构设计和管理经验,能够处理大规模数据集;
(4) 有实际的指标明细层设计开发经验;
4. 个人素质:
(1) 具备良好的逻辑思维能力,能够独立分析和解决问题;
(2) 有一定的抗压能力,能够接受项目紧张时期的加班;
(3) 良好的团队合作精神和沟通能力,能够与团队成员有效协作。
四、岗位职责:
1. 参与公司数据湖的建设,做过数据湖实施;
2. 参与数据湖的离线分析开发,编写HSQL进行数据提取、转换和加载(ETL);
3. 对现有Hive查询进行性能分析和优化,提高查询效率;
4. 支持数据分析和报表开发,为业务部门提供数据支持。
5. 参与数据治理和质量管理,确保数据湖中的数据准确性和可靠性;

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请