职位详情
大数据开发工程师 已下线
1万-2万
中环保水务投资有限公司
湘潭
3-5年
本科
01-11
工作地址

潭水大厦

职位描述

岗位职责:

1.设计、开发并维护大数据处理架构,涵盖Hbase、Hadoop 生态系统。

2.深度参与完整的数据仓库设计和建设工作,保障数据的精准性、完整性与一致性。

3.开发和优化数据提取、转换和加载(ETL)流程,提高数据处理效率。

4.熟练运用数据分析工具和先进技术,进行精细的数据清洗、预处理以及建模工作, 为深度的数据分析和挖掘提供坚实支持。

5.灵活利用 Python 语言进行复杂的数据预处理和特征工程。

6.与跨职能团队紧密合作,深入理解业务需求,精心提供切实可行的数据解决方案。

7.严密监控和优化大数据系统的性能,及时、有效地解决各类技术问题和突发故障。

8.迅速处理数据处理任务中出现的内存溢出等棘手性能问题。

要求:

1.持有计算机科学、统计学、数学或相关领域的本科及以上学历。

2.具备至少 3 年的大数据项目开发经验,熟悉 Hbase、Hadoop 生态系统及相关技术。

3.熟练掌握 Java、Python、Scala 等编程语言,熟悉一种及以上的主流数据库

4.精通数据仓库设计原则,熟练运用 SQL 进行复杂查询和数据操作。

5.拥有良好的问题解决能力与团队合作精神,能够在高强度工作环境下独立开展工作。

6.对新兴技术抱有强烈的学习热忱和探索欲望,能够迅速适应业务需求的动态变化。

加分项:

具有在云平台(如阿里云)上的大数据开发经验。

熟悉阿里云的相关数据产品,如 MaxCompute、DataWorks 等。

拥有数据可视化和数据分析报告的丰富经验。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

查看更多相似职位