潭水大厦
岗位职责:
1.设计、开发并维护大数据处理架构,涵盖Hbase、Hadoop 生态系统。
2.深度参与完整的数据仓库设计和建设工作,保障数据的精准性、完整性与一致性。
3.开发和优化数据提取、转换和加载(ETL)流程,提高数据处理效率。
4.熟练运用数据分析工具和先进技术,进行精细的数据清洗、预处理以及建模工作, 为深度的数据分析和挖掘提供坚实支持。
5.灵活利用 Python 语言进行复杂的数据预处理和特征工程。
6.与跨职能团队紧密合作,深入理解业务需求,精心提供切实可行的数据解决方案。
7.严密监控和优化大数据系统的性能,及时、有效地解决各类技术问题和突发故障。
8.迅速处理数据处理任务中出现的内存溢出等棘手性能问题。
要求:
1.持有计算机科学、统计学、数学或相关领域的本科及以上学历。
2.具备至少 3 年的大数据项目开发经验,熟悉 Hbase、Hadoop 生态系统及相关技术。
3.熟练掌握 Java、Python、Scala 等编程语言,熟悉一种及以上的主流数据库
4.精通数据仓库设计原则,熟练运用 SQL 进行复杂查询和数据操作。
5.拥有良好的问题解决能力与团队合作精神,能够在高强度工作环境下独立开展工作。
6.对新兴技术抱有强烈的学习热忱和探索欲望,能够迅速适应业务需求的动态变化。
加分项:
具有在云平台(如阿里云)上的大数据开发经验。
熟悉阿里云的相关数据产品,如 MaxCompute、DataWorks 等。
拥有数据可视化和数据分析报告的丰富经验。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕