职位描述
一、岗位职责:
1. 负责大数据平台的研发、设计、优化及维护工作,含数据开发、调度、数据同步、数据质量、元数据管理等功能;负责大数据平台(如Hadoop、Spark等)的部署、优化及故障排查;
2. 参与数据平台相关技术的研究与攻关,提升数据平台的性能和稳定性;与其他团队紧密合作,提供数据支持,协助完成数据分析和挖掘工作。
二、技能要求:
1. 本科及以上学历,计算机、软件工程、数学等相关专业;
2. 具备3年以上大数据平台研发经验,有大型数据仓库项目实施经验者优先;熟悉Java、Scala、Python等编程语言,具备良好的编程基础和编程习惯;熟悉Hadoop、Spark、Flink等大数据处理框架,了解其原理和优化策略;
3 熟悉数据仓库相关技术,如Hive、Impala、Greenplum等,熟悉Linux操作系统,熟练使用Shell脚本;
4. 具备良好的数据结构和算法基础,能够解决复杂的技术问题;具备良好的团队协作和沟通能力,能承受工作压力,对技术有热情;有以下经验者优先:
a. 具备大数据平台性能调优经验;b. 熟悉数据挖掘、机器学习等相关技术;c. 参与过开源大数据项目者优先。d.熟悉dolphinscheduler者优先。
三、加分项:
1. 拥有大数据相关认证证书;
2. 在大数据领域有专利或发表过相关论文;
3. 具备跨团队协作经验,能够推动项目进度。
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕