职位描述
岗位职责:
1.负责大数据平台数据采集分发层、数据计算层(离线处理、实时流处理、实时交互处理)、数据存储服务(DB集群、Nosql集群、文件存储)、 数据访问服务(统一透明的中间件访问服务)等研发工作;
2.参与平台级通用大数据中间件的架构设计,基于公司大数据平台进行应用逻辑开发,并对具体业务场景下复杂海量数据应用的各项性能进行优化;
3.参与大数据分布式应用系统服务器端或客户端软件开发工作(需求开发、故障解决和性能优化等);
4.负责数据接入、数据清洗、底层重构,业务主题建模等工作;
5.负责编制与项目相关的技术文档;
6.协助测试试人员完成软件系统及模块的测试;
7.负责制订和修改技术规程、编制产品的使用、维修和技术安全等有关的技术规定;
8.完成领导交办的其他任务。
任职资格:
1.大学本科及以上学历,计算机等相关专业;
2.5年以上大数据开发经验;
3.熟悉Hadoop生态,具有大型系统的架构设计经验;精通Hadoop大数据平台框架,熟悉Spark Streaming、kafka、Hive、HBase、Impala、Storm、MongoDB等组件的应用设计及开发;熟悉 Java,Python,SQL,Hive, Pig等开发语言
4.具有良好的分析和解决问题能力,对攻关疑难问题具有浓厚兴趣,对新技术有钻研精神,具有良好的团队协作与沟通能力
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕