职位描述

1、负责hadoop平台上的数据存储，数据维护和优化；

2、利用hadoop、hive、spark平台、hbase、redis内存数据库、实时分析平台，进行数据统计、分析、挖掘，处理等工作；

3.参与海量数据处理，业务数据体系的数据统计、分析及数据建模；

4、负责大数据应用平台核心模块的详细设计和开发工作；

任职要求：

1、计算机相关专业本科及以上学历；

2、精通关系型数据库（mysqloracle）和非关系型数据库；

3、熟悉linux操作系统，熟练编写shell脚本；

4、熟练使用至少一种ETL工具，具备1年以上实际工作经验具备ETL优化能力；

5、熟悉面向对象的设计和开发过程，能熟练使用Scala 、java 、Python等开发语言；

6、熟悉Hadoop、hive、HBase、Zookeeper、Storm 、Spark等分布式框架，对hadoop源码有深入研究和工作经验者优先；