一、岗位职责
1、负责大数据分析需求设计和开发，承担数据抽取、清洗、实时统计及离线数据处理等程序开发
2、参与或负责大数据仓库的设计、开发、维护，通过数据仓库和数据治理体系有效管理和组织PB级数据
3、参与或负责数据服务和大数据产品研发，通过对数据理解，发掘数据价值
4、负责大数据存算分离方案的技术研究与开发实现，包括特性设计、开发、测试、上线、维护，能够devops全栈；
5、负责维护大数据解决方案的跟进，基于用户的体验和数据持续进行优化，并对现网平台的质量负责
二、任职要求
1、有大数据系统架构设计开发、重大模块设计及开发经验，对大数据的技术趋势和SOA模式、微服务模式有较深理解
2、掌握C++、Java、Python等一种或多种编程预研，熟悉Linux基本操作和Shell脚本使用
3、了解数据仓库建设理论与方法、具备丰富的实践经验
4、精通SQL，能够处理海量数据，有较好SQL性能调优经验，熟悉hive、druid、mysql、pg等至少一种数据库
5、熟练使用Storm、Hadoop、Spark、HDFS、Hbase、Kafka、ElasticSearch、solr等
三、加分项
1、有3年以上大数据项目经验，了解数据仓库相关理论知识
2、深入研究大数据框架的运行机制、实现原理、源码经验
3、熟悉公安行业业务