岗位职责
1、负责大数据平台的搭建和规划;
2、在总体架构设计下,完成大数据产品的设计、搭建、维护和调优,以及技术文档的编写;
3、负责海量数据处理,包括数据的ETL、数据抽取、数据交换、实时计算和数据分析等，并根据业务需求,进行数据和报表的开发;
4、参与指标设计和数据建模,负责将数据模型在系统中实现,并追踪整体产品过程及质量把控;
5、负责系统性能优化,解决各类潜在的系统技术风险,保证系统的安全、稳定、快速运行;
6、负责记录和收集过程中的问题现象和处理方案,形成知识库,并对知识库进行更新。
任职要求
1、计算机或相关专业本科以上学历；
2、5年以上大数据平台开发、设计经验，2个以上大数据类项目开发经验；
3、精通hadoop、hive、hbase、kafka、storm、spark、flink等大数据生态相关技术；
4、熟悉大数据常用 OLAP 引擎的使用以及调优，如 ClickHouse、Doris 等；
5、精通Java、对JVM.类加载.多线程.网络.IO有深入的理解，精通spring.springboot.Mybatis等主流的开源框架；
6、熟悉高可用、高并发、高性能的分布式系统的设计及应用，有丰富的线上调优经验；
7、深度参与或主导过大数据平台、数据治理、数据中台等产品建设者优先；
8、掌握数据分析与数据挖掘算法，如强化学习等。