岗位职责

1.负责各种网络数据的采集、清洗与整合，确保数据的质量和可用性；

2.负责大数据的分布式存储和管理，运用技术手段优化数据存储结构；

3.参与大数据项目的开发工作，同时负责项目的维护和更新；

4.负责编写部分设计、开发文档，为项目提供清晰的指导和记录；

5.提供技术支持，包括但不限于数据分析、数据挖掘和大数据技术应用；

6.基于Hive、Spark、Hadoop等计算架构进行大数据开发工作，掌握ETL数据流程设计，以及参与数字化平台的搭建等。

岗位要求

1.计算机科学、软件工程或相关领域本科以上学历，有3年以上的大数据分析开发经验；

2.熟悉大数据Hadoop生态系统，熟练使用主流大数据平台进行数据处理；

3.熟悉分布式系统的基础知识；

4.熟悉Java、Python或Scala语言，有扎实的开发功底；

5.熟悉Spark、Hadoop、Hbase、Flink、Kafka等大数据处理框架；

6.熟悉常见企业数仓设计模型和数据中台架构。

五险+双休，带薪年假