工作职责
1、数据收集与处理：负责从多种来源收集数据，并进行清洗、转换和加载（ETL）操作，确保数据的质量和可用性；
2、 数据建模与架构设计：根据业务需求设计数据模型，开发相应的数据架构，以支持数据的存储、管理和分析；
3、系统部署与性能优化：独立进行系统的部署和调试，确保其稳定性和可靠性，并监控系统性能；
4、数据安全与质量保证：确保数据的安全性和质量，通过制定和执行数据质量检查和修复策略来保障数据准确性；
5、前沿技术研究与应用：关注大数据技术的发展，研究新方法以提升数据处理能力。

任职资格
1、统招本科或以上学历，计算机科学、数据科学、AI智能、数学、算法等相关专业；
2、熟悉至少一种编程语言，如Python或Java，对大数据处理工具和平台有一定了解，例如Hadoop、Spark等。包括但不限于ETL工具、数据存储系统（关系型、NoSQL、数据湖）、大数据工具（如Apache Spark、Apache Hadoop、Apache Hive）以及云计算（如AWS和Microsoft Azure）；
3、沟通与团队合作：具备良好的沟通能力和团队合作精神；
4、数据分析理解：对数据分析有一定的理解，能够进行算法设计和开发；
5、有相关行业背景或经验者优先考虑。