职责：
大数据平台设计：
负责大数据基础平台、海量数据存储处理分布式平台、数据分析系统架构的设计构建和研发。
设计和构建企业级大数据平台的整体架构，包括数据收集、数据存储、数据挖掘、数据输出等。
负责规划从数据源到数据应用的整体流程，并参与用户产品和数据产品的决策。
技术选型与优化：
基于Hadoop、Spark等大数据平台进行技术选型和开发。
负责大数据平台的优化和改进工作，包括性能调优、故障恢复等。
数据治理与规范：
制定项目/数据仓库设计及实现规范，指导设计研发和部署。
制定数据治理领域的数据体系化管理措施，包括元数据设计、数据标准、数据质量、数据安全等。
技术研发与创新：
深入研究大数据相关技术和产品，跟进业界先进技术。
负责组织同事研究行内最前沿的技术发展方向，突破现有的技术难题。
团队管理与培养：
负责大数据研发团队建设、人才梯队培养和技术团队管理。
搭建与培养团队成员，进行任务划分、进度监控、代码规范和质量保证。
技能要求：
编程与框架：
精通Hadoop、HBase、Hive、Spark等大数据技术及其生态圈。
熟悉Java、Python等编程语言，了解NoSQL、全文搜索引擎等。
数据分析与决策：
具备采用大数据技术分析海量数据的能力。
熟悉数据挖掘和数据分析方法，能够构建用户数据模型。
云计算与分布式系统：
具有云计算的经验和知识，知道如何在云计算环境中工作。
掌握分布式系统原理，对分布式存储、流式计算、消息队列等有深入理解。
数据仓库与数据挖掘：
具备丰富的数据仓库建模理论和数据挖掘经验。
能够基于业务需求设计和开发数据仓库和数据挖掘方案。
任职要求：
学历与经验：
硕士及以上学历，计算机相关专业。
5年以上大数据系统架构经验，特别是在互联网、大数据领域的开发经验。
项目经验：
有成功的大数据项目经验，包括大数据平台的规划、设计、开发和优化等。
具备大项目管理经验，包括但不限于前期需求沟通、建设方案编写、中期项目实施、进度汇报、后期项目维护等。
其他：
强烈的敬业精神，良好的沟通与协调能力，能有效组织协调团队完成各类开发工作。
对大数据有深刻的理解，对解决具有挑战性问题充满激情。