职位详情
大数据开发工程师
8千-1.5万
贵州坤盾天成科技有限公司
贵阳
3-5年
大专
12-05
工作地址

贵州省公安厅

职位描述
岗位职责:
1.负责公司大数据存储相关产品的架构设计和系统调优;
2.能够与产品经理、管理团队进行良好的沟通合作,按时保质保量完成开发任务;
3.推动数据治理、数据服务化、数据产品化等相关工作,优化数据系统架构;
4.深入理解业务,挖掘数据价值,对业务进行合理的抽象和建模,构建准确、稳定、高效的离线和实时数据体系。
职位要求:
1.熟悉数据结构和算法,具备扎实的程序设计基础和学习能力;
2.大数据开发经验3年以上,熟悉并理解缓存、消息、RPC调用框架、JVM 调优、序列化、NIO等原理,对各种开源框架如Spring、dubbo等有深入了解,读过源代码、自己写过框架优先;
3.熟悉Spark/Hadoop/Flink/Clickhouse等大数据生态技术栈,具备较强的的SQL/ETL开发和性能调优能力,对代码质量有严格要求;
4.了解典型数据挖掘工具,熟练应用各种分类聚类算法,熟悉各种相关性算法,回归算法,了解常用的社交分析模型,具有数据挖掘算法开发经验;
5.有BI开发(包括Spark SQL、Hive SQL、大数据DBA 等)经验者优先;
6.有大数据查询系统(包括Phoenix、Presto、Impala、Kylin、Greenplum等)经验者优先;
7.具有强烈的责任心,良好的沟通、学习能力,良好的团队合作意识,勇于接受技术挑战,对技术充满热情。

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请