大数据+java开发工具

【岗位2】
1、了解Hadoop、HBase等分布式计算平台开发，有大数据应用系统开发经验
2、了解Kettle 等ETL 工具的使用和开发；了解hadoop\hive和常用数据库
3、了解SQL/HQL，有较好的SQL性能调优经验；了解hive sql的开发
4、了解ETL设计、调度、监控、算法等，能够进行事实表、维度表的开发
5、有一定的分布式开发经验，使用HBase进行过1项目开发、或支撑过HBase高并发项目的系统工程师优先
【岗位1】spark离线数仓
重点提炼：
1、spark、Doris、starrocks 。数仓建模
2、次要hive、flink
3、有更好的 sqoop、datax、kafka
重要程度依次下降
要求离线熟悉spark，数仓建模比较熟悉，会实时是加分点

（JD通用模板仅供参考，重点方向上已说明）
技能要求：
1、精通Hadoop、HBase等分布式计算平台开发，5年以上hadoop使用经验，有大数据应用系统开发经验
2、精通Kettle 等ETL 工具的使用和开发；具有一定数据模型和数据架构基础，熟悉hadoop\hive和常用数据库
3、精通SQL/HQL，有较好的SQL性能调优经验；熟悉hive sql的开发
4、精通ETL设计、调度、监控、算法等，能够熟练的进行事实表、维度表的开发
5、有丰富的分布式开发经验，使用HBase进行过项目开发、或支撑过HBase高并发项目的系统工程师优