职责:1.日常优化和管理CDP涉及的基础架构:elasticsearch,presto,kylin,cdh,doris,mysql,redis等; 2.负责大数据平台的开发。 3.预研行业内各类大数据产品和工具
技能:1. 熟悉shell语言,熟悉liunx的基本操作; 2. 精通java或scala,具有JVM调优经验,熟悉多线程编程; 3. 精通hadoop体系,包括hdfs,yarn,hbase等,能解决常见的问题; 4. 熟悉spark,sparkstreaming,具有解决实际问题的能力; 5. 熟练掌握sql; 6. 掌握elasticsearch,能够熟练应用;