岗位职责： 

1、基于开源大数据技术体系的应用平台研发 ；

2、结合项目业务需求，学习统计学知识，研发特定业务领域的数据模型，在数学建模的基础上开发高性能算法。实现结构化数据的高性能运算、或非结构数据的结构化存储、量化分析（如文本挖掘、图像处理）、推荐算法等 。

任职要求： 

1、 能够使用SQL操作复杂的数据模型并有SQL优化的经验；

2、 了解、熟悉数据仓库的ETL的开发和数据建模； 

3、 了解、熟悉分布式计算的各种范式，分布式算法实现，有较好的分布式架构设计能力；

4、 了解HDFS/HBase/Elastic Search/Hive/Kafka/Impala/Spark/YARN原理等相关技术，有过Spark开发经验者优先； 

5、 精通操作系统原理、数据结构、算法、网络编程、多线程编程技术者优先； 

6、 有较强的沟通能力、严谨的逻辑思维以及数据敏感性； 

7、 有丰富的JAVA开发经验，有Scala语言项目开发经验者优先。