工作内容: 1、负责产品功能底层大数据开发,负责大数据清洗、存储、处理、分析等场景的开发;
2、参与软件研发过程中的文档撰写;
3、负责和参与公司大数据基础架构平台的运维,保障数据平台服务的稳定性和可用性;
4、负责和参与超大规模数据存储与计算任务的精细化设计,选型和开发。
任职资格: 1、计算机以及相关专业,本科及以上;
2、熟悉数据结构基础;
3、熟悉 Python、Perl、Bash shell 脚本语言中的一种;
4、熟悉 HiveQL 以及常用的 UDF;
5、掌握 Hadoop、Kafka、Zookeeper、HBase、Spark 中任意3个的运行机制; 6、有良好的问题分析及故障排除能力。