岗位职责:
1) 数据模型与架构设计,离线数仓和实时数据体系的建设和不断迭代;
2) 数据体系化建设与管理相关的系统研发(元数据管理、模型管理、配置化工具、数据治理等相关模块的研发);
3) 根据业务需求完成大数据分析,使用spark、hive、mapreduce等进行开发;
4) 数据产品需求的研发、项目管理、代码review及相关团队规范的制定与优化;
5) 根据业务需求参与产品设计及撰写技术文档;
任职要求:
1) 2019年毕业的国家统招本科以上学历,计算机相关专业;
2) 掌握数据结构与算法,有java或scala研发经验;理解基本的设计模式,能将业务需求快速理解成技术需求;
3) 熟练使用至少一种RDBMS;至少熟悉使用一种脚本语言shell或python;
4) 熟悉Hadoop架构和工作原理,MapReduce编程;熟悉Hive,有HQL优化经验;
5) 熟练掌握spark及spark streaming开发,有实际项目研发经验更佳;
6) 有其他数据研发相关工具经验优先,例如HBase、Kylin、ES、Kudu、Redis。
当前职位已下线
为你揭秘各职业的工作内容|薪资水平…
负责一个大数据平台的底层架构的搭建和开发的人员。