岗位职责: 1)与合作方对接API接口,进行各类外部数据源的接入与维护; 2)分布式爬虫的开发与维护、数据的清洗与加工; 3)参与BI系统的web开发; 4)参与自然语言处理和数据挖掘。 任职资格: 1)能熟练使用 Python、Ruby、Go 语言中的一种或多种,熟悉SQL语言和常用linux命令; 2)精通常用的数据结构,对分类算法、聚类分析、回归模型等有基本了解; 3)基本掌握 React、VUE、Angular等前端开发框架的一种或多种,有web开发经验; 4)在爬虫、反爬虫、ETL、数据仓库、数据可视化方面拥有实际工作经验者优先; 6) 曾在信息学奥赛、ACM竞赛中获奖者优先; 7) 参与过开源项目,github star数量多者优先; 8) 熟悉右列技术中一种或多种者优先: functional programming、 Spark、Elasticsearch、Neo4j、GraphQL、Docker、Serverless。