岗位职责：

- 实践前沿爬虫与存储技术，对指定数据源进行运用爬虫技术数据抓取

- 负责爬虫框架的搭建，负责数据结构化处理，包括数据提取、处理、优化、过滤

- 编写数据分析脚本，进行数据体系的设计和搭建

- 对接第三方数据源，清洗入库

岗位要求：

- 计算机、数学或统计相关专业

- 热爱技术，对解决具有挑战性问题富有激情，学习能力和求知欲强

- 熟悉linux开发环境，熟悉python

- 熟悉scrapy/redis/mongodb/mysql者优先

- 有过分布式爬虫开发经验者优先

加分项：有个人博客、参与开源项目、可提供Github/StackOverflow/知乎等id