工作职责:

1. 负责内容产品平台爬虫系统的设计、研发与维护；

2. 针对目标源站，页面，元素，设计爬虫策略与算法，提升抓取效果；

3. 保证爬取内容质量。

任职资格:

1. 熟悉Python，熟悉scrapy框架，有较丰富的爬虫项目开发经验；

2. 熟悉正则表达式，Jsoup、XPATH，CSS选择器，能够从结构化和非机构化的数据中获取信息,了解各种Web前端技术，包括HTML／XML／JavaScript／AJAX／JSON等;

3. 掌握mysql和redis的基本使用, 具有 Linux 下编程经验和操作经验；

4. 的分析、解决问题能力，对处理未知的、挑战性问题充满激情；