工作职责：

1．参与爬虫程序的设计与开发，提升爬虫的稳定性与安全性；

2．数据库的设计与搭建；

3．数据ETL相关工作。

任职要求：

1．有爬虫开发经验；

2．熟练掌握Python基本知识，熟悉requests、bs4、xpath、re等；

3．熟悉HTML、JS、CSS，熟悉异步请求；

4．能够熟练使用Scrapy爬虫框架；

5．能够独立解决网站反爬措施，进行各种验证码的破解；

6．熟悉Mysql、redis、mongodb等数据库。