【工作内容】
1. 负责爬虫系统设计和开发,完成数据采集与爬取、解析处理、入库及备份等数据日常工作;
2. 研究各种app/网页,探寻特点和规律,负责信息抽取、数据清洗等研发和优化工作;
3. 对反爬机制有研究,有能力破解复杂图片验证码/账号限制/ip限制;
【任职要求】
1. 本科以上学历,计算机相关专业,1年以上爬虫的开发经验;
2. python基础扎实,熟练使用scrapy或者pyspider爬虫框架优先;
3. 熟悉多种网络协议,熟悉HTML, Xpath表达式, css选择器,JavaScript;
4. 熟练使用常见存储组件MySQL,Redis, 消息队列等;
5. 有spider、协议逆向分析、反爬虫相关经验者优先;
6. 思维敏捷,具有良好的逻辑分析及问题解决能力,对互联网业务和产品有较强的敏感性,对解决具有挑战性问题充满激情;
我们是一个快速成长的团队,CEO及核心团队成员来自腾讯等各大知名互联网公司,气氛自由,俊男靓女扎堆,期待与你一起制躁潮流!
当前职位已下线
为你揭秘各职业的工作内容|薪资水平…
使用python技术从事产品服务开发设计、爬虫服务、数据分析等业务的人员。