1.研究各种网页、app接口,探寻特点和规律
2.编写抓取互联网内容的爬虫
3.研究优化算法,提升爬虫系统的稳定性、可扩展性
4.攻破各种反爬虫
任职要求:
1.计算机、电子、通信、物理、数学等相关理工科专业大三或研一、研二在校学生;
3.精通Python,掌握爬虫技术,熟悉scrapy框架、pyspider框架等
4.有反爬虫经验者优先
5.有数据分析经验者优先
6.熟悉至少一种Sql数据库 (mysql/postgresql/sqlserver/oracle/db2),了解至少一种Nosql数据库(redis, memcache, mongodb, hbase)
7.热爱数据分析,对从数据中发掘出有价值的信息充满热情,踏实、主动,有较强的学习能力。
当前职位已下线
为你揭秘各职业的工作内容|薪资水平…
运用机器学习技术处理海量数据,发现富有价值的业务信息的工程技术专业人员。