1. 负责设计和开发分布式网络爬虫系统,进行社交媒体、电子商务类网站、app等爬取;
2. 负责爬虫数据的提取与分析,形成对业务有价值的建议。
任职要求:
1. 精通python,熟练使用多线程,熟悉常用的爬虫框架;
2. 熟悉charles, fiddler, wireshark, surge等抓包工具,了解长连接、短连接、长轮询、短轮询、WebSocket等抓取方式
加分项:
1. 希望你是一个技术爱好者,有极客精神
2. 有side project
3. 不迷信大厂,不迷信权威,只相信“show me the code”