工作要求：

1. 计算机基础知识扎实，包括不限定于操作系统、计算机网络、数据结构和算法

2. 熟悉 Python、Java 等至少一门语言，熟悉 MQ、ZK 等分布式系统的设计和应用

3. 精通网页抓取原理及技术，精通正则表达式，精通SQL，可以从结构化的和非结构化的数据中获取信息

4. 有 Scrapy / Pyspider / Nutch / Heritrix 框架的使用经验或自己手写过类似框架

加分项

5. 熟悉Hadoop并行计算框架、有 Storm/Spark streaming/Flink 等分布式流计算经验者优先

6. 对数据敏感，具备良好的逻辑思维能力以及的问题解决能力者优先

7. 在互联网反作弊、反欺诈、数据分析、竞品分析等方面有工作经验者优先

8. 对开源技术有强烈的兴趣和爱好，提交过 bug 或 patch 者优先