工作职责：

1. 负责对各类数据的重构、异构

2. 根据项目需求，批量数据处理和导出 3. 爬虫开发 4. 数据解析工作，从海量网页里做数据抽取并入库

5. 学习 Spark + Hadoop 的大数据处理平台，负责对各类日志、数据进行批量或实时流处理，输出到运营中心或推荐、搜索系统

任职要求：

1、本科及以上学历 2、良好的计算机及算法基础、积极主动、热爱编程，能吃苦，能承受压力 3. 熟悉掌握 Java 或 Python 语言 4. 了解面向对象编程 5. 有数据库经验（例如MySQL、Redis等）优先