工作职责 1.负责指定网站的数据采集、解析与清洗 2.编写和维护爬虫程序，保证数据稳定运行 3.协助爬虫系统部署、问题排查与日常维护 岗位要求 1.熟悉 Python，了解常用爬虫框架（Scrapy/Requests 等） 2.熟悉 HTML、XPath、正则表达式等网页数据提取方式 3.熟悉 Linux 常用命令，具备基础服务器操作能力 4.了解 MySQL、Redis 等常见数据库 5.具备独立开发、部署和维护基础爬虫系统的能力 6.能尽快到岗，工作自备电脑 加分项 1. 有实际爬虫项目经验 2.了解反爬机制及常见处理方案