岗位职责： 目标网站数据爬取、解析、清洗、分析等ETL全流程。 任职要求： 熟练掌握在linux（centos，ubuntu）下开发。 熟练掌握mysql，postgresql数据库使用，redis，mongodb使用。 熟练掌握web页面结构分析，使用chrome，firefox，edge等进行包括html，css，js等的解析，抓包分析。 可以使用browser-use,craw4ai等进行页面模拟交互。 熟练掌握python，django进行数据分析，计算，数据库存取。 熟练掌握docker/git下的上述开发，部署，运维。 具备良好的编码习惯，结构清晰，命名规范，逻辑性强，代码冗余率低； 数据结构和算法基础扎实, ACM程序设计比赛获奖者优先； 熟悉分布式系统原理，熟练掌握一种以上服务框架和消息中间件者优先； 有实际项目经验者优先考虑。 具备良好代码书写规范，团队合作和分享精神。 对创新技术有着非常强烈的求知欲，愿意不断学习新知识，不断更新自己的技术储备。 有扎实的英语功底，并且能够轻松的阅读英文文档。 其他要求： 1.计算机相关专本科以上学历在校生，研二优先。 2.能够保证三个月及以上的实习时间，每周至少保证四天及以上出勤，欢迎寒暑期实习。 3. 执行力强，懂得要遵守企业价值观和工作纪律。 4. 工作地点在上海市松江区，外地同学可以提供住宿补贴。 5. 投递简历前请仔细阅读上述能力要求，避免浪费彼此时间。 你将获得： 高手指导，快速进步