爬虫开发工程师 / 爬虫数据采集工程师(第三方形式半年期项目)
1.7-2.1万
上海 本科
上海报业大厦13楼
岗位职责:
1.根据项目需求进行猫头鹰系统的详细设计并开发,编写相应文档
2.数据采集与爬虫开发,数据处理与存储,网站结构分析
3.反爬虫机制应对(特别是APP加密和JS加密)
4.完成上级领导交办的其他事宜。
任职资格:
1.本科及以上学历,计算机相关专业毕业;
2.具有全职3年及以上平台研发经验。
3.至少掌握一门主流web框架Flask、Django,熟悉一门爬虫框架Scrapy、PySpider,有可视化抓取开发经验。
4.熟悉Redis、MongoDB、MySQL等主流数据库,GIT进行团队协作开发,良好的编码和文档编写习惯。
5.有docker,k8s实战应用经验,selenium,appium,Splash,Portia等框架研究和开发的经验者优先。
6.有微信公众号文章和微博文章爬虫经验者优先。
查看更多职位描述
以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕