岗位职责：
1、负责爬虫各个系统核心代码搭建，性能方面的优化，解决相关的疑难问题；
2、负责研究各种网站、网页、链接的形态，发现它们的特点和规律；
3、设计各种策略和算法，提高数据抓取的效率和质量，解决数据的重复,垃圾数据识别；
4、提高系统的可运维，可测性，易用性。
岗位要求：
1.大专及以上学历，3年及以上爬虫经验
2.精通使用爬虫相关技术，如：python,scrapy,selenium,xpath,正则表达式
3.熟练掌握Python，熟悉scrapy,scrapy-redis,scrapyd,Pyspider等常用的爬虫框架以及原理，有开发爬虫框架经验；
4.精通爬虫和反爬技术（如封禁ip，模拟登陆，封禁账号等），精通http底层协议；
5.精通深度抓取、动态网页技术抓取、浏览器模拟抓取、APP抓取等技术；
6.对主流爬虫架构有深入研究，具有成熟爬虫工具的设计及运维经验。
7.熟悉目前市场上各种验证码验证措施，及其相关破解方案
8.良好的代码能力，扎实的数据结构和算法功底，有快速迭代、逐步优化的工程项目经验；
9.良好的代码能力，有很强的学习能力和技术钻研能力，有良好的沟通、理解、执行能力；
职位福利：周末双休、员工旅游、节日福利、加班补助、五险一金