工作职责：
-负责全网搜索引擎基础数据挖掘核心技术研究和开发
-负责搜索引擎所覆盖到的网页、站点、媒体资源等数据分析和特征建模工作
-有处理过阿里云、淘宝、阿里巴巴相关商品数据抓取，以及对抓取后的数据进行清洗、存储的经验
-熟悉linux系统原理，进程基本调试方法。线上环境的搭建，问题定位和解决，日常监控和应急处理，能编写自动化脚本工具，运维工作自动化。
-能胜任软件测试、安全性能优化的优先
职位要求：
1、至少1年爬虫项目开发经验；至少了解掌握主流爬虫框架中的一种
2、了解爬虫原理，了解掌握正则表达式、XPath、CSS等网页信息抽取技术以及提取多层Json结构数据优先；
3、了解常见反爬机制，IP池、cookie、js加密等；对破解验证码有丰富经验，独立解决js反爬和模拟登陆问题
4、了解数据清洗，能够用numpy、pandas、jieba等工具对数据进行处理者优先；
职位福利：五险一金、餐补、房补