职位详情
爬虫工程师
9千-1.6万
上海坤策文化传播有限公司
上海
1-3年
大专
12-21
工作地址

浦三路3058号(浦三路地铁站4号口步行90米)长青企业广场326室(8号门进来)

职位描述

公司优势:
1、公司是新媒体一级代理商,信息流充值对公返点外,对个体工商户有额外返点。

2、除了信息流充值返点和代运营外,公司有个体电商SAAS分账系统为个体工商解决结算和出账问题,另有电商供应链金融系统可以为缺资金的电商提供资金扶持。这两个系统为新媒体电商提供配套服务。

3、公司有自己的SAAS福利商城,主要为保险、银行和品牌客户提供新媒体推广和权益商品的整合服务。

岗位职责:
1、参与爬虫系统的架构设计与开发

2、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析;

3、使用 Python 语言编写网络爬虫程序,实现对目标网站的数据抓取,包括爬虫的爬取策略、数据清洗和过滤等;

4、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
5、负责爬虫日常运维工作,攻克爬虫难题;

6、编写技术文档和报告,记录项目进展和技术方案,为公司提供参考和支持。
7、有高通量爬虫系统架构设计经验者优先

任职资格:

1、计算机相关专业,大专及以上学历;

2、具有实际爬虫开发.内容提取工作经验1年以上;

3、能独立解决实际开发过程碰到的各类问题;

4、熟练使用一门及以上的后端开发语言,如Java/PHP/Python等;

2、掌握爬虫相关技术,有实际的爬虫项目相关经验;

以担保或任何理由索取财物,扣押证照,均涉嫌违法,请提高警惕

立即申请