您所在的位置: 需求库 人才需求 高薪招聘高级爬虫开发工程师招聘

高薪招聘高级爬虫开发工程师招聘

发布时间: 2023-10-27

价格: 1万～3万元/月

龙华区 | 3-5年 | 本科/学士及同等学历 | 人才招聘 | 电子信息技术

需求描述

工作职责:

1, 负责设计、开发、维护分布式python爬虫项目；

2,负责各类国外电商平台的数据爬取工作,如Amazon,wayfair等.

3,负责国外社交媒体twitter, Facebook,Instagram等的爬虫开发工作.

4,与业务部门对接,负责机器学习算法和系统的开发.

5,协助爬虫可视化系统的后台监控、报警模块的开发.



岗位要求:

1,计算机、数学、统计学相关专业，3-5年爬虫开发经验；

2,有国外电商平台,社交媒体平台爬取经验优先.

3,熟悉python爬虫，scrapy,scrapy-redis框架.

4,熟悉网站常见的反爬策略，js加密解密,代理池等

5,熟悉Mysql,Redis,Mongodb等数据库系统,熟悉sql编程；

6,熟悉常用的机器学习算法等；

办公地址

深圳龙华区1970科技小镇8栋310