高薪招聘爬虫工程师招聘

发布时间: 2023-10-27

价格: 1万～3万元/月

福田区 | 1-3年 | 本科/学士及同等学历 | 人才招聘 | 电子信息技术

需求描述

岗位职责：

1.参与及协助网络爬虫采集规则的编写，负责分布式爬虫系统和数据采集的规划、架构、设计、开发、维护；

2.制定爬虫策略和反爬虫规则，提升数据抓取的效率和质量；

3.负责http端及app端的数据抓取和爬取链路优化；

4.对抓取数据进行清洗、整理、入库，进行数据处理及可视化开发工作；

岗位要求：

***年+以上实际的爬虫项目经验；(有海外互联网挖掘经验者优先)

2.熟练掌握Python等编程语言，熟悉掌握各类爬虫框架；

3.熟悉HTML/JavaScript/CSS/XPath/Ajax/XML等web技术，熟练掌握HttpClient/WebDriver/splash等工具；

4.熟悉Linux系统，熟悉Mysql、Redis等数据库，熟悉Internet基本协议（如TCP/IP，HTTP等）；

5.能够解决封账号、封IP采集等问题，解决数据抓取、信息抽取等问题，构建完善的网络信息收集平台；

6.有逆向工程经验，尤其在Android、iOS平台的逆向工程经验者优先；有成功逆向过复杂软件数据结构、功能、算法的经验者优先；

7.有数据分析、数据挖掘相关经验者优先；

员工福利：

1、带薪假期：法定节假日、婚假、产假、带薪年假等假期；

2、员工福利：五险一金、下午茶、生日福利、节日礼品、部门聚餐、员工活动经费、旅游团建等丰富福利；公司发展潜力大，办公环境好，薪资待遇好，福利齐备，老板nice，团队气氛融洽。

办公地址

深圳福田区云松大厦14楼

科创中国