您所在的位置: 需求库 人才需求 高薪招聘爬虫工程师招聘

高薪招聘爬虫工程师招聘

发布时间: 2023-10-27

价格: 1万～3万元/月

龙岗区 | 3-5年 | 本科/学士及同等学历 | 人才招聘 | 电子信息技术

需求描述

办公地址：深圳市龙岗区平湖街道华南大道一号华南城2号5A126

岗位职责：

1.参与爬虫系统架构设计和研发；

2.负责开发高性能抓取架构，支持业务发展；

3.负责对爬取数据进行分类和解析；

4.参与大数据系统的开发维护。

任职资格：

1、3年以上的的爬虫工作经验；

2、1-2年以上大规模网页爬虫开发经验，有前端JS逆向工程经验优先；

3、熟悉分布式系统的设计与实现,解决反爬虫、网络异常等各种常见爬虫问题；

4、熟悉app端数据抓取（有逆向、脱壳等经验），掌握Apktool、dex2jar、JD-GUI等工具，抓取过主流电商平台和主流app软件；

5、熟练使用python/go、redis、mongodb、hbase等互联网常用技术

6、理解http，熟悉html,DOM,xpath,scrapy；

7、熟悉Hbase/Elasticsearch/kafka/ActiveMQ/RabbitMQ等大数据相关技术；

8、有爬虫、模拟器、反爬虫、app逆向、Selenium、信息抽取、文本分类、数据处理、机器学习等相关经验者优先。

9、工作踏实认真，思路清晰，有强烈的责任心、优秀的协调沟通能力和团队合作精神；

办公地址

深圳龙岗区华南城2号交易广场5楼A区126