职位描述
该职位还未进行加V认证,请仔细了解后再进行投递!
岗位职责:
1. 负责采集公开数据,一些相关信息的提取,优化爬虫策略,进行多平台信息的抓取和分析
2. 设计爬虫策略和防屏蔽规则,完成对复杂网站的信息抓取
3. 参与业务功能需求探讨,数据分析处理落地,并提供后端接口
4.优先考虑会逆向手段来突破一些反爬措施,包括但不限于cookie信息认证,参数加密,响应数据加密等等
任职资格:
1. 熟悉 web抓取原理及技术,熟悉常用的爬虫网络框架及重要组件;
2. 熟悉 Python编程语言,熟练掌握 MySQL、Redis、MongoDB等数据库的使用
3. 了解常见的反爬机制,能够破解常见的反爬机制,有对常见的验证码的逆向经验
4. 了解抓包调试技巧,突破抓包验证
5. 具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于分析问题解决问题
工作地点
地址:福州鼓楼区福州-鼓楼区福州软件园C区
求职提示:用人单位发布虚假招聘信息,或以任何名义向求职者收取财物(如体检费、置装费、押金、服装费、培训费、身份证、毕业证等),均涉嫌违法,请求职者务必提高警惕。
职位发布者
程主管HR
福州安博榕信息科技有限公司
- 通信/电信/网络设备/增值服务
- 200-499人
- 股份制企业
- 808