职位描述
【高级爬虫逆向工程师】海外网站安全无风险
岗位职责:
1.对指定的网站进行网页抓取、数据提取、破解反爬策略;
2.负责多平台信息抽取、数据清洗、入库、服务化等研发和优化工作;
3.参与开发和设计分布式网络爬虫系统,进行信息的抓取和分析工作;
4.研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性;
5.独立解决实际开发过程中碰到的各类产品数据需求和接口问题。
任职要求:
1.专科及以上学历,计算机相关专业,5年以上相关工作经验;
2.精通 Python 语言,精通常见开源爬虫框架;
3.精通 Charles等抓包工具,精通网页抓取原理及技术,精通正则表达式,熟练从结构化和非结构化的数据中获取信息;
4.精通 JS debugger、JS逆向;
5.精通 Playwright、DrissionPage 等自动化抓取技术;
6.熟悉 破解网站验证码、绕过机器人检测等技术;
7.熟悉 APP脱壳、APP逆向反编译;
8.熟悉 android & ios 自动化;
9.具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于分析问题/解决问题。
10.熟悉 Akamai, cloudFlare, Incapsula 等web安全产品,有破解方案,有实际经验。
公司福利待遇:
一年一次海外旅游
初次来北京员工在试用期内提供免费宿舍