首页
论坛
课程
招聘

Python爬虫工程师

深圳 - 广东省深圳市南山科技园南科苑南路3099号中国储能大厦47楼
面议 经验不限 / 学历不限
发布于 2020-09-07 15:51
【职位诱惑】:
大数据人工智能;清华系大牛;技术氛围浓

【薪资范围】:10-20K

【职位描述】:
▪ 负责各类大型网站的爬虫开发,解决高并发请求、海量数据存储等问题;

▪ 深刻理解爬虫数据的价值,竭尽全力追求数据的完整性、及时性;

▪ 主动思考现有爬虫框架的迭代方向,为提高开发效率及质量努力;

▪ 学习探索爬虫新技术新方向,如手机群控、Android 逆向、拟人化爬取等;


【职位要求】:
▪ 喜欢钻研技术,喜欢阅读优秀开源项目源码,热衷于解决各类技术问题;

▪ 精通 Python,熟练使用 Requests、Scrapy 进行爬虫开发;

▪ 编程基础扎实,熟练使用多进程、多线程、协程,熟悉异步编程;

▪ 熟练掌握 Linux 平台开发,能独立安装、配置、搭建开发环境;

▪ 熟悉 Web 开发技术、尤其是前端技术,有实际 Web 开发经验者优先;

▪ 熟悉常用数据库,包括 MySQL 、Redis、MongoDB 等;

▪ 熟练使用各类抓包工具,如 Charles、Fiddler、Wireshark、Mitmproxy 等;

▪ 可以应对 IP 封禁、参数加密、验证码、字体反爬、人机检测、账号封禁等反爬措施;

▪ 有手机群控或 Android 逆向经验者优先。


【成长机会】:
▪ 进入大数据前沿领域,直面全球化的客户;

▪ 可接触多种多样的数据对抗场景,多维度锤炼个人的技术水平;

▪ 学习到PB级数据的处理方案;

▪ 深入数据的实际使用场景,提升个人对于数据价值的敏锐度。
深圳
https://www.yimian.com.cn/
公司简介
关于一面数据

作为艾盛集团的一员,一面数据(Yimian by Ascential)通过整合人工智能、数据分析以及数据洞察,赋能企业在数字经济时代发现增长机会,全面拥抱数字化营销,以数据驱动决策。我们跨渠道采集数据,提供多元解决方案,服务消费者洞察、产品设计、市场营销及销售等核心业务。

一面数据在中国及亚太深入耕耘数字商业,联合姐妹公司 Edge by Ascential 在欧美及亚太的电商能力,提供一套全面解决方案,涵盖市场份额、定价促销、消费者情感、社交聆听和广告投放等领域的数据洞察与分析,帮全球知名品牌在数字商业中取胜。
Python爬虫工程师
面议