首页
论坛
课程
招聘

爬虫工程师

北京 - 北京市海淀区西北旺东路10号院东区7号楼
30k以上 经验不限 / 学历不限
发布于 2020-08-12 11:03
职位描述:
1、负责网络爬虫系统平台的架构设计与开发(如抓取调度,多样化抓取,页面解析和结构化抽取)、技术选型;
2、负责爬虫算法/反爬策略/代理IP优化研究及落地实施,对爬取实时性、成功率负责;
3、对抓取后的数据进行清洗、存储等,并持续优化平台,以便满足各种爬取业务需求。
任职要求:
1、全日制本科及以上学历,计算机相关专业,2年以上爬虫经验;
2、熟悉Linux平台,掌握Python、Java开发语言,熟悉mysql/redis/mongodb等常见数据库;
3、熟悉基于正则表达式、Xpath、CSS、Http协议、js等的网页信息抽取技术;
4、精通常用的爬虫技术及架构,具有一定的反爬分析对抗能力;
5、熟悉Scrapy框架及原理,有相关的使用经验;
6、熟悉Android逆向破解,有Android App破解经验最佳;
7、熟悉Android注入、Hook技术原理,能使用Frida、Xposed等框架编写Hook代码;
8、熟悉HTTP、TCP等网络协议及数据抓包、分析;
北京
job.baijiahulian.com
公司简介
跟谁学(股票代码:GSX)是中国第一家在美国上市的K12在线教育机构,主要业务为K12在线课外辅导培训以及成人在线课程培训。2015年3月30日,宣布A轮融资5000万美元,刷新了中国创业公司A轮融资纪录。2015年11月,获福布斯发布的“福布斯2015中国成长最快科技公司”称号。2019年6月6日,跟谁学成功登陆美国纽约证券交易所,成为中国第一家只融了A轮就在美国上市的在线教育公司。跟谁学是中国第一家连续五个季度收入同比增长超过400%的在线教育公司,2019年收入超过2018年收入的5倍,是全球市值最大的在线教育机构(2020年2月19日市值超过106亿美元)。目前,跟谁学旗下有跟谁学、高途课堂、小早启蒙、金囿学堂、微师等产品。
爬虫工程师
30k以上