性别要求:不限性别
非外包公司,自研产品!
职位诱惑:
周末双休,入职买五险一金,医保一档,弹性上班无打卡
岗位职责:
1、负责公司的重要爬虫项目的方案设计,工程实现;
2、负责解决数据采集过程中的时效性,以及各类反爬问题
3、对项目内外部数据进行存储优化、清洗、加工和应用;
4、配合业务部门进行各类数据提取和分析;
5、规划和建设长期数据治理平台。
任职要求:
1、熟练掌握 Python/Java/JavaScript 任意语言,Python 优先;
2、2年以上爬虫相关技术开发经验,熟悉爬虫抓取原理,了解反爬策略;
3、熟悉Scrapy、WebMagic、Flask、Spring Boot等框架;
4、熟悉 HTML、XPath、正则表达式、AJAX、HTTP协议等;
5、熟悉关系型数据库(MySQL/PostgreSQL)、非关系型数据库(MongoDB/HBase/Elasticsearch)、缓存数据库(Redis/Memcached);
6、有海外爬虫、反爬经验优先;
7、有良好的逻辑思维能力、沟通能力、学习能力、团队合作精神。
求职提醒:求职过程请勿缴纳费用,谨防诈骗!若信息不实请举报。