性别要求：不限性别
岗位职责：
1、负责公司的重要爬虫项目的方案设计，工程实现；
2、负责解决数据采集过程中的时效性，以及各类反爬问题
3、对项目内外部数据进行存储优化、清洗、加工和应用；
4、配合业务部门进行各类数据提取和分析；
5、规划和建设长期数据治理平台。
任职要求:
1、熟练掌握 Python/Java/JavaScript 任意语言，Python 优先；
2、3年以上爬虫相关技术开发经验，熟悉爬虫抓取原理，了解反爬策略；
3、熟悉Scrapy、WebMagic、Flask、Spring Boot等框架；
4、熟悉 HTML、XPath、正则表达式、AJAX、HTTP协议等；
5、熟悉关系型数据库(MySQL/PostgreSQL)、非关系型数据库(MongoDB/HBase/Elasticsearch)、缓存数据库(Redis/Memcached)；
6、有良好的逻辑思维能力、沟通能力、学习能力、团队合作精神。
求职提醒：求职过程请勿缴纳费用，谨防诈骗！若信息不实请举报。
