- 岗位职责
1、针对定向APP研究爬取策略与爬取对应APP相关数据;
2、负责爬虫系统自动爬取、数据提取的核心算法和性能效果调优;
3、负责爬虫系统的后台监控、报警模块开发。
- 岗位要求
1、全日制本科,计算机相关专业大三大四、研一研二学生;
2、熟练掌握python/java/JavaScript 任意语言;
3、熟悉HTML、XPath、正则表达式、AJAX、HTTP协议等;
4、熟悉Scrapy、WebMagic、Flask、Spring Boot 任意框架;
5、熟悉爬虫抓取原理、了解反爬策略;
6、熟悉关系型数据库(MySQL/PostgreSQL)、非关系型数据库(MongoDB/HBase/E;asticsearch)、缓存数据库(Redis/Memcached);
7、有过逆向工程、反编译、破解app、app反调试经验者优先;
8、对frida、反汇编、xposed等有过一定了解者优先;
9、有良好的逻辑思维能力、沟通能力、学习能力、团队合作精神。
加分项:有Web端和App爬虫开发经历,掌握各种爬虫技巧