- 岗位职责
1、负责现有数据采集系统的维护和性能优化;
2、优化爬虫策略,提高获取数据的质量;
3、研究防屏蔽原理,提升系统的稳定性;
4、理解业务需求,满足业务功能开发。
- 岗位要求
1、正规院校本科及以上学历,软件、计算机、通信、信息安全、网络工程等相关专业,2年及以上Python开发经验;
2、熟悉自动化测试框架,发selenium,appnium,uiautomator等;
3、熟悉爬虫及反爬原理,熟悉至少一项爬虫框架或工具(如Scrapy、Pyspider、nutch);
4、熟练掌握Python、Java、HTML5、Java Script等开发语言;
5、熟悉HTTP协议,熟悉正则表达式、XPath、CSS选择器等,了解常用验证码识别技术;
6、熟悉Redis、Mysql,掌握MQ;
7、擅长Web安全,了解常见的Web安全漏洞及原理;
8、能独立开发,具有良好的分析问题和解决问题的能力,在关注的领域有深入的研究,并不断创新,对新技术有强烈的求知欲望,乐于钻研,善于分享。