岗位职责：
1、负责后台爬虫数据的分布式存储设计以及代码实现；
2、根据开发进度和任务分配，完成相应模块的软件设计、开发、编程任务；
3、负责设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量，如分析预测、质量判断、封禁与反封禁研究等；
4、完成目标网站数据采集与爬取、解析处理、入库等数据日常工作；
5、跟进技术热点，及时更新新的爬虫功能，持续优化分布式爬虫策略。

任职资格：
1、本科及以上学历，有2年及以上的爬虫项目经验；
2、熟练掌握 Python/Java/JavaScript 任意语言，Python 优先；
3、熟悉常见的反爬机制及对应的应对措施，如cookie识别；
4、熟悉网页爬虫、分布式、多线程开发技术；
5、有爬取电商平台如天猫、京东、亚马逊经验者优先；
6、善于主动学习，责任心强，良好的沟通表达能力。

公司介绍：
深圳市某知名科技有限公司
公司成立于2012年，是集研发、设计、生产、销售于一体的国家级高新技术企业，主营业务致力于为用户提供全方位的数码配件解决方案，主营产品涵盖手机配件、电脑配件、影音配件、车载配件、居家生活配件及工控配件等品类，产品远销海内外，深受用户好评。