职位描述
1、参与爬虫项目的架构设计、研发、编程工作，改进和提升爬虫效率；
2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
3、负责后台爬虫数据的分布式存储设计以及代码实现；
4、负责网页采集任务的分析及采集方案设计；
5、负责分布式爬虫策略持续优化。
2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
3、负责后台爬虫数据的分布式存储设计以及代码实现；
4、负责网页采集任务的分析及采集方案设计；
5、负责分布式爬虫策略持续优化。
任职要求
1、参与爬虫项目的架构设计、研发、编程工作，改进和提升爬虫效率；
2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
3、负责后台爬虫数据的分布式存储设计以及代码实现；
4、负责网页采集任务的分析及采集方案设计；
5、负责分布式爬虫策略持续优化。
2、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
3、负责后台爬虫数据的分布式存储设计以及代码实现；
4、负责网页采集任务的分析及采集方案设计；
5、负责分布式爬虫策略持续优化。
福利
大数据行业 热门商圈 股票期权 弹性工作
