jobber

申请人

职位描述：
1. 负责构建垂直类爬虫架构，智能抓取系统设计与研发（如抓取调度，多样化抓取，页面解析和机构化抓取，海量数据存储和读取等）
2. 负责爬虫核心算法的策略优化研究，提升爬虫抓取效率和质量（如调权调度，分析预测，质量判断，封禁和反封禁研究等）
3. 负责http、ajax等各类网络请求分析，探索和研究各类高校的数据抓取方案。
任职要求：
1. 本科及以上学历，良好的代码能力，扎实的数据结构和算法功底，有快速迭代、逐步优化的工程项目经验
2. 具有良好逻辑思维能力，沟通能力，团队合作精神、学习能力，抗压能力，对挑战性的问题充满激情
3. 熟悉linux和Java开发，熟悉shell/perl/python等脚本语言，熟练掌握正则表达式
4. 有多线程、网络数据处理经验优先
5. 有大规模分布式海量数据处理经验优先（如hadoop/Hbase/Spark/Storm/Flink等）

薪水40~80W
欢迎直接投递简历或发送到1845623805@qq.com