jobber

申请人

【国美互联网】招聘 爬虫工程师
工作地点：北京 三元桥 （近三元桥/亮马桥地铁，国美总部）
团队介绍：融洽团队氛围，员工多来自一二线互联网公司，你将参与整个流程，众多优秀的数据中心大牛与你一起成长
薪资：月薪*13-14+全额社保公积金+高频培训+团建基金+零食供应+良好的办公环境

爬虫工程师
岗位职责
1、负责对外网数据格式变更以及防爬策略升级时能够及时升级现有爬虫，负责维护外网数据稳定抓取
2、对抓取内容进行格式化，不断优化爬虫架构
任职要求 1. 有扎实的java开发基础，熟悉java多线程开发
2. 熟练使用python语言
3. 熟练使用Linux系统
4. 熟悉MySQL等关系型数据库和redis,mongo等非关系数据库
5. 熟悉HTTP 及 TCP 底层协议
6. 熟悉httpclient、jsoup、webdriver、htmlunit、Nutch、selenium、phantomjs等技术
7. 有分布式爬虫开发经验，熟悉反爬虫技术
8. 熟悉正则表达式，熟悉xpath, css selector，熟悉网页抓取/解析, 有网页消重, 统计分析等研发经验
9. 有熟悉lucene，elasticsearch，solr等开源信息检索引擎的优先，有大数据开发，hadoop, spark, hive开发经验优先

感兴趣可以发简历到邮箱：
QQ咨询： 3370376993 请备注【工作】