jobber

申请人

工作地点：北京市朝阳区
欢迎咨询QQ：582577608
邮箱：zhangxiaochen@cmcm.com

工作职责：
1. 负责end to end大数据采集、存储、计算、分析等场景的架构设计和开发；
2. 针对业务需求建模，以机器学习方法进行分析、预测；
3. 负责以上各种架构平台及相关基础技术组件的稳定性保障及故障排查。

任职要求：
1. 具备分布式系统研发经验，3年以上大数据开发经验；
2. 具备Web Service、大数据处理方法和软件架构知识 : -熟悉hadoop/pig/hive/spark等工具, 了解MapReduce原理； -掌握pig/hive/spark等语言的细节，熟悉内部语法； -有能力分析大数据任务的瓶颈，通过优化代码，节省计算开销，优化任务处理速度； -熟悉oozie等调度程序，能使用调度程序搭建和维护一个例行的数据处理pipeline； -明确数据承载的业务，对和业务相关的数据处理逻辑有清楚的认知； -对所负责数据pipeline处理数据的规模和任务延迟有清晰的认知；
3. 独立解决复杂问题，领导重要项目；
4. 愿意接受挑战，学习新技术并用创新思维解决问题。