职位名称: 大数据开发工程师
工作地点: 北京
工作类别: 大数据平台开发
公司性质: 全球顶尖AI独角兽公司
工作职责
-
负责Hadoop、HBase、Hive等大数据平台的规划、部署、监控、系统优化的工作
-
为线上服务高效稳定运行负责,支撑业务和数据量的快速扩张
-
优化使用集群的流程及规范,使集群使用在资源利用、质量等方面均达到较高水平
-
持续的创新能力,新技术跟进及落地
任职资格
-
熟悉Hadoop、Hbase、Kafka、Hive、Spark等组件的工作原理,并有2年以上Hadoop生态系统运维经验
-
深度优化HADOOP平台MR作业/计算框架/存储技术,提升集群吞吐并降低成本
-
熟悉HADOOP生态,并能对平台CPU/MEM/IO/网络/调度中一个或多个方面的性能调优
-
熟练掌握java/python/go中的任意一门语言,有实际项目开发经验
-
强烈责任感、缜密的逻辑思维能力,良好的沟通能力
-
本科以上学历,有至少2年以上Hadoop生态系统运维经验