第17篇 数据平台开发经理岗位职责

工作职责:

1. 构建分布式大数据服务平台,参与和构建公司包括海量数据存储、离线/实时计算、实时查询,大数据系统运维等系统;

2. 服务各种业务需求,服务日益增长的业务和数据量;

3. 深入源码内核改进优化开源项目,解决各种hadoop、spark、hbase疑难问题。

4. 负责管理大数据工程团队。

任职资格:

1. 计算机或相关专业本科以上学历(5年以上工作经验);

2. 精通c++/java/scala程序开发(至少一种),熟悉linux/unix开发环境;

3. 熟悉常用开源分布式系统,精通hadoop/hive/spark/storm/flink/hbase/kafka/flume之一源代码,解决问题;

4. 有大规模分布式系统开发、维护经验,有故障处理能力,源码级开发能力;

5. 具有良好的沟通协作能力,具有较强的分享精神;

6. 对kudu、kylin、impala、elasticsearch,github等系统有深入使用和底层研究者加分。