第6篇 etl高级工程师岗位职责及相关职位要求

etl高级工程师职位要求

1、计算机、数学或统计等专业，本科以上学历；

2、精通sql语言；熟悉数据仓库设计、建模；

3、精通python，能够编写脚本处理、分析数据；

4、熟悉批量离线式分布式并行计算技术（如hadoop、mapreduce、hive、spark等）

5、熟悉sqlserver、mysql数据库；了解redis等非关系型数据库；

6、熟悉至少一种常用etl工具（如kettle、ssis、gobblin）；了解常用报表工具（如reporting services以及各类开源报表）；

7、了解常用数据挖掘方法（回归、决策树、聚类等）。

etl高级工程师岗位职责

1、负责国际网站后台数据仓库搭建、维护；

2、运用各类大数据工具设计etl流程，消费生产环境埋点、日志等数据；

3、日常数据监控以及数据预警，异常数据解读挖掘，并与业务同事沟通解决方案；

4、分析用户的特征和行为数据，挖掘不同类型用户的行为特性，为实际的业务运营提供数据支持；

5、从数据分析结果中寻找insight和商业价值，并以简明扼要的形式传导到其他部分，指导实际的业务运营；

6、处理国际网站的临时数据需求，并对于常用重要需求转化成数据产品。