优秀实用范文分享
岗位职责: 1、负责公司核心产品大数据架构规划与设计、为开发、部署和数据分析提供技术支持; 2、负责通用的分布式环境下算法大数据平台构建,大数据中心大数据离线或实时处理,包括矩阵计算、变量构造、算法封装,快速支持算法应用。 3、主导平台系统的数据库结构设计,解决各种统计及数据分析的技术问题; 4、对数据中心高并发/高负载应用进行调优。 任职资格: 1、本科以上学历,信息管理或计算机相关专业; 2、5年以上大数据工作经验,其中至少1年以上大数据平台架构规划与设计经验; 3、大数据处理经验丰富,熟悉hadoop map/reduce编程;对hbase/hive有实际使用经验,熟悉实时计算以及离线计算的体系结构和运行机制; 4、熟悉常见的分布式计算和存储的相关技术,包括yarn,mapreduce,spark,storm,zookeeper, hive,pig,hbase, mongodb, mysql等,至少熟练掌握其中3项以上技术; 5、良好的沟通能力和学习能力。 6、有mysql集群,sharding存储架构经验优先考虑。