在工作岗位上,大数据工程师需要基于Hadoop,Spark等构建数据分析平台,进行设计、开发分布式计算业务。负责大数据平台(Hadoop,HBase,Spark等)集群环境的搭建,性能调优和日常维护。负责数据仓库设计,数据ETL的设计、开发和性能优化。参与构建大数据平台,依托大数据技术建设用户画像。
除开以上是需要负责处理的工作,还需要负责分析新的数据需求,完成数据处理的设计(文档)和实现。对大数据应用产品设计及解决方案设计,通过大数据挖掘用户需求。负责数据处理程序设计框架改善,数据处理性能优化, 系统数据处理的能力提高等等。
能够纯熟处理以上工作的大数据工程师,月薪轻松突破15K不难。当下行业极缺人才,一名合格的大数据工程师是诸多企业争抢的对象,并且开出来的薪资都不菲。以北京为例,大数据工程师的起步薪资,都是10000起,随着工作能力的提升,薪资待遇也会跟着提升。
全部0条评论
快来发表一下你的评论吧 !