在工作岗位上，大数据工程师需要基于Hadoop，Spark等构建数据分析平台，进行设计、开发分布式计算业务。负责大数据平台（Hadoop，HBase，Spark等）集群环境的搭建，性能调优和日常维护。负责数据仓库设计，数据ETL的设计、开发和性能优化。参与构建大数据平台，依托大数据技术建设用户画像。
除开以上是需要负责处理的工作，还需要负责分析新的数据需求，完成数据处理的设计（文档）和实现。对大数据应用产品设计及解决方案设计，通过大数据挖掘用户需求。负责数据处理程序设计框架改善，数据处理性能优化， 系统数据处理的能力提高等等。
能够纯熟处理以上工作的大数据工程师，月薪轻松突破15K不难。当下行业极缺人才，一名合格的大数据工程师是诸多企业争抢的对象，并且开出来的薪资都不菲。以北京为例，大数据工程师的起步薪资，都是10000起，随着工作能力的提升，薪资待遇也会跟着提升。
全部评论