在工作岗位上,大数据工程师需要基于Hadoop,Spark等构建数据分析平台,进行设计、开发分布式计算业务。负责大数据平台(Hadoop,HBase,Spark等)集群环境的搭建,性能调优和日常维护。负责数据仓库设计,数据ETL的设计、开发和性能优化。参与构建大数据平台,依托大数据技术建设用户画像。
除开以上是需要负责处理的工作,还需要负责分析新的数据需求,完成数据处理的设计(文档)和实现。对大数据应用产品设计及解决方案设计,通过大数据挖掘用户需求。负责数据处理程序设计框架改善,数据处理性能优化, 系统数据处理的能力提高等等。
能够纯熟处理以上工作的大数据工程师,月薪轻松突破15K不难。当下行业极缺人才,一名合格的大数据工程师是诸多企业争抢的对象,并且开出来的薪资都不菲。以北京为例,大数据工程师的起步薪资,都是10000起,随着工作能力的提升,薪资待遇也会跟着提升。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。
举报投诉
-
工程师
+关注
关注
59文章
1569浏览量
68506 -
大数据
+关注
关注
64文章
8883浏览量
137407
发布评论请先 登录
相关推荐
FPGA算法工程师、逻辑工程师、原型验证工程师有什么区别?
逻辑工程师和 FPGA 原型验证工程师在工作重点和职责上存在一定的区别:
FPGA 算法工程师:
主要关注算法的设计和优化,以在 FPGA 平台上实现高效的计算和处理。他们需要深入理
发表于 09-23 18:26
嵌入式软件工程师和硬件工程师的区别?
、机器人等。 定义和工作职责 嵌入式软件工程师的主要职责包括但不限于:设计、开发、测试和调试嵌入式软件应用程序,以满足特定硬件和软件要求。他们需要理解并掌握嵌入式系统的基本原理,熟悉相关硬件接口
发表于 05-16 11:00
鸿蒙Harmony是如何影响Android工程师的呢?
迅猛,目前已经有包括社交、金融、影音、游戏、资讯、食品等多个领域的企业以及开发者加入到鸿蒙的生态建设中,可以说是从日常工作生活的各个领域全面展开。
为什么会影响Android开发工程师?
因为自从华为
发表于 01-14 22:14
评论