大数据工程师是做什么的

Question

如题所述

Answer 1

大数据工程师主要是，分析历史、预测未来、优化选择，这是大数据工程师在“玩数据”时最重要的三大任务：

找出过去事件的特征：大数据工程师一个很重要的工作，就是通过分析数据来找出过去事件的特征。找出过去事件的特征，最大的作用是可以帮助企业更好地认识消费者。通过分析用户以往的行为轨迹，就能够了解这个人，并预测他的行为。

预测未来可能发生的事情：通过引入关键因素，大数据工程师可以预测未来的消费趋势。

找出最优化的结果：根据不同企业的业务性质，大数据工程师可以通过数据分析来达到不同的目的。

扩展资料

大数据工程师需要学习的知识

1、linux

大数据集群主要建立在linux操作系统上，Linux是一套免费使用和自由传播的类Unix操作系统。而这部分的内容是大家在学习大数据中必须要学习的，只有学好Linux才能在工作中更加的得心应手。

2、Hadoop

我觉的大家听过大数据就一定会听过hadoop。Hadoop是一个能够对大量数据进行离线分布式处理的软件框架，运算时利用mapreduce对数据进行处理。

参考资料来源：百度百科-大数据分析师

Answer 2

是国家重点扶持战略性新兴产业，大数据产业已逐步从概念走向落地“大数据”和“虚拟化”两大热门领域得到了广泛关注和重视，90%的企业都在用大数据，所以行业需求大，这方面人才的需求也是非常旺盛。就业方向有JAVA工程师、大数据开发工程师、Linux内核架构师、大数据软件工程师、系统集成工程师等。行业月平均薪资也是在8k以上。3、学习课程：计算机组装与维护、C语言程序设计、JSP应用开发、企业网站实训等。

Answer 3

从部分大数据开发工程师的招聘要求可见一斑，需掌握的技能包括但不限于如下几个方面：
1、hadoop/spark/hive/flink等常见离线和实时大数据平台架构，有相关大数据系统开发、维护和整合经验；
2、编程基础扎实、动手实践能力强，至少熟练掌握一门开发语言（python/java/go/scala/c++等），熟悉hive sql使用；
3、熟悉常见的大数据开发工作流，熟练掌握大数据接入、数据清洗、数据挖掘分析&数据可视化工具；
4、了解常见的机器学习算法基本原理，熟悉安全攻防对抗、广告安全对抗等相关业务场景。