大数据是什么工作

| 企服解答

大数据工作者可以施展拳脚的领域非常广泛，从国防部、互联网创业公司到金融机构，到处需要大数据项目来做创新驱动。目前大数据的工作分为Hadoop大数据开发方向、数据挖掘、机器学习方向、大数据运维方向三个方向。

大数据是什么工作

1、Hadoop大数据开发方向 

Hadoop里面包括几个组件HDFS、MapReduce和YARN，HDFS是存储数据的地方就像我们电脑的硬盘一样文件都存储在这个上面，MapReduce是对数据进行处理计算的，它有个特点就是不管多大的数据只要给它时间它就能把数据跑完，但是时间可能不是很快所以它叫数据的批处理。

2、机器学习方向 

机器学习属于人工智能研究与应用的一个分支领域。机器学习的研究更加偏向理论性，其目的更偏向于是研究一种为了让计算机不断从数据中学习知识，而使机器学习得到的结果不断接近目标函数的理论。

机器学习，引用卡内基梅隆大学机器学习研究领域的著名教授Tom Mitchell的经典定义：如果一个程序在使用既有的经验E(Experience)来执行某类任务T(Task)的过程中被认为是“具备学习能力的”，那么它一定要展现出：利用现有的经验E，不断改善其完成既定任务T的性能(Performance)的特质。

3、大数据运维方向

这里说的大数据运维主要是指hadoop生态体系方面的运维，在一些小公司或者传统行业的大公司也会使用oracle、db2等技术栈，在互联网行业数据量稍微大点的公司基本都是使用hadoop技术栈，像在电信或者银行领域基本上是oracle/db2、hadoop同时使用。

| 拓展阅读

目前大数据在各行各业中都能够得到应用

1、医疗器械职业

医疗器械职业有着许许多多的病案，病理陈述，痊愈计划以及药品陈述这些。在未来，凭借着数据管理平台，人们可以收集不一样的病案与治疗计划及其患者的本质特征，可以创立有关病症特性的数据库查询。

2、生物大数据

自人类基因组计划完成以来，以美国为代表，世界主要发达国家纷纷启动了生命科学基础研究计划，如国际千人基因组计划、DNA百科全书计划、英国十万人基因组计划等。这些计划引领生物数据呈爆炸式增长，目前每年全球产生的生物数据总量已达EB级，生命科学领域正在爆发一次数据革命，生命科学某种程度上已经成为大数据科学。

3、金融交易

大数据在金融行业的应用主要是在金融交易。高频交易(HFT)是大数据应用比较多的领域。其中，大数据算法被用来作出交易决定。现在，大多数股权交易都是通过大数据算法进行，这些算法越来越多地开始考虑社交媒体网络和新闻网站的信息来在几秒内做出买入和卖出的决定。