大数据是什么意思

关注：63 发布时间：2021-08-03 07:02:30

导语本文整理了大数据是什么意思经验知识，帮助您全面了解，小白也能成为高手，跟随小编一起来看一看吧！

精简回答

大数据是指常规软件工具在一定时间范围内无法捕捉、管理和处理的数据集合。它是一种海量、高增长和多样化的信息资产，需要新的处理模式来具有更强的决策、洞察和发现以及流程优化能力。

“大数据”是现在出现非常频繁的一个词。大家都说现在是大数据时代。你知道大数据真正意味着什么吗？下面小系列就给大家讲讲。

详细介绍方法/步骤

大数据，it行业术语，是指常规软件工具在一定时间范围内无法捕捉、管理和处理的数据集合。它是一种海量、高增长和多样化的信息资产，需要新的处理模式来具有更强的决策、洞察和发现以及流程优化能力。victor mayer-schoenberg和kenneth cookeye写的大数据时代中的大数据是指所有数据都用于分析处理，没有随机分析(抽样调查)的捷径。大数据的5v特性(ibm提出):容量、速度、多样性、价值、准确性。

麦肯锡研究所给出的定义是：在获取、存储、管理和分析方面，规模极大地超过传统数据库软件工具能力的数据集。它有四个特点：数据规模大、数据流快、数据类型多样、价值密度低。

大数据技术的战略意义不在于掌握海量的数据信息，而在于对这些有意义的数据进行专业化处理。换句话说，如果把大数据比作一个行业，这个行业盈利的关键在于提高数据的“处理能力”，通过“处理”实现数据的“增值”。从技术上讲，大数据和云计算的关系就像硬币的正反面一样密不可分。大数据不是单台计算机就能处理的，必须采用分布式架构。其特点在于对海量数据进行分布式数据挖掘。但它必须依靠云计算、分布式数据库、云存储和虚拟化技术的分布式处理。

随着云时代的到来，大数据越来越受到关注。分析师团队表示，大数据通常用于描述公司创建的大量非结构化数据和半结构化数据，当到关系数据库进行分析时，会花费太多的时间和金钱。大数据分析经常与云计算联系在一起，因为对大数据集的实时分析需要像mapreduce这样的框架来将工作分配给几十台、几百台甚至几千台计算机。大数据需要特殊的技术来有效地处理容差时间内的大量数据。适用于大数据的技术包括mpp数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展存储系统。比较小基本单位是位，所有单位按顺序给出：bit、byte、kb、mb、gb、tb、pb、eb、zb、yb、bb、nb、db。

大数据包括结构化、半结构化和非结构化数据，非结构化数据正日益成为数据的主要部分。idc的调查报告显示，企业中80%的数据是非结构化数据，这些数据每年以指数级增长60%。大数据只是互联网发展到现阶段的一种表现或特征。没必要神话它，也没必要敬畏它。在以云计算为代表的技术创新的背景下，这些原本看似难以收集和使用的数据变得易于使用。通过各行各业的不断创新，大数据将逐渐为人类创造更多价值。

当今社会是一个发展迅速、科学技术先进、信息流通、人与人之间交流更加密切、生活更加方便的社会。大数据就是这个高科技时代的产物。阿里巴巴创始人马云在台湾演讲中提到，未来的时代不会是it时代，而是dt时代，也就是data technology，说明大数据对阿里巴巴集团的作用举足轻重。有些人把数据比作含有能量的煤矿。煤炭按其性质分为炼焦煤、无烟煤、肥煤和贫煤，而露天煤矿和深山煤矿的开采成本是不同的。同样，大数据不是“大”，而是“有用”。价值含量和开采成本比数量更重要。对于很多行业来说，如何利用这些大规模的数据是赢得竞争的关键。