大数据华而不实么?大数据的本质是什么?( 三 )


大数据和小数据的区别 。分析方法有何不同?
小数据分析方法 。即传统的数据分析 。是指用适当的统计分析方法对收集来的大量数据进行分析 。提取有用信息和形成结论而对数据加以详细研究和概括总结的过程 。
大数据的基本处理流程与传统数据处理流程并无太大差异 。主要区别在于:由于大数据要处理大量、非结构化的数据 。所以在各处理环节中都可以采用并行处理 。目前 。Hadoop、MapReduce和Spark等分布式处理方式已经成为大数据处理各环节的通用处理方法

大数据华而不实么?大数据的本质是什么?

文章插图
上图显示了传统的大数据工作流分析经历的一些阶段 。数据以数据库 。数据流 。数据集合以及数据仓库等方式来建模 。数据的数量级以及数据的多样性要求在处理之前要进行数据的集成、清洗以及过滤等工作 。以保证其后续工作的开展 。
其他观点:
【大数据华而不实么?大数据的本质是什么?】大数据应该是一种事物或一类事物的总和 。它们具有其共性 。若是几种事物的总和 。由于没有共性可言 。我们收集它们就没有了实际意义了 。这就是大数据的本质 。

推荐阅读