大数据时代下数据分析理念的辨析( 二 ) 1、大数据概述

3、大数据背景下的智能数据理念分析
大数据具有一定的复杂性，只有通过使用新的智能分析技术才能对数据进行有效处理。目前已经有专家针对大数据提出了新的智能分析技术方案，例如HAVEn、TeradataAster分析平台，经过研究发现推出的一系列分析方案，基本上离不开Hadoop分析平台。 Hadoop主要分为以下两大部分，其中一个部分是分布文件系统，专家称之为HDFS ，另一部分是分布计算系统，专家称之为MapReduce 。一般来说HDFS主要是表现为主/从结构，其中主结构称为名字节点，主要功能是管理元数据，从结构通常称为数据节点。主要功能是用来存放，或者管理相关的应用数据。一个HDFS系统能够支持的数据非常庞大，一般能够达到10PB数量级，因此HDFS系统能够应用于大数据处理分析中。同时为了能够更好的支持大数据，在HDFS系统的基础上，还继续构建Hbase系统，该系统的接口语言色设为Pig 。并且还构建了Hivi系统，该系统主要是属于数据仓库。此外还构建了机器学习软件包，称为Mahout ，这样就可以对大数据进行有效管理以及分析。这些新的智能数据分析融合了多种传统的技术，能够对大数据进行更为全面、高效的分析。
4、结语
大数据包含结构内外的海量数据，随着云计算平台进行大规模收集处理，通过建立数据库的手段，对数据分流，使用数据挖掘等方法进行处理、分析，使得所数据结果更加符合显示状况。数据分析理念是通过阐明存在于世界、物质、感官享受上的复杂网络关系，从而做出符合时代背景的分析决策。