云计算体系架构与大数据分析（云计算体系架构与大数据分析论文）

云计算与大数据的关系

云计算与大数据的关系是云计算是基础，没有云计算，无法实现大数据存储与计算。

两种主流技术已成为IT领域关注的焦点-大数据和云计算。根本不同的是，大数据只涉及处理海量数据，而云计算则涉及基础架构。但是，大数据和云技术提供的简化功能是其被大量企业采用的主要原因。例如，亚马逊的“ Elastic Map Reduce”演示了如何利用Cloud Elastic Computes的功能进行大数据处理。

两者的结合为组织带来了有益的结果。更不用说，这两种技术都处于发展阶段，但是它们的结合在大数据分析中利用了可扩展且具有成本效益的解决方案。

那么，我们可以说大数据与云计算完美结合吗？好吧，有数据点支持它。除此之外，还需要处理一些实时挑战。

大数据和云计算这两种技术本身都是有价值的。 此外，许多企业的目标是将两种技术结合起来以获取更多的商业利益。两种技术都旨在提高公司的收入，同时降低投资成本。尽管Cloud管理本地软件，但大数据有助于业务决策。

大数据和云计算的关系

大数据与云计算的概念

大数据

指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

大数据领域的人才需求主要围绕大数据的产业链展开，涉及到数据的采集、整理、存储、安全、分析、呈现和应用，岗位多集中在大数据平台研发、大数据应用开发、大数据分析和大数据运维等几个岗位。

大数据本身除了要有数据、采集、汇聚一定量的数据之外，更重要的是数据的处理、挖掘、分析、可视化、应用这样一整套的过程。关于大数据的话题，基本围绕三个问题展开：一是数据从哪里来，二是数据如何进行分析，三是数据如何进行商品化。

云计算

是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。

云计算的应用目前正在经历从IaaS向PaaS和SaaS发展，在用户分布上也逐渐开始从互联网企业向广大传统企业过渡，未来的市场空间还是非常大的。

大数据与云计算的联系

大数据与云计算经常联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十数百或甚至数千的服务器分配工作，大数据需要特殊的技术，以有效地处理大量数据。适用大数据的技术，包括大规模并行处理数据库、数据挖掘电网、分布文件系统、分布式数据库、计算平台、互联网和可扩展的存储系统，大数据指的海量的数据一般日处理PB级别以上，一般用于挖掘，分析，做一些智能性商业板块。

从理论角度来看，二者属于不同层次的事情，云计算研究的是计算问题，大数据研究的是巨量数据处理问题，而巨量数据处理依然属于计算问题的研究范围，因此，从这个角度来看，大数据是云计算的一个子领域。

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术，随着云时代的来临，大数据也吸引了越来越多的关注。

从应用角度来看，大数据是云计算的应用案例之一，云计算是大数据的实现工具之一。综上，大数据与云计算既有不同又有联系，但在现实中，由于大数据处理时为了获得良好的效率和质量，常常采用云计算技术，因此，大数据与云计算便常常同时出现于人们的眼前，从而造成了人们的困惑。

大数据注重的是数据分析，云计算是偏向计算机软硬件架构与应用。大数据方向需要有一定的数学基础，如果数学不是很好，这个学习起来比较吃力。云计算需要计算机技术能力较强。两个方向应该来说都需要良好的数学基础和编程基础。

大数据和云计算各有不同的关注点，但是在技术体系结构上，都是以分布式存储和分布式计算为基础，所以二者之间的联系也比较紧密。

总结，不管云计算怎样去变化，必然需要依托数据中心实现落地。可以说，云计算是数据中心“叶子”，云计算通过“光合作用”促进数据中心的发展，而数据中心得壮大又为云计算发展提供了坚实的基础，这二者起到相互依存，互相促进的作用。

云计算和大数据是什么关系

大数据和云计算在技术体系结构上，都是以分布式存储和分布式计算为基础，所以二者之间的联系也比较紧密。

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

从应用角度来看，大数据是云计算的应用案例之一，云计算是大数据的实现工具之一。

云计算的特点

1、虚拟化技术。

必须强调的是，虚拟化突破了时间、空间的界限，是云计算最为显著的特点，虚拟化技术包括应用虚拟和资源虚拟两种。众所周知，物理平台与应用部署的环境在空间上是没有任何联系的，正是通过虚拟平台对相应终端操作完成数据备份、迁移和扩展等。

2、动态可扩展。

云计算具有高效的运算能力，在原有服务器基础上增加云计算功能能够使计算速度迅速提高，最终实现动态扩展虚拟化的层次达到对应用进行扩展的目的。

3、按需部署。

计算机包含了许多应用、程序软件等，不同的应用对应的数据资源库不同，所以用户运行不同的应用需要较强的计算能力对资源进行部署，而云计算平台能够根据用户的需求快速配备计算能力及资源。

4、灵活性高。

目前市场上大多数IT资源、软、硬件都支持虚拟化，比如存储网络、操作系统和开发软、硬件等。虚拟化要素统一放在云系统资源虚拟池当中进行管理，可见云计算的兼容性非常强，不仅可以兼容低配置机器、不同厂商的硬件产品，还能够外设获得更高性能计算。