云计算及其关键技术范文1
关键词：云计算；虚拟化；分布式；海量数据
0 引言
随着网络技术的大力发展和IT技术的迅猛发展，网络需要处理的数据量以爆炸式的速度增长，并且对数据的处理能力提出了更高的要求。计算机的计算能力、数据存储能力已经达不到人们的期望值，网络资源的供需关系出现不均衡状态。一些应用需要大量的网络资源，相反还有大量的网络资源处于闲置状态。鉴于此，网络资源的整合、优化是网络发展的必然选择，而这一发展的产物便是云计算（Cloud Computing）。云计算作为一种新型的计算模式为数据计算和存储管理提供了虚拟资源空间和超强的计算能力，可使用户廉价、高效、灵活地享受服务。云计算慢慢的进入的人们的视野，已经成为一个研究的热点，因此有必要弄清楚云计算的关键技术和发展中出现的问题。
1 云计算定义
自云计算的概念提出以来，有关云计算的定义一直是百家争鸣。这足以表明云计算具有丰富的内涵，也说明专家和学者们对它的重视。
从应用方面来定义：云计算既不是单纯的计算，又不是单纯的技术，而是一个在现有网络的基础上把所有软硬件资源整合优化，充分利用和调动这些数据资源，通过组建一种新型的服务模式为人们提供各种不同层面、不同需求的廉价、高效的智能化服务。可以理解为云计算就是服务。
从技术方面来定义：云计算是传统计算，例如网格计算、分布式计算、并行计算、效用计算和网络技术。例如网络存储、虚拟化、负载均衡等发展融合的产物，是一种新兴的商业计算模型。
一般的理解是，把基于网络上的服务器集群上的硬件资源（服务器、存储器、CPU等）和软件资源（应用软件、集成开发环境等）统称称为“云”。本地计算机只需要通过网络发送一个请求，远端就会有成千上万的计算机为用户提供需要的资源并将结果返回给本地计算机，这样，本地计算机几乎不需要做什么，所有的处理都在云计算服务商所提供的计算机集群上来完成。
2 云计算的关键技术
2.1编程模型
为了用户能方便、自由地享受云计算带来的服务，能利用编程模型编写简单的应用程序来满足要求，所以，云计算的编程模型应尽量地简单易学，而MapRe-duce这种新兴的编程模型是适合云计算的。MapRe-duce是由Google提出来的，用来开发Google搜索结果分析时大量计算的并行化处理，它支持在服务器集群上的规模庞大的数据集的并行计算。该模型架构设计是受到函数式程序设计中的两个常用Map（映射）函数和Reduce（化简）函数的启发，首先通过Map将数据分割成不相关的区块，调配给网络上的多个计算机来处理，以便实现分布式的运算效果。然后通过Reduce将多个计算机的处理结果汇总输出。因此，用户只需要提供自己编写的Map程序和Reduce程序就可以在服务器集群上进行大量的分布式数据处理。
2.2分布式数据存储
为了保证位于云中的数据具有更高的可用性及可靠性，云计算采用的是分布式的数据存储方法。分布式技术最早由Google向全球用户提供搜索服务的，它利用的是可以让多达百万台的低能计算机协同工作的分布式架构。云计算平台由许多服务器组成。同时需要并行地为多个用户提供服务，因此云计算采用分布式的方式对网络上的海量数据进行存储，而分布式的存储方式适合云计算的多用户的特点。它通过安全的冗余存储技术，应用存储系统的高容错性进而提高数据存储的可靠性，也保证了云计算存储的高吞吐率。
2.3虚拟化技术
虚拟化技术是实现云计算的核心技术，它可以将软件应用与底层硬件相隔离，是云计算依托的基础。同时也是云计算区别于传统计算的重要特点。虚拟化技术实现了物理资源的逻辑抽象和统一表示，通过计算元件在虚拟的基础上运行将计算机的硬件设备进行逻辑上的扩大，它不但能够将单个资源划分成多个虚拟资源的裂分模式，并且能够将多个闲置的资源整合成一个虚拟资源的聚合模式，节约了维持多个资源所需的成本。虚拟化技术根据用户业务需求的变化能够按需分配资源，合理利用，从而实现动态的负载均衡，大大提高了资源的利用率。
2.4海量数据处理
为了提高海量数据处理的效率，通常采用并行计算模型。并行计算是提高计算机系统计算速度和处理能力的一种有效手段。它是把云计算中被求解的具有海量数据问题分解成若干个小问题，每个小问题均由一个独立的计算资源来完成，即同时使用多种计算资源（例如多个处理器、廉价PC等）协同解决同一问题的过程。并行化计算，利用多机的计算资源，加快了数据处理的速度。
3 云计算亟待解决的核心问题
云计算的优势不言而喻，云计算似乎是无所不能，但是云计算的发展才刚刚开始，仍面临着许多威胁与挑战，还有一些问题和不足需要解决。
3.1标准化和规范化问题
目前，各个云计算平台所使用的重要技术标准可能不同，这就会使得用户利用云计算编程模型开发的应用程序很难在云计算平台之间迁移，即不同的云计算平台不通用，从而降低了云计算服务转移的弹性。因此，有必要设立开放的云计算公共标准和规范化的云计算服务，才能推动云计算的健康发展，才能使用户自由地享用云服务。
3.2数据安全性问题
云不能保证用户的私密数据资源不会被窃取或泄露丢失，因此无法保证数据的绝对安全性。对用户而言，存储于云端的数据是不透明的，数据存储的具置和分布情况也无法知道，况且云计算服务商还没有提供服务水平协议，对于相关事故没有可依赖的协议来解决，也没有提供必要的信息供第三方的认证机构对数据的产生进行安全性和准确性的审计和认证。
3.3网络稳定性问题
云服务要求网络连接具有持续性。Web应用程序的效率在带宽不足或不良的网络连接环境下会大大缩减，即使是网络相当快，由于数据资源在用户端和服务器集群间不断传递，也会导致Web应用程序比桌面应用程序反应慢。此外，网络也会受到一些外力因素的影响而出现故障，如何应对这些突况，云计算中心如何快速恢复故障，有没有一些备用的方案，这也是一个不得不考虑的问题。
3.4法律法规和监管问题
目前，尚未有相关的国家或国际法律法规来支持和规范云计算，也缺乏一个监管机构来监督管理云计算。云计算服务商和用户之间的责任及纠纷问题该如何规定等。都没有明确统一的法律依据。
3.5市场调节问题
云计算的影响力正在逐渐向软件、硬件和服务等领域漫延。它的出现对于传统的软件是一个变革，传统软件需要云化，才能改善传统软件的服务能力：它的山现改变了传统硬件模式，影响硬件的出货量，对硬件供应商造成一定的冲击；同时，服务的模式也在发生变化。由于现有软件、硬件制造商的利益受到威胁，这势必会导致市场的激烈竞争。这就需要对市场进行正确的引导和调节。
云计算及其关键技术范文2
关键词：云计算 关键技术 发展前景
中图分类号：TP3 文献标识码：A 文章编号：1007-9416（2013）08-0242-01
1 引言
随着计算机和网络技术的不断发展深入，各种新兴的应用也开始逐渐兴起。计算资源、数据资源、软件资源等等资源的累积虽然丰富了整个网络资源，但是还是存在着利用率较低的情况。为了解决这一问题，经过了网格计算整合大量闲散资源的历程，现今的提高数据中心的利用率，增强服务质量的云计算开始成为了网络计算新模式。
2 何谓云计算
云计算实质上最早出现于John McCrthy这位计算机先驱者的语言中，正是由于这一预言，计算机研究者们开始进行了大量的计算模式，最终形成了云计算技术。对于云计算的定义，并没有一个规范性的标准。例如以美国国家标准与技术研究院对其的定时是认为云计算是一种通过互联网来对资源共享池的访问，并进行大量计算的模式。维基百科对云计算的基本定义为云计算是一种基于互联网的计算方式，通过这种方式，共享的软硬件资源和信息可以按需求提供给计算机和其他设备[1]。云计算首先提供的是一种“服务”，用户能够快速的获取自身所需；其次是保证了数据冗余和分布式存储的数据的准确性；再则则是通过云计算系统来提高整个编程模型。云计算能够根据工作负荷的大小来动态的分配资源，通过大规模资源池的共享，来提高资源的利用率，保证了运行成本的下降。
3 云计算的关键技术
云计算作为一种新型的计算方式，给互联网技术领域的发展提供了强大的基础。云计算极大降低了互联网建设及其运用维护成本，降低了资源的浪费，推动了各个行业信息化的发展建设。云计算为了实现其功能，在数据中心、数据存储、云安全上拥有其关键的核心技术。
3.1 数据中心节能技术
云计算中的资源数量庞大，消耗电能的数量据不完全统计50000个计算节点每年的耗电量大约在1亿千瓦时。为了响应绿色节能号召，解决能耗利用率问题，实施绿色环保节能技术。云计算数据中心的能耗主要在设备和冷却装置中，针对这一想象，计算机设备可以通过数据中心虚拟化的自适应能耗管理系统来解决能耗的管理能力，另外也可以提高和控制CPU的频率来达到；冷却装置则可以通过建立多层次的数据中心来实现冷却装置的设计，考虑到空气流、空间大小、热交换等因素，提高数据中心布局的合理性。
3.2 数据存储技术
云计算是一种采用分布式、并行和网格是来存储数的一种计算方式，同一份数据通过多个副本的方式进行存储[2]。云计算能够满足大量用户需要，同时向用户提供服务。云计算的数据存储技术基本上都是以HDFS的数据存储技术，其中GFS是比较经典的数据存储技术。GFS采用分布式数据密集型计算来形成文件系统，通过冗余存储的方式，确保数据的准确性，运用数据的多个副本，保证数据的一致性，从而达到高性能服务。
3.3 云安全技术
作为计算技术体系演进的新阶段，云计算时代的到来正在打破以往形成的产业格局甚至是政府监管的传统方式，特别是棱镜门暴露出来的数据安全问题尤其让人担忧。云安全融合了网格计算、并行技术、未知病毒判别等最新的信息安全概念和技术，成为了信息安全的全新体现。云安全通过网状的客户端对网络中的异常行为进行实时监测，并把这些问题及时地输送到服务端进行处理，把处理结果发送到客户端，保证操作的安全性。
云计算是一个庞大的计算系统，关于云计算的关键技术还有数据管理技术、人物管理技术、虚拟机技术等，本文不一一列举说明。
4 云计算的发展前景分析
云计算作为互联网变革的核心组成部分，对于整个产业的发展起到了至关重要的作用。云计算的推广普及已逐渐形成规模，尤其是其关键技术所促进的虚拟化、存储和安全，促进了云计算的更加成熟与广泛应用。云计算不仅对企业、个人，甚至对于社会都造成了巨大的影响。云计算把互联网公司的商业模式逐渐变为软件的服务型服务，带动了商业理念的改变。同时为个人的应用提供了较多的便利，多人协作办公、任何地点随时访问、访问网络条件的PC等都可以通过云计算实现。但若干对于整个社会来说，云计算促进了整个信息化时代的到来，为提供企业信息化，推动信息系统向高效低能的绿色环保方向发展[3]。
参考文献
[1]维基百科.云端运算http：///.
云计算及其关键技术范文3
关键词：云计算；发展
1 引言
如今，云计算技术打破了高端技术“独享”的局面，让每个普通用户和中小企业都能以极低的成本享有原先只有大型企业才能享有的高端技术服务。云计算彻底改变了我们的工作方式和商业模式，云计算已经走入我们的生活。
2 云计算的概念及其基本原理
狭义的云计算指的是厂商通过分布式计算和虚拟化技术搭建数据中心或超级计算机，以免费或按需租用方式向技术开发者或者企业客户提供数据存储、分析以及科学计算等服务。
广义的云计算指的是厂商通过建立网络服务器集群，向各种不同类型的客户提供在线软件服务、硬件租借、数据存储、计算分析等不同类型的服务。广义的云计算包括了更多的厂商和服务类型。
通俗地讲，云计算是一种基于Internet的超级计算模式，在远程的数据中心里，成千上万台电脑和服务器连接成一片电脑云。因此，云计算甚至可以让你体验超乎想像的运算能力，用户通过电脑、笔记本、手机等方式接入数据中心，按自己的需求进行运算。
云计算的基本原理是，通过使计算分布在大量的分布式计算机上，而非本地计算机或远程服务器中，企业数据中心的运行将更与互联网相似。这使得企业能够将资源切换到需要的应用上，根据需求访问计算机和存储系统。
3 云计算的特点及其关键技术
基于云计算概念及原理，云计算应至少具备如下特点：一是以网络为中心，云计算的整体架构是建立在由多台计算机或其他硬件设备构成的网络环境中；二是以服务为提供方式，以按需服务的方式根据不同用户的个性化需求推出多层次的服务；三是高扩展性和高可靠性，基于网络构建的云计算可以快速灵活地适应用户不断变化的需要，同时通过网络冗余机制实现高可靠性；四是资源透明化，底层资源（计算、存储、网络资源等）对用户透明，用户无需了解资源具体实现和地理分布等细节。
为了实现上述特点，云计算采用了如下关键技术：一是数据分布存储技术，通过采用分布式存储的方式存储数据，采用冗余存储的方式保证存储数据的可靠性，提高软件可靠性弥补硬件的不可靠，从而提供廉价可靠的系统；二是并行计算编程模型，将任务自动分解成多个子任务，通过Map和Reduce两个步骤实现任务在大规模计算节点中的调度和分配；三是高效数据管理，通过采用列存储的数据管理模式实现在规模巨大的数据中高效地找到特定数据；四是分布资源管理，云计算系统在多节点并发执行环境中可以保障关键节点出现故障时的自动迁移及其状态的同步。
4 云计算的服务方式
云计算已在日常网络中随处可见，以各种形式提供服务，云计算的主要服务方式有：IaaS（Infrastructure as a Service，基础设施即服务）、PaaS（Platform as a Service，平台即服务）和SaaS（Software as a Service，软件即服务）三种形式，其中IaaS是把计算、存储、网络及搭建应用环境所需的一些工具当成服务提供给用户，使得用户能够按需获取IT基础设施。它由计算机硬件、网络、平台虚拟化环境、效用计算计费方法、服务级别协议等组成，其表现形式是为用户提供按需付费的资源服务，例如虚拟服务器、存储等；PaaS是把分布式软件的开发、测试和部署环境当作服务，通过互联网提供给用户，其表现形式是为用户提供基于可扩展的大规模基础设施的平台能力与资源服务，例如云应用开发与运行环境、用户数据、信息资源、公共服务能力；SaaS是一种基于互联网来提供软件服务的应用模式，它通过浏览器把服务器端的程序软件传给千万用户，供用户在线使用，其表现形式是为用户提供基于云基础架构的应用软件服务，例如CRM、文档编辑，典型的商用代表是Google公司基于云计算平台提供的Google办公套件，只用浏览器即可访问使用。
5 云计算的发展现状及前景
随着网络技术的不断完善和成熟，以及云计算应用的不断深入，越来越多的人开始重视云计算，不仅仅大中小企业广泛应用云计算，人们的日常生活也会像离不开煤气、水电那样，离不开云计算。
云计算已经从前期的起步阶段开始进入实质性发展的阶段。互联网公司、基础运营商、软硬件IT企业及各地政府等多方力量都在积极推动云计算发展。我国已将云计算列为新一代信息技术产业的重点领域，“十二五”将给予大力扶持。与此同时，运营商在主管部门的大力支持下，已经开始大规模部署云计算解决方案来加速云实施。云计算在企业中正变得无处不在，大多数公司正在尝试云计算。目前，已经有相当一部分大中型企业开始应用私有云及混合云，而针对小型企业的公有云项目也开始启动。“十二五”期间我国云计算将步入高速发展期。
参考文献
[1]中国云计算网..
云计算及其关键技术范文4
关键词:云计算;网格计算;计算模式
Discusses the New Computation Pattern - Cloud computation
Chen Jia
(Shaoyang College,Information&Engineering Department,Shaoyang422000,China)
Abstract:The cloud computation is near two year IT profession new computation pattern,it will have the profound influence to the future life way and working pattern.The article introduced the cloud computation's concept,the characteristic as well as its main form,searched have analyzed the cloud computation key technologies,finally has made the prospect forecast to the cloud computation's future tendency.
Keyword:Cloud computation;Grid computation ;Computation pattern
随着网络的日益普及和IT技术的迅猛发展,网络存储和网络计算等服务也不断深入到人们生活的方方面面,改变着传统的生活方式和工作模式。目前,PC依然是我们日常工作生活的核心工具―我们用来处理工作文档、存储数据、发送Email、业务计算或与别人信息共享等。然而,当PC硬盘出现问题而无法修复时,我们将束手无策而最终丢失所有个人数据。而在未来的“云计算”时代,“云”会替我们做存储和计算的工作。
一、基本概念和特点
(一)云计算是2007年才兴起的新名词,对它的定义和内涵众说纷纭,目前在网上至少有几十种说法。“云”的概念,对于计算机来说并不陌生,它是对那些网状分布的计算机的比喻,也是指那些由服务器按你的需要所进行的看不到的计算过程。随着对计算能力、资源利用效率、资源集中化的迫切需求,云计算应运而生。
(二)云计算的特点:从现有的云计算平台来看,它与传统的单机和网络应用模式相比,其特点如下:①虚拟化技术。这是云计算最强调的特点,包括资源虚拟化和应用虚拟化。每一个应用部署的环境和物理平台是没有关系的。通过虚拟半台进行管理达到对应用进行扩展、迁移、备份,操作均通过虚拟化层次完成。②动态可扩展。通过动态扩展虚拟化的层次达到对应用进行扩展的目的。可以实时将服务器加入到现有的服务器机群中,增加“云”的计算能力。③按需部署。用户运行不同的应用需要不同的资源和计算能力。云计算平台可以按照用户的需求部署资源和计算能力。
二、云计算的核心技术
按需部署是云计算的核心。要解决按需部署,必须解决资源的动态可重构、监控和自动化部署等,而这些又需要以虚拟化、高性能存储、处理器、高速互联网等技术为基础。所以云计算除了需要仔细研究其体系结构外,还要特别注意研究资源的动态可重构、自动化部署、资源监控、虚拟化、高性能存储、处理器等关键技术。
(一)体系结构。为了有效支持云计算,其体系结构必须支持几个关键特征。首先,系统必须是自治的,即需要内嵌有自动化技术,以减轻或消除人工部署和管理任务,而允许平台智地响应应用的要求;其次,云计算的架构必须是敏捷的,能够对需求信号或变化做出迅还的反应。内嵌的虚拟化技术和集群化技术,能应付增长或服务级要求的快速变化。云计算平台的体系结构:(1)用户界面:“云”用户请求服务的交互界面;(2)服务目录:用户可选择的服务列表;(3)管理系统:用于管理可用计算资源和服务;(4)部署工具:自治的,根据用户请求智能地部署资源和应用,动态地部署、配置和回收资源;
(二)自动化部署。自动化部署,是指通过自动安装和部署,将计算资源从原始状态变为可用状态。在云计算中体现为将虚拟资源池中的资源进行划分、安装和部署成可以为用户提供各种服务和应用的过程,其中包括硬件(服务器)、软件(用户需要的软件和配置)、网络和存储。
三、云计算的发展趋势
云计算被视为科技业的下一次革命,它的出现和应用范围的逐渐扩展,必将对未来用户的工作模式和企业的商业模式,产生根本性的改变和深刻的影响:
(一)云计算将赋予互联网更大的内涵并改变互联网企业的运营模式。过去几乎所有应用都是装在用户端或者局端数据库上运行,但今后通过云计算,更多地应用能够以互联网服务的方式进行。云计算的先驱者之一谷歌甚至强调未来几乎所有的软件都可以搬上互联网,以服务取代软件。
(二)云计算将扩大软硬件应用的外延并改变软硬件产品的应用模式。有一种流行的说法,将云计算比喻为电厂集中供电的模式,即客户不再需要己购买发电机发电,而只要去电厂买电使用就够了。也就是说,通过云计算,用户可以不必购买新的服务器和部署软件,就可以得到应用环境或者应用本身。
结语:伴随着云计算时代的到来,人们生活的交互性将越来越密切,创建一个全球对话和多层面的协作已经完全成为可能,并成为一种趋势。虽然,目前云计算的计划更多的集中在商用领域,并未真正涉及到普通的日常应用,而且还有诸多问题需要解决,但是只要IT技术在不断发展,不断进步,必将最终惠及到普通的消费者用户。
参考文献:
[1]孙颜珍.新型网络应用模式――云计算初探[J].电脑知识与技术.2008
[2]邓倩妮,陈全.云计算及其关键技术[J].高性能计算发展与应用.2009,(1)
云计算及其关键技术范文5
关键词 云计算；WEB；数据挖掘
中图分类号：TP391 文献标识码：A 文章编号：1671-7597（2013）14-0064-01
并行计算技术、软件技术以及网络技术等多元技术发展后，出现了云计算技术。云计算商业价值以及科研价值都获得了肯定，IBM、Google等公司都非常重视云计算技术。随着云计算的快速兴起与发展，在数据存储与商业化应用方面将得到显著提升，这也是云计算技术的一大重要价值所在。Web数据挖掘凸显出极大的应用价值。本文分析了云计算框架下的Web数据挖掘算法。
1 云计算的关键技术
与一般计算不同的是，作为一种超级计算，云计算的核心信息是数据，且属于密集型。在数据存储、数据管理以及编程模式等多方面凸显出个性化的特点。本章所介绍的有关云计算的数据存储技术、虚拟化技术、数据管理技术以及编程模式。
1.1 大量分布式存储技术
在云计算技术中，其关键的分布式存储具有诸多优点：有精确性、高效率以及实用性等。采用冗余存储的方式能够保证数据存储的精确性。而硬件上所存在的缺陷可通过适当的软件来完善，因此拥有了大量的分布式存储技术，经济性与实用性等特性比较地突出。
1.2 数据管理技术
云计算系统含有数项服务内容，诸如分析大数据集的特点并及时地采取相应的处理和分析的方式，从而凸显出运行的高效性优点。因而，全面高效地管理大数据集是云计算数据管理技术中不可或缺的一项重要内容。在数据管理下，还可以迅捷地搜索到预定的数据。
1.3 虚拟化技术
作为一类分配计算资源的途径，虚拟化技术也是云计算中的重要技术。该技术把不同级别的应用系统，诸如硬件、软件、数据、网络以及存储等系统独立化，肢解数据中心、服务器、存储、网络、数据以及应用物理设施内部的分工状态，达到动态构建体系结构的目的，完成集中管理以及共时使用的物理资源以及虚拟资源的任务。虚拟化技术强化了结构体系的弹性以及灵活性，减少了开支，完善服务，尽可能都规避管理风险。
1.4 并行编程模式
云计算的编程模型的确立必须要关注到后台的保障性作用，在具体的执行过程中要确保其合理的进度。这样才能够使得云计算资源得到最大限度地使用，用户也能够更为便捷地使用该项资源。
云计算所采用的模式是Map-Reduce编程。最初的一个任务会形成“树枝状”的结构，其下的子任务会通过Map以及Reduce等流程来加以执行，从而保证任务能够及时准确地完成。
2 Web数据挖掘
Web数据挖掘是由Web、数据挖掘、计算机语言学以及信息学等数个学科构建而成。数据挖掘技术以及Web通过一定的途径得到了有机的统一整合之后，显现出综合性的特性。在对挖掘对象展开比较全面分析的基础上，Web数据挖掘又被细化成包括内容、结构以及使用等方面的挖掘方面。其中，内容挖掘的内涵界定为：经由人工化的组建模式，在Web环境下从相关的文件夹中提取使用者所需信息；结构挖掘的内涵界定为：经由人工化方式下，针对多项结构进行挖掘，通过多种途径方式从中提取出使用者所需信息；使用挖掘的内涵界定为：将挖掘的对象聚焦于日志文件以及内在所包含的数据内容作为突破口，发掘本站点的浏览人及其用户数量。
3 基于云计算的数据挖掘技术
当下的数据挖掘技术已广泛地运用于网络安全、搜索引擎、电子商务以及信息通信等诸多方面，效果也让人满意。其中，下面的几类程序应用的范围更为广泛：基础设施也就是服务（IaaS）型的计算密集型并行处理应用程序、平台也就是服务（PaaS）型的网络业务以及软件应用即服务（SaaS）型的Web2.0应用程序。与以前数据挖掘技术相同的是，基于云计算的数据挖掘也要做好有关数据的预处理、挖掘以及评估结果模式等多项工作。点击流决定了大多数的网站数据格式，因此，基于云计算的数据挖掘技术方式和以往的数据库格式相异。
3.1 数据的收集和处理
该环节要采用决策树区工具来区分用户访问数据以及Web机器人访问数据。同时，在该环境下，基于网络的大规模数据的展开过滤、转换与整合等工作内容都将得到解决，且还能将对应的数据转换为半结构化XML文件，然后将其保存至分布式文件体系内。
Google 公司最近推出了Map-Reduce新型并行编程。它把并行化、容错、数据布局、负载均衡等多项功能集中于库中，并把系统操作数据的流程总结成2个阶段：Map 阶段以及Reduce 阶段。运用Map-Reduce途径来搜集数据比较地广泛，但开发工具Hadoop本身并不完备，通过窗口技术可以把数据加以分离，且将满足条件的动态数据进行连续性的静态状况呈现于窗口内，因此，抽样、直方图以及小波变换或哈希等途径可以及时地保存数据结构及其数据信息内容。系统本身并不具备保存扫描、搜集数据的功能，却算法也并不复杂，同时，应用程序又牵涉到利用历史数据的功能，从而弱化了整个系统的功能。目前有数个研究机构构建相关系统项目，包括STREAM，TelegraphCQ以及Aurora等，但影响并不明显。
3.2 数据存储
基于云技术进行数据挖掘，要关注到搜集、处理数据时的高效性，同时还要注意如果节点失效，还应该注意迁移计算以及存储的数据内容。因此，还要借助于冗余存储的方法来确保数据储存的稳定性与可靠性。
在云计算数据存储应用领域中，非开源系统最为著名的当属Google公司旗下的GFS，开源系统最为著名的则是Hadoop开发的HDFS，这两大系统现已得到极为广泛的发展与应用。随着技术的深化，今后在多个领域中的应用也将得到进一步提升，尤其在对数据存储和计算的迁移工作中，将打破当前效率低下的困境，使得数据处理效率得到显著提升，并促进其商业化应用。
4 结束语
在云计算背景下的WEB数据挖掘已然成为当前国内外计算机领域的热门课题，其研究成果的应用范围极其广泛，具有很高的现实价值。
参考文献
[1]王鹏.走进云计算[M].北京：人民邮电出版社，2009（6）：182.
[2]陈修宽.Web数据挖掘综述[J].山东轻工业学院学报，2009，23（3）：23-8.
[3]刘丽珍.网络结构挖掘的关键分析[J].计算机应用研究，2003（5）：116-118.
云计算及其关键技术范文6
关键词：3D 动画渲染 云计算技术
中图分类号：TP3 文献标识码：A 文章编号：1007-9416（2016）06-0000-00
随着我国动画产业发展脚步的不断加快，3D动画电影对画面质量的要求越来越高，传统动画渲染技术已然无法满足这一需求，对渲染技术的优化与完善势在必行。在这种情况下，云渲染应运而生，利用成熟的云计算技术和云渲染理论，有效解决了3D动画电影渲染工作量大、画面质量低等问题，同时也大幅度降低了3D动画的渲染成本，给3D动画产业的可持续发展奠定了坚实的基础。
1 云计算技术概述
所谓云计算技术，是计算机技术和网络技术飞速发展下新兴的一种商业计算模式，具有快速弹性、自助式服务、服务可计量、划分独立资源池以及无处不在的网络访问等特点。与传统计算机技术相比，云计算技术具有以下优点：（1）云计算技术增强了数据的安全性和可靠性，有效解决了数据丢失、病毒入侵的问题；（2）云计算降低了用户端的设备要求，具有较高的便捷性，进一步扩大了该项技术的使用范围；（3）云计算技术可以顺利实现不同设备之间的资源共享；（4）云计算技术可以为用户使用网络提供多种可能。正因为具备诸多优势，从而使得云计算技术近几年得到了诸多网络用户的青睐。
2 3D动画渲染中云计算技术的应用
近年来，伴随着3D动画产业的飞速发展，云计算技术在动画渲染中的应用也逐渐被重视起来。渲染是3D动画创作的最后一个环节，主要是指在原有三维模型的基础上加入阴影、材质以及灯光效果，从而使其变成真实可见的视觉效果的过程。渲染在3D动画创作中非常重要，因此必须对其给予高度重视。
3.1 云渲染的关键技术
云渲染中采用的各项技术，其目的都是为了确保各项渲染工作顺利完成，最终实现预期的渲染效果，提高画面质量。云渲染中的关键技术有很多，归纳起来，大致包括以下几种：（1）虚拟化技术。该技术模式下，同一物理机上可以允许多个不同系统的虚拟机并行运行，每台虚拟机都有与其相应的虚拟硬件，可以在这些硬件中加载应用程序和操作系统；（2）云存储。云存储系统主要是利用网络技术、分布式文件系统等功能将网络中不同的存储设备集合起来协同工作，同时将数据信息对外提供的一类系统；（3）云服务。云服务也是云渲染中的一项关键技术，云服务的功能主要是为用户提供数据存储和读取等工作。目前，常用的云服务主要有三种类型，即IaaS、PaaS和SaaS，与之相关的部署模型则主要包括公共云、私有云、社区云和混合云四种。
3.2 渲染平台种类及其渲染流程
就目前应用于3D动画创作中的元渲染平台来看，大致包括三种类型，即Renderbus、Foxrenderform和渲云。其中，Renderbus渲染平台和Foxrenderform渲染平台是兄弟品牌，Renderbus渲染平台是国内第一家网络渲染平台，同时也是目前国内最大的网络渲染平台，两者的渲染流程相同，主要分为以下4个步骤：（1）将需要渲染的动画场景文件进行压缩后上传；（2）接受待渲染文件并对其进行在线解压缩；（3）根据场景文件的实际情况合理设置渲染参数，比如说长度、宽度以及输出文件格式等；（4）下载渲染结果。
渲云渲染平台在当前3D动画渲染工作中的应用也十分广泛，该平台打破了传统渲染平台的运行模式，真正意义上实现了线上渲染服务模式，并降低了渲染成本。渲云渲染平台的渲染流程大致分为以下4个步骤：（1）以3ds Max2013为例，首先打开“文件”菜单，选择“另存为”选项，执行Archive命令，然后选择保存路径将其保存并上传；（2）在渲云网站上下载所需的PC客户端，登陆后在上传的文件中找到所需渲染的场景文件进行下载，然后根据自身需求选择渲染方式并提交渲染任务；（3）在“支付并下载”中提交下载任务并支付，渲染任务完成之后系统便会进行自动下载；（4）渲染任务下载之后，用户便可在“已下载任务”中查看任务。
4结语
综上所述，随着我国云计算技术的不断进步，云渲染在3D动画创作中的优势也将得以充分发挥，不仅大幅度节省了动画渲染的时间，而且对动画画面质量的提升也具有重要意义。可以预见，在未来的时间里，云计算技术势必会在3D动画领域得到广泛发展，进一步促进我国3D动画产业的长足发展。
参考文献
[1]魏三强.云计算技术在3D动画渲染中的应用[J].吉林师范大学学报：自然科学版，2014（04）.
[2]刘葵，葛志游.云计算技术在动漫渲染行业的应用拓展研究[J].广州大学学报：自然科学版，2013（02）.
