高中作文网

云计算数据论文(6篇)

时间: 2024-01-11 栏目:公文范文

云计算数据论文篇1

关键词:云计算;图书馆;电子资源

基金项目:河北省教育厅青年基金“云计算环境下华北地区高校图书馆电子资源存储及服务模式研究”研究成果之一(课题编号:sq124012)

中图分类号:tp文献标识码:a

原标题:云计算环境下的高校图书馆电子资源建设

收录日期:2013年4月1日

一、云计算的涵义

云计算从2007年被提出以后,就一直是国内外网络技术与服务研究的热点。云计算的研究具有多面性,国内外关注的视角也有差别。国外的研究主要有信息技术、信息行为和综合研究等几种视角,国内主要是从信息技术理论探讨和技术实现视角研究云计算,相对来说,云计算技术的基础理论研究备受关注。

云计算,是指基于互联网的超级计算模式。即把存储于个人电脑、移动电话和其他设备上的大量信息和处理器资源集中在一起,协同工作。云计算的基本原理是,通过使计算分布在大量的分布式计算机上,而非本地计算机或远程服务器中,图书馆数据中心的运行将与互联网更加相似。这使得图书馆能够将资源切换到需要的应用上,根据需求访问计算机存储系统。

从技术层面上讲,云计算基本功能的实现取决于两个关键因素,一个是数据的存储能力,另一个是分布式的计算能力。因此,云计算中的“云”可以再细分为“存储云”和“计算云”,也即“云计算=存储云+计算云”。“存储云”是一个大规模的分布式存储系统。“存储云”对第三方用户公开存储接口,用户可以根据自己的需要来购买相应的容量和带宽。“计算云”包括并行计算和资源虚拟化。虚拟化最主要的意义是用更少的资源做更多的事。在计算云中引入虚拟化技术,就是力求能够在较少的服务器上运行更多的并行计算,对云计算中所应用到的资源进行快速而优化的配置等。

二、电子资源

电子资源是电子信息资源的简称,与数字资源基本同义,是指所有以电子数据的形式把文字、图像、声音、动画等多种形式的信息存贮在光、磁等非纸介质的载体中,并通过网络通信、计算机或终端等方式再现出来的资源,需要借助连接在计算机上的设备阅读的文献。包括光盘数据库(网络版和单机版)、网络数据库或联机数据库、电子图书、电子期刊以及internet信息资源,包括web站点、电子讨论组、邮递表、新闻组、公告栏等。

电子资源包含以下基本要素:以数字化形式存在;代表了数字对象的集合;需通过一定的设备才能获取;经过人类的开发组织。电子资源具有内容丰富、形式多样、出版更新快、查找使用方便等特点,作为一种新型的信息资源,它日益受到人们的青睐,已经成为图书馆馆藏资源建设的重要组成部分。

高校图书馆馆藏电子资源的形式主要包括以下几种:(1)购买或租赁的电子资源,主要指由出版商或数据库商生产发行的、商业化的正式出版物,包括数据库、电子期刊和电子图书等,其中数据库又包括参考数据库(书目、文摘、索引)、全文数据库和事实数据库;(2)自行开发的特色数据库,如河北联合大学图书馆建设开发的煤矿创伤文献数据库;(3)学科导航,即围绕某个学科(专业)对互联网上的资源进行整序和重新组织,并向馆内外读者提供信息服务,提供重要学术网站和免费学术资源的导航。

三、云计算在高校图书馆电子资源建设中的应用

(一)云计算为高校图书馆电子资源建设带来了更为方便、快捷、安全的服务。云计算给高校图书馆电子资源建设提供了最可靠、最安全的数据存储中心。我们不用再担心数据丢失、病毒入侵等麻烦。很多人觉得数据只有保存在自己看得见、摸得着的电脑里才最安全,其实不然,你的电脑可能会因为自己不小心而被损坏,或者被病毒攻击,导致硬盘上的数据无法恢复,进而让有机会接触你的电脑的不法之徒则可能利用各种机会窃取你的数据。然而,云计算严格的权限管理策略可以帮助你放心地与你指定的人共享数据。这样,你不用花钱就可以享受到最好、最安全的服务,甚至比在银行里存钱还方便。

(二)云计算可以轻松实现电子资源在不同设备间的数据与应用共享,可以轻松实现馆与馆的数据共享。目前,高校图书馆的设备具有多样化和复杂化等特点,云计算考虑到不同设备的数据同步方法种类繁多,操作复杂,要在这

多不同的设备之间保存和维护最新的一份联系人信息,各馆需要为此付出难以计数的时间和精力。这时,我们就应用云计算来让一切都变得更简单,在云计算的网络应用模式中,数据只有一份,保存在“云”的另一端,你的所有电子设备只需要连接互联网,就可以同时访问和使用同一份数据。这样可以达到各馆数据更深一层次的共建共享。

(三)电子资源建设馆之间开展云计算服务,可以共享软、硬件资源,节省存储空间。随着图书馆馆藏资源数量和种类的增加,各级各地图书馆都不同程度地面临着资源存储空间不足、网络传输速度缓慢、数据库更新及设备维护工作成本高等困境。云计算技术的推广和应用为图书馆解决困境提供了良好的技术和办法。高校图书馆电子资源建设可以开展云服务,购买自动化集成系统、数据库建设软件,部署在数据中心或硬件条件较好的图书馆,通过租用的方式为成员馆提供服务,充分利用电子资源建设内的软硬件资源,中小图书馆以较小的成本就可以使用自动化集成系统进行管理或者建设自己的特色数据库。

云计算模式的出现,给高校图书馆电子资源带来了机遇,同时也使我们对未来云计算在图书馆电子资源建设中的应用产生无尽的遐想,把云计算运用到高校图书馆中,不但可以提高资源的利用率,节约各成员图书馆的资源,也可以给云计算带来一个新的应用领域。目前,虽然云计算的应用还处于探索阶段,相信随着云计算在其他领域的成熟应用,必定在图书馆中也有一番作为。

主要参考文献:

云计算数据论文篇2

关键词:数据中心;云计算;服务;体系结构;参考模型

中图分类号:TP393文献识别码:A文章编号:1001-828X(2015)017-000-01

一、引言

我国在面对美国等发达国家施于压力下经济快速发展,毅然在10年成为了世界第二个经济体,也在为保持这一现状采用各种科学技术手段做出了巨大努力。在互联网行业中我国也通过云计算为其发展做出了重大改变,也因此通过这一能力将计算机进行了一次重大的改变。因此不难看出,云计算对于计算机以及整个互联网的作用是多么的巨大[1]。在我国经济逐渐发展形式下,以及经济飞速发展转变形态下,不仅在互联网领域中,也在各个行业中占据了巨大的市场。基于云计算的数据中心是目前大数据应用环境下的重要技术之一,也是影响我国数据中心快速发展的一项关键技术。进入云计算时代,面向数据中心的云计算应用系统成为相关领域发展的热点问题。

二、数据中心的发展趋势

目前的数据中心已然不能跟随时展潮流,必须将云计算注入到传统的数据中心当中,云计算逐渐成为了在经济发展下的新型商业模式。云计算能力在国外广泛应用,而且发展速度飞快,然后我国目前对云计算数据中心的投入实在太少,所以导致了发展速度过慢,无法跟随其他国外国家发展速度,使得云计算在我国落后[2]。本文根据分析比较国内外对云计算的使用状况得知,通过阅读相关资料和自己的观点思考找出了我国与他国的差距,并重点分析这差距,提出所在的问题,并根据提供的问题找到解决办法和措施。

三、基于云计算的数据中心设计

对云计算数据中心的设计采用面向云计算的设计理念,通过运用“池”的设计方式对整个信息系统就行设计,因此将数据中心分为四个资源池,分别为计算,存储,网络和安全优化池。每一个池之间都可以完成对资源的调整[3]。如今使用动态的云计算的操作系统,来保证系统中信息的先进,安全,开房,共享等性能,确保在系统在运行中的避免带来的问题,使得系统在运行中畅通无阻和使用后的服务带来高效便捷。

对于云计算的虚拟化技术是将计算机系统全面进行虚拟化设置,包括对计算机,网络,存储等进行虚拟化处理,根据虚拟化技术来完成对云资源的整体进行动态调整。

(一)计算资源

对计算机的资源进行虚拟化之后数据中心可以更充分对资源进行合理应用,可以提高计算机设备在实际操作中的可用性,减少资源占用空间,降低了计算机的耗能,从而减少了经济投入[4]。通过虚拟化,将计算机原有的功能进行强化,构造出一台非常强的超级计算机,用户就不需要对计算机性能产生怀疑,通过加强性能,提高计算机整体性能来满足用户所需,使用户在完成任务时畅通无阻。

(二)存储资源

对信息进行统一保存是在NAS网络为基础的存储结构,它们可以通过网络进行与总服务器的连接[5]。

建立一个相对统一的存储系统可以减少文件或信息的容量,也可以对存储类别进行整理规划。通过建立的统一的存储系统用户不必担心每一个系统支持的内容不同,因为统一的存储可以互相支持其带有的协议,也不需要考虑存储信息的利用率问题。

用户在使用统一存储时,可以随意自由分配所存储的资源,因为外部环境会出现变化,此时如果用户不能根据需求对文件进行支配时会导致无法完成业务。

在很多实际情况中,所使用的用户在使用他们的服务器时因为考虑到性能问题此时就要对数据模块的RDM提出相应的要求。如果采用统一存储,用户就不需要大费周折的选取需要的数据,因为统一存储会为用户自行选择,不需要分别购买其他设备。

(三)网络资源

当今网络状况是,数据中心内部主要依靠以太网络,FC网络主要应用于存储。科学技术和互联网技术的发展,使得基于光纤通信技术的10Gb以太网被广泛应用与社会和企业。如果用统一的将其进行整合,是原来复杂的数据中心得以简化,减少对其经济投入[6]。

(四)安全及优化资源

云计算进入鼎盛的时期,这就要求对其反应的数据的防护更为严格。以往传统的系统中的硬盘和存储功能中几乎都采用了虚拟和软件化的方式,如果在全新的云计算功能中已然采用这样的办法,就会出现安全问题,从而导致系统的防护系统崩溃,影响系统带来的功能,因此也会影响其运行速度,降低了数据中心的运行效率。

四、云计算数据中心发展展望

第一,基于对数据中心的重建,建立的新的标准可以提高效率并且做到绿色节能。第二,通过建立较为晚上的基础硬件设施形成一个统一的互联网企业,为将来的发展提供所需要的功能,云计算的发展要建立在数据中心发展基础上,为运营商提供力所能及的帮助[7]。第三,如果使用云计算数据中心技术,采用其提供的各种技术,可以充分得到其带来的对内外的应用服务,使云计算中心在发展下用了巨大的突破,并且在实际操作中的可行性得到了保证。第四,该技术的发展应用被广泛推广,使得资源合理分配利用,不会出现浪费或无用的资源,云计算成为在互联网行业的核心。第五,云计算不仅应用于特定行业,也可以在不同各个行业中得以利用,成为互联网和物联网的基础结构,为互联网和物联网的发展提供了保障。

五、结论

本文讨论了数据中心在云计算时代下的技术发展进行全面概括总结,通过分析和研究未来发展方向下的应对方法,数据中心提供的服务在日前所有行业中承当这非常重要的作用,在面对云计算盛行的情形下,数据中心提供的数据服务必须要适应云计算发展要求,更加全方位的提高其对用户服务的能力,使得在运行中减少经济成本,提高数据管理效率。

参考文献:

云计算数据论文篇3

关键词:云计算;安全问题;虚拟化技术;云服务

中图分类号:TP311文献标识码:A文章编号:1007-9599(2011)04-0000-01

CloudComputingSecurityTechnology

LiShaobiao

(QingyuanSeniorTechnicalSchool,Qingyuan511517,China)

Abstract:CloudcomputingisInternet-basedcomputernetworktechnology,theInternetasthecenteristoprovidereliableandsecuredatastorage,fastandconvenientInternetservicesandinformationcenterisverypowerfulcomputingcapabilities.Inthecloudcomputingenvironment,howtoensurethesafetyofstoreddataonacloud,cloudcomputingisamajorproblemfacingthesystem.Inthispaper,thebasicprinciplesofcloudcomputingandcharacteristicsofpaperexpoundsthesecurityofcloudcomputingandsecuritytechnologYtoaddressthesemethods.

Keywords:Cloudcomputing;Securityissues;Virtualizationtechnology;Cloudservice

一、云计算的原理及特点

云计算一种基于Internet的计算,是把数据处理交由网络进行,由数据中心处理终端的数据,这样就可以通过数据中心向不同设备的用户提供数据服务。云计算是由分布式处理、并行处理及网格计算共同发展的产物,是通过网络使计算分布在大量的分布式计算机上,而非在本地计算机或远程服务器中,数据中心的运行将更与互联网相似,这使得终端能够将资源切换到需要的应用上,根据需求访问计算机和存储系统。云计算一般具有以下特点:虚拟化技术、高数据量、高扩展性、高安全性、高可靠性、容易管理、终端要求低、灵活定制等。

二、云计算的安全问题

(一)虚拟化问题。虚拟化技术为云计算的平台提供了资源灵活配置,同时,它也为云计算带来了安全问题。首先,若主机出现问题,所有虚拟机都会有问题,此时客户端服务器有可能被攻克。其次,若虚拟网络出现故障,客户端也随之被损害。再次,客户端和主机之间的共享可能被不法分子利用其漏洞获取,数据安全得不到保障。

(二)开放性问题。客户端数据的存储、处理以及网络传输等等都和云计算系统有密切联系。为保证云计算服务的灵活性和通用性,云计算系统为用户提供开放的访问接口。而云端存放着大量重要数据,只要利用其开放性攻击云系统,就能得到大量需要的数据,若云系统被成功攻击,则会带来重大的数据安全威胁。

(三)服务性问题。为了保证客户端数据的高可用性和服务商的云平台服务、SLA及IT流程、安全策略、事件处理及分析服务的连续性,且云计算系统需要为客户端提供容错备份服务,而且各类软件本身可能存在漏洞等问题,如何使云计算服务不中断且在系统发生故障时能够快速恢复客户端数据也是云计算系统安全性问题的一个挑战。

(四)法律性问题。由于云计算系统的应用地域性较弱、数据流动性较大,云计算服务或客户端数据可能跨区域,甚至延伸到不同的国家,而在政府的信息安全监管等等方面可能还存在这各种各样的法律差异和纠纷,同时由于虚拟化、数据共享等技术而引起的客户端之间物理区域模糊而可能将导致的司法问题也是不可忽视的。

三、云计算的安全保障方法

(一)文件加密及解密的算法。无论是在客户端,还是云计算服务的提供商,都应该对待传输的数据进行加密,这样才能保证文件的保密性和隐私性。使用PGP、TrueCrypt等程序能够加密文件,这样一来就只有使用密码才能读取该文件。只需要把文件保存到网络上之前先进行加密保护,内容就不会被窃取。而对于电子邮件可采用Hushmail进行加密。它还可以自动对用户收件箱的电子邮件进行加密,从而保证那些保存在Hushmail服务器上的电子邮件不会被遭到不法分子的偷窥。

(二)正确选择云计算服务提供商。云计算安全是云计算服务提供商和客户端之间共同的责任。IaaS云服务提供商主要负责为用户提供基础架构服务,云计算基础设施的可靠性、物理安全、网络安全、信息存储安全、系统安全是其基本职责范畴。PaaS云服务提供商主要负责为用户提供简化的分布式软件开发、测试和部署环境,云服务提供商除了负责底层基础设施安全外,还需解决应用接口安全、数据与计算可用性等。SaaS云服务提供商需保障其所提供的SaaS服务从基础设施到应用层的整体安全。

(三)使用虚拟化技术隔离。在云计算系统环境下,物理边界基本消失,因此物理隔离方式已经没有保障了。因此需要设置逻辑安全边界。在安装虚拟服务器时,为每一台虚拟服务器分配独立硬盘分区,使各个虚拟服务器从逻辑上隔离。虚拟服务器系统还需要安装防火墙、杀毒软件、IPS(IDS)、日志记录以及恢复软件,并构成多层次防范体系。而对于每一台虚拟服务器还应该通过VLAN划分不同的IP网段进行逻辑上的隔离。需要通信的虚拟服务器之间通过VPN的方式来进行,以达到虚拟化技术隔离的效果。

(四)使用服务前慎重考虑。只要把数据存放在客户端中就本身有潜在风险,云服务共享数据更让这种风险加剧。在使用云计算服务前要判断哪些数据可以转移到云计算服务中和如何保护重要数据,需要了解并核实供应服务商的标准,弄清楚是否可以对数据进行修改。在使用各种服务的同时,需要对重要信息特别注意,以确保在重要文件中内置安全加密保障措施。而无论把数据存放在哪里,客户端用户都要慎重考虑数据丢失风险并最好提前备份。

四、结束语

云计算系统的安全是权衡用户是否选择使用云计算服务的重要方面之一。只有为用户提供高可靠性、高可信性、高性价比的云计算服务,才能推动云计算的发展。本文在分析云计算的原理及特点基础上,对云计算服务所面临的安全问题进行了分析与研究,并提出了云计算的安全保障方法。。云计算系统未来的发展还是面临着各种各样的挑战,安全问题更是重中之重,相信云计算的应用和服务会朝着健康、高效的方向发展。

参考文献:

[1]黄维真,何荷.“云计算”时代的国家安全[N].中国国防报,2010

[2]阮立志,许凌云.一种基于网格计算环境的安全实现研究,2009,5

[3]米勒.云计算[M].姜进磊.北京:机械工业出版社,2009

[4]张渝江,岳伟.云计算叩开学校大门[J].中国信息技术教育,2008,12

云计算数据论文篇4

关键词:计算机技术;互联网;云计算;概念算法

1计算机云计算的概念及应用特征分析

1.1云计算概念剖析

随着IT产业的进步与发展,计算机互联网提供的服务种类迅速增加,如地图,搜索及其他租赁业务等,互联网服务内容的多样性有效带动了用户规模的进一步扩大,用户数量的急剧增加使得互联网服务得以迅速普及,为有效满足用户对服务实用性及可靠性的需求,互联网服务在不同集群中建立起了分散的数据控制中心,以实现对数据资源的充分开发,同时为用户提供更为优质的服务,而这正是计算机云计算的发展前提。在市场经济中,云计算属于一种全新的商业计算模型,集中了数据储存,数据计算及其他多种软件服务,并将服务模式转化为交付和使用的方式,以实现对互联网动态服务资源的虚拟化处理。经虚拟化处理后的互联网服务资源,其规模能够得到无限扩展,而这正为互联网用户提供了数据信息及时获取的有效途径,极大的满足了当下互联网用户的需求。从数据处理角度分析,云计算是并行处理,分布处理以及网格计算的商业实现。通过在大量分散的计算机上建立起非本地计算机的远程服务,再通过互联网将多个计算机远程服务终端连接成一个庞大的数据网络,并通过互联网将数据资源上传至数据网络中,这样,当用户需要对某些数据进行调阅时,便可利用任意网络设备对数据网络进行访问,进而实现互联网数据的云计算。

1.2计算机云计算应用特征分析

在计算机云计算中,以计算机群为基础实现的数据网络构建,使得局域范围内的数据存储在一定程度上具备了互联网的网络特性,并实现了数据的云端存储和访问,不仅取用便捷,费用也十分低廉。云计算这一工程实现了计算机计算能力向市场商品的转化,独特的数据处理模式也使其具备了一定的应用特征。云计算具备可拓展性。当用户的数据服务需求增加,云计算能够依据用户的需求将资源进行动态划分,以此为用户匹配可用的虚拟资源,在满足其需求的同时,进一步发掘出信息网络数据资源。由于云计算的整体构架是基于互联网而实现的,而互联网运行的本质是为用户提供服务,因此云计算具有以网络服务为中心的特性,在现实中,用户能够通过多种网络终端进行网络数据连接,并以此为基础体验云计算服务。在计算机云计算中,数据概念计算的方法打破了多层次资源的异构性分类方式,通过对数据资源进行统一的管理和调配,以此在互联网中建立起池化数据库,从而为客户提供更为平等而多样性的服务,加之云计算能够处理无限大的数据量,因此更能够从多方面满足用户的不同需求,所以说云计算具有资源池化的特性。

2云概念计算中的不确定推理

在计算机云计算中,由于概念计算规则既可以是一对多的,也可以是多对一的,所以在云计算规则中多规则和单规则计算方式都具有一定的不确定性,开展对不确定性的开发与研究,对云计算的开展是具有十分重要的意义的。云计算中的一对多的规则能够表示为IFA1,A2,……An,thenB,规则中指出多定性概念值是不确定推测的前提条件,通过采用云计算中的概念计算,能够进一步确定云数据发生器的构造规则。而在云计算的概念计算中,为表示前件对应的多维论域的空间数值,必须要以多维云结构为基础而实现,所以云概念计算中的不确定推理也对云结构提出了一定要求,为有效控制云计算中的不确定性,应采取有效的方案对云计算结构加以改进和完善。如设定云计算中规则前件有2个概念变量,其中每个变量对应5个定性概念值,所以经计算可知每个前件可能有25个概念值,这也就意味着经过组合前件可能具有25个定性概念值,论域空间中也需要25个二维云相对应,因此云计算中不确定推理过程是具有一定复杂性的。在云概念实际应用中,推理规则体现的关键是如何处理好多规则之间的关系,通过控制输入值以激活云计算中的定性规则,然后采用计算机云计算中的概念计算方法进行数据计算,便能够最终以数据期望值作为云计算推理结论并加以输出。

3云概念计算实现过程阐述

3.1计算云化过程

在利用n元进行样本云计算过程中,论域为Ω=(U1*U2*U3……*Un),那么便在Ω论域中抽取参数值m个定义为样本参数值,在对参数值进行对应次数的运算后,将每个样本参数值与计算结果进行对比,并定义结果值为s,s=F(a1,a2,a3……an)。在计算样本参数值后,依据云计算中的转换定律,将每次的n元计算转换为n元计算规则R,并将R带入多对一的计算规则中,即为IFa1,a2,a3,……an,thenS,通过对样本中所有的样本参数值进行云概念计算,这样便能够得到m个云概念计算规则所构成的集合。在计算云化过程中,数据的数值变量因素是影响到云概念计算的重要因素,所以在云概念计算过程中,应更为注重对数值和数值变量的云化。数值的云化是指数值变量按照设定好的云概念计算方式加以运算,如在数值云化过程中,首先假设构造U是在过程P中产生的,设定一个定性概念集合为A,在A中包含有K各定性概念,那么概念集合A就可以表示为A={A1,A2,A3,……An},集合中数值变量定义为a,a的集合便能够形成一个定性概念T,最后按照归约化条件ΨA(μ(a)μT(a)|AT)来实现隶属程度u(a)的最大化。数值变量的云化与数值的云化过程稍有差别,数值变量的云化是以论域U中的数值变量为基础的,通过对定性概念集合A中的每个概念进行云概念计算,并将计算后的数据以(Ex,En,He)的形式表现出来,进而实现数据变量的云化。

3.2云概念计算过程

在对数值和数值变量进行云化处理后,能够得出一组数据云概念计算的计算规则,计算规则表明了云概念计算的实质是一种云的推理过程。在此推理过程中,数据推算的过程如图所示:

由图可知,在云概念计算中,当给定一组参数值a1,a2,a3……an之后,对参数值进行云化处理,处理后的数据被呈递给云推理引擎,引擎能够依据云化处理后的数据特征推算出不同参数值之间的计算规则,最后将规则化之后的参数值进行云化,最终输出结果值。在数值云化的过程中,云概念计算通过对参数值a1,a2,a3……an进行数值云化,以通过参数值计算得出一个定性概念Ti,并形成定性概念的参数值,以此来确定云概念计算中的云参数值,为后期云参数的不确定推理提供必要的数据参考。经过云推理引擎处理后的参数值是一个表征定性概念的云,而并非数据本身,因此要完成云概念计算应将在推算过程中引入具体的数值,进而实现云概念计算理论在实际数值计算中的应用。此外,云的数值化计算要按照参数值的规则进行,在对参数值进行云计算时,要以参数值的云化过程为前提,通过云化过程中的计算得出参数值的云规则,进而完成云概念计算结果值的填充。

4云计算中概念计算的实现途径探究

计算机云概念计算服务的根本目的是为用户提供简捷易操作的数据服务,因此在云概念计算的实际应用中,应进一步简化系统处理过程,数据处理复杂性的降低,不仅节省了系统进行数据计算占用的空间资源,也能够提升系统的服务效率。为有效实现云概念计算,通常将计算过程分为预处理过程和功能实现过程两部分。在预处理过程中,系统的各项功能被逐一分解并进行抽象化处理,处理后的功能无需系统进行再处理,便可直接应用到云概念计算系统的计算过程中。系统计算过程的简化,进一步提升了云概念计算的计算效率,也使得系统功能得以优化,为今后云计算系统的发展奠定了稳固的基础。云概念计算过程中,数据的计算量十分庞大,并且计算的精确度也要得到有效保障,而由于云计算系统中的预处理过程是一次性的,一旦得出计算结果便无法修正,所以为保证云概念计算的准确性,还要对云计算过程进行定期检修与维护。

随着计算机互联网技术的日益普及,云计算这一概念也正在逐渐受到社会各领域的高度关注,其在市场中的广泛应用将会有效促进商业模式的转变,在实现科技飞跃的同时,为市场经济的发展带来巨大的商业机遇。由于我国云概念计算服务仍处于初步发展阶段,市场竞争力不足,资源开发仍不完善,因此采取科学有效的方法促进云计算服务的发展是十分必要的。

[参考文献]

[1]于德华.计算数学和科学工程计算及其在中国的若干发展[J].数学进展,2009,3(2):1-6.

[2]李一德,孟海军.隶属云和隶属云发生器[J].计算机研究与发展,,1995,32(5):15-30.

[3]史雪梅,陈辉.定性定量互换模型及其应用[D].南京:通信工程技术学院,2013:12-30.

云计算数据论文篇5

关键词:云计算概述;数据挖掘;平台架构

中图分类号:TP311.13

随着经济的发展和科技的进步,手机、电脑在中国随处可见,互联网甚至是移动互联网融入了人们的日常生活,互联网中无法估量的大量数据不断增长,愈演愈烈,面对着海一般的数据信息,人们不能准确的找到自己想要的数据,像手机APP,手游等移动互联网产品,每天都承载着非常多的数据,对运营商而言,如何进行数据分析以及数据挖掘成为一个亟待解决的难题。

较于传统数据处理系统,云计算系统的出现让人眼前一亮,基于云的数据挖掘平台的建构为数据挖掘开辟了一条新路,云计算提供一个虚拟的平台,用户可以在任何地区运用任何终端选择自己想要的数据,而大规模的数据本身就存在一些问题,数据挖掘存在难度,本文就云计算的数据挖掘进行具体的分析如下:

1云计算概述

一直以来云计算都没有一个统一明确的定义,根据多数人对云计算的定义,总结出以下两方面:(1)云计算通俗一点说就是一个资源盘,其拥有数以万计的可用虚拟资源,有些虚拟资源拥有不同的负载量,云计算的优势就是可用将这些负载量不同的资源进行新的合理分配;(2)就用户而言云计算的服务是方便简单的,且透明化,用户的最终目的是在云计算中获取想要的数据和服务,用户不用在意云计算本身的运行机制,然而云计算的系统也是存在隐患的,如果一个规模庞大的计算机群在运作的过程中仍然不间断的增加计算机的数量,那么云计算系统可能会出错甚至系统崩溃,可见单纯依靠硬件设施是不可取的,此时需要可靠的软件发挥作用,需使用冗余和分布式存储的方式,云计算系统另一个优势就是拥有自我检测系统模式,该模式在不影响正常运行的情况下,可以检测出无效节点并进行删除,总之,云计算系统数据多、存储能力强、计算能力快且准确率高,给用户带来高效、优质的服务。

经过一直以来对云计算的研究总结其特点有五个方面,分别是虚拟化、通用性、扩展性强且规模大、可靠性高、经济性好等特点,具体来说就是云计算不是个实物,是个虚拟的拥有海量数据的平台,用户可以在世界的任何位置通过任何终端获取想要的数据信息和服务;云计算没有局限性,在云计算下可以构建出不同的应用,而且这些应用可同时运行;在不影响用户正常使用的情况下,云计算是可以扩展的,而且是动态扩展,现今最多可扩展几十万台电脑,整个扩展过程用户是可以看到的,是对外的;为了保证服务的质量和可靠性,云计算运用了多种方法如多副本容错和多计算节点同构可互换等;云计算由于自身的优势运用大量廉价节点构成云,采用自动化集中式管理机制,解决企业高昂的数据中心成本,较于传统系统云计算系统成本较低。

2数据挖掘的方式

数据挖掘是一个循环反复、不断调整和修改的过程,这个过程漫长且复杂。从数据预处理到数据挖掘再到评估和表示这是数据挖掘的整个过程,数据挖掘的过程中方法很多,归纳如下:(1)广义知识挖掘,广义知识被挖掘出来后,与可视化技术相结合,用户可以直观的通过图表形式来了解;(2)关联知识挖掘;(3)类知识挖掘,分分类和聚类两种。决策树、神经网络、贝叶斯分类、支持向量机、遗传算法与进化理论、粗糙集、关联分类、类比学习、模糊集等为分类法。聚类法包括五种,分别是基于划分、密度、层次、模型及网格的不同方法;(4)预测型知识挖掘,包括一些方法和技术,方法有经典的统计方法,技术包括神经网络和机器学习技术;(5)特异型知识挖掘,所谓特异型指特殊的背离常规的异常规律。包括三个类别,分别是孤立点分析、序列异常分析和特异规则发现;(6)自定义数据挖掘算法。

数据挖掘的过程以及方法可以通过图1直观的了解。

3基于云的数据挖掘平台架构

针对传统数据挖掘平台而言,云计算的产生对其影响很大,云计算的分布式存储和计算使数据挖掘开始变革,数据挖掘云服务只有基于云计算平台才能得以实现,其设计思想是分层设计,思路是面向组件设计,整个平台自下向上分为三层,最下面一层也是最基础的一层是云计算支撑平台层,再往上一层是数据挖掘能力层,最顶层是数据挖掘云服务层。

云计算支撑平台层的功能主要是提供数据的分布式存储和计算,最底层构建可以以企业自主研发的云计算平台为基础,也可以以第三方提供的云计算平台为基础。

数据挖掘能力层的能力有算法服务管理、调度引起、数据并行处理框架等,这些都是基础能力,数据挖掘能力层支撑着它的上一层(数据挖掘云服务层)。这层不但支持内部数据挖掘算法和推荐算法库,对于外在的第三方数据挖掘算数法也可以接入。

最顶层数据挖掘云服务层的主要功能是为外在企业和个人提供数据挖掘云服务,其涵盖多种多样的服务能力封装的接口形式,例如针对于简单对象的访问协议简称SOAP的XML等,本地应用程序编程接口也是其形式之一,基于结构化查询语言语句的访问在数据挖掘云服务层也是支持的,同时此层还提供解析引擎和自动调用云服务。

总之,基于云计算的数据挖掘平台从很多方面是优于传统数据挖掘平台的,如大规模数据处理能力、数据动态扩展能力以及低廉的云服务和成本等。

4云计算关键技术

如今大量数据挖掘最直接有效的方法是分布式计算方法,这个方法包括两部分一部分是分布式数据存储,一部分是分布式并行计算,现在的云计算平台已经涵盖了这两部分的能力,这两部分是云计算数据挖掘平台的核心支撑能力,GFS、KFS、HDFS等三种分布式文件系统是目前比较受欢迎的分布式文件系统,Google公司的分布式文件系统理论是三者的理论基础,KFS、HDFS两种分布式文件系统多被用于商业和学术领域。

分布式并行计算框架在分布式计算方法中非常重要,其在计算过程中封装了一些技术细节,如任务调度、任务容错等,这样便捷了用户,用户只要把握好任务间的逻辑关系,不必注意这些技术细节,目前较为广泛应用的分布式计算框架有并行计算框架Mapreduce和迭代处理计算框架Pregel这两者都由谷歌公司提出,还有微软公司研发的Dryad。

5结束语

随着互联网和移动互联网时代的到来,海量复杂的数据处理与数据挖掘困扰着各大运营商,与传统数据系统相比,云计算优势明显,强大动态扩展能力、独特的分布式存储和计算方法、以及低廉的成本优势吸引了越来越多企业和个人,基于云的数据挖掘平台,企业和运行商都因此减少了数据挖掘方面的资金投入,对这些企业来说无疑是减小了生产成本。

参考文献:

[1]丁岩,杨庆平,钱煜明.基于云计算的数据挖掘平台架构及其关键技术研究[J].中兴通讯技术,2013(01).

云计算数据论文篇6

论文摘要:云计算是一种基于Internet的新兴应用计算机技术,云计算由于其优点和巨大商业价值,在各个领域得到了广泛的运用。本文介绍了云计算的主要服务形式及其核心技术,并提出了目前云计算所面临的问题。

0引言

2006年谷歌推出了“Google101计划”,并正式提出“云”的概念和理论。随后亚马逊、微软、惠普、雅虎、英特尔、IBM等公司都宣布了自己的“云计划”。

云计算的思想可以追溯到20世纪60年代,JohnMcCar2thy[1]曾经提到“计算早晚有一天能变成公用的基础设施”,意味着计算能力可以流通,像人们使用商品一样使用计算机资源。将计算、服务作为一种公共设施为公众提供,像使用电话、煤气和水电一样使用计算机资源,并且费用低廉、取用方便。云计算是通过互联网进行传输的,数据存储在云端,服务存储在云端,通过利用数据的强大计算能力,为用户服务。继2007年IBM和Google宣布在云计算领域的合作后[2],云计算迅速成为产业界与学术界的热点研究,得到广泛的关注。

1云计算的定义

云计算(CloudComputing)是网格计算(GridComputing)、分布式计算(DistributedComputing)、并行计算(ParallelComputing)、效用计算(UtilityComputing)网络存储(NetworkStorageTechnologies)、虚拟化(Virtualization)、负载均衡(LoadBalance)等传统计算机技术和网络技术发展融合的产物,是新兴的商业计算模型。它旨在通过网络把多个成本相对较低的计算实体整合成一个具有强大计算能力的完美系统,并借助SaaS、PaaS、IaaS、MSP等先进的商业模式把这强大的计算能力分布到终端用户手中。CloudComputing的一个核心理念就是通过不断提高“云”的处理能力,进而减少用户终端的处理负担,最终使用户终端简化成一个单纯的输入输出设备,并能按需享受“云”的强大计算处理能力通俗的理解是,云计算的“云”就是存在于互联网上的服务器集群上的资源,它包括硬件资源和软件资源,本地计算机只需要通过互联网发送一个需求信息,远端就会有成千上万的计算机为你提供需要的资源并将结果返回到本地计算机,这样,本地计算机几乎不需要做什么,所有的处理都在云计算提供商所提供的计算机群来完成。

2云计算的主要服务形式

目前,云计算的主要服务形式有:SaaS、Paas和IaaS。

(1)软件即服务(SaaS)。SaaS服务指的是提供商在自己的服务器上将应用软件统一部署,用户通过互联网来订购自己需要的应用软件,提供商会根据所定软件的时间长短和数量来收费,服务提供商会通过浏览器给用户提供软件。(2)平台即服务(PaaS)。PaaS是指将开发环境作为服务来提供。厂商提供开发环境、服务器平台、硬件资源等服务给客户,用户在其平台基础上定制开发自己的应用程序并通过其服务器和互联网传递给其他客户。PaaS能够给企业或个人提供研发的中间件平台,提供应用程序开发、数据库、应用服务器、试验、托管及应用服务。(3)基础设施服务(IaaS)。IaaS即把厂商的由多台服务器组成的“云端”基础设施,作为计量服务提供给客户。它可以提供存储资源和虚拟化服务器,前提是它将I/O设备、内存、计算能力和存储整理合并成虚拟的资源池。这是一种托管型硬件方式,用户付费使用厂商的硬件设施。

3云计算的核心技术

云计算系统运用了许多技术,其中以编程模型、数据管理技术、数据存储技术、虚拟化技术、云计算平台管理技术最为关键。

(1)编程模型。MapReduce是Google开发的java、Python、C++编程模型,它是一种简化的分布式编程模型和高效的任务调度模型,用于大规模数据集(大于1TB)的并行运算。严格的编程模型使云计算环境下的编程十分简单。(2)海量数据分布存储技术。云计算系统由大量服务器组成,同时为大量用户服务,因此云计算系统采用分布式存储的方式存储数据,用冗余存储的方式保证了数据可靠性。(3)海量数据管理技术。云计算需要对分布的、海量的数据进行处理、分析,因此,数据管理技术必需能够高效的管理大量的数据。云计算系统中的数据管理技术主要是Google的BT数据管理技术和Hadoop团队开发的开源数据管理模块HBase。(4)虚拟化技术。通过虚拟化技术可实现软件应用与底层硬件相隔离,它包括将单个资源划分成多个虚拟资源的裂分模式,也包括将多个资源整合成一个虚拟资源的聚合模式。(5)云计算平台管理技术。云计算系统的平台管理技术能够将大量的服务器进行协同工作,进行业务部署和开通非常方便,发现和恢复系统故障也非常的快速,通过智能化、自动化的手段实现大规模系统的运营。

4云计算技术发展面临的主要问题

随着云计算技术的日益发展和广泛应用,云计算模式同时存在着一些问题。(1)数据隐私问题。如何保证存放在云服务提供商的数据隐私不被非法利用,不仅需要技术的改进,也需要法律的进一步完善。(2)数据安全性。有些数据是企业的商业机密,数据的安全性关系到企业的生存和发展。云计算数据的安全性问题解决不了会影响云计算在企业中的应用。(3)用户使用习惯。如何改变用户的使用习惯,使用户适应网络化的软硬件应用是长期而艰巨的挑战。(4)网络传输问题。云计算服务依赖网络,目前网速低且不稳定,使云应用的性能不高。云计算的普及依赖网络技术的发展。

5结语

目前,云计算技术的发展正处在起步阶段,但云计算技术的发展将会改变用户对计算资源的使用方式,使用户从以桌面为核心转向了以Web为核心。云计算的前景美好,但还存在一些技术问题亟待解决,例如可扩展的并行计算技术、高可靠的系统容错技术、数据安全技术、负载均衡技术、海量数据的挖掘技术、任务调度技术等方向。随着云计算技术的发展,将会有更多的平台和服务不断涌现出来进而推动云计算技术及其应用的发展。

参考文献

    【公文范文】栏目
  • 上一篇:有关写档案管理员工作内容责
  • 下一篇:关于期末教学工作总结10篇
  • 相关文章

    推荐文章

    本站专题