第一篇:【智汇通】张尧学:透明计算云计算操作系统现状
【专家简介】张尧学,1956年1月生,湖南常德澧县人,1982年本科毕业于陕西西北电讯工程学院(现陕西西安电子科技大学),1987年4月加入中国共产党,获日本东北大学博士学位。教授,博士生导师,中南大学校长,中国工程院院士,中国作家协会会员,国务院学位委员会委员。
导读:当前正处在一个信息技术革命的前列,信息技术的发展有几个阶段,一个就是从大型技术,除了微软,另外由多媒机向网络转型,当然英特尔也是跟微软一起,后来又出了Google。现在正处在一个移动互联网还有什么都是计算机,泛在计算等等这么一个大发展的时期。核高基:操作系统发展的两条路线
下面将会是什么样的企业、什么样的技术来引导信息产业甚至其他的多行业发展是一个很有兴趣的事。其中一个背景就是重大专项,核高基是刚开始我没参加也以为是搞原子弹,因为是核,其实是叫核心元器件,高是高端芯片,基是基础软件,被简称为核高基,其实就是操作系统和CPU。中国怎么样发展自己的操作系统和CPU?一个是产业,一个是安全。
那么对于这两个核心的操作系统和CPU的发展,有两条路线,一条路线就是收复失地的战略,就是敌人把我们的城市占领,蒋介石把延安攻下来,我们要通过各种各样的战略战术去收复延安。收复失地战略就是微软的操作系统占领我们市场的百分之多少多少,其他的CPU占领了我们的市场多少多少,我们要去收复他。但是这种战略听起来很不错,但是执行起来非常的艰难,虽然不能说会失败,但是通过多年的艰苦的斗争,大家走到现在很不容易。
另外一条战略就是要在信息产业或者是信息技术的新的发展点上,我们要去做人家没有,我们有的同时又和国际兼容的东西,这就是要中国特色、国际水平。中国特色就是我有的,人家没有的,国际水平就是要跟人家兼容。这样取得在信息产业链上的话语权,人家没有的,你有的你可以跟人家讨论,把你有的给我,我有的给你,就是所谓知识产权的问题。因为所谓你有,就是你有知识产权,人家没有这个知识产权。
这两条路线的斗争是很激烈的,反映在我们的项目上面我们也是两方面都涉及,传统的收复失地我们也继续做。新的机会我们按照国务院领导的指示,也是做下来感觉到有一定的效果,但效果不是十分的明显。我们在互联网的操作系统,在结构化和非结构化持续资源中心,在搜索工具,搜索引擎和搜索浏览器等方面设置了一大批的项目,有的趋势也很不错,但是很多企业趋势还不是太明显。我们怎么样把我们的思路和企业的发展结合得更近一点,这是一个大问题。云计算的特点
云计算大家非常清楚,我想这两年不仅仅是在信息技术产业,在其他的各个行业也是比较热的一个词。什么是云计算呢?当然每个人都有每个人自己的理解,也有比较公共或者是大家认为是差不多的一些想法。我也是选了几个例子,一个比如说Google,他是怎么看待云计算的。08年10月31日有一个全球副总裁讨论过一次关于他们认为什么是云计算的概念?他们说首先是存储和计算分离。清华大学的陈文光(音译)教授认为这个词有所偏差,我觉得这是有所道理的。陈教授举了个例子,说搜索引擎分离,我想是两个概念,一个是逻辑上的分离,一个是罗列上的分离。罗列上的分离包括程序可以放在大的服务器上面,深圳的网络都在做这个事。放在服务器里面以后你可以根据需要去用计算程序对他进行计算,然后给用户提供相应的服务。另外一个就是逻辑的分离,大家可以这样想,我个人认为计算程序在什么位置,要扩展到什么区间,什么程序。但是这个云计算和网络上面的搜索不一样,你的Web可以任意扩展,他跟你的搜索引擎没有关系。他的程序跟你的计算工具和计算本身来讲,他没有在程序上的影响。比如说我扩展一个Web,不用再去扩展搜索引擎,比如说我增加了一些东西,他给程序进行一些电联。对Google来讲,Google的起源有几个很出名的事情,一个就是BigTable,大型数据的结构的布线,然后就是他的MapReduce,一个是Map,一个是Reduce,Map是分布式查找,这是最早的,这是Google最核心的发布的。这几个东西使得他可以在一个时间范围内的网络上进行很快的搜索,把你所要的文章或者是相关的内容按照顺序排列出来。
大家注意看你打开Google的搜索引擎搜出来的时间都是一致的,这点在Google出现之前是不可思议的,他原来构造一个很大型的计算,高性能计算都是大型计算机。他构造一个很大规模的存储中心,在Google出现之前要花很长的时间。在Google出现之后,他可以用很便宜的PC在很短的时间之内构建一个大型机。
当时我听他们讲,当时构建这个通信的时候,他的背板跟我们一样,后来发现换那个板子花的时间很长,工程师就把机器翻过来,工程师跑过去很快,对背板是可插拔的,跑过去很快把板子插进去拔下来。所以说遇到这样的事情,工程师可以很快的跑过去,可以节省时间。
另外微软对云计算的看法是不太一样的,Google从后端服务器去搜索,怎么去找Web,往前走。微软实际上从用户这一端往后端走,所以微软提出来是端云结合,大的网络运营的开发管理平台。但是微软主要强调就是怎么样用微软的操作系统内核的桌面+移动+家电,形成前端的一个网上办公,比如说前端的操作系统是Windows7。
其他的公司特别我就不太讲了,我个人总结一下,云计算在整个环境的变化这么一个条件下产生的一个新的技术概念。环境什么变化呢?整个网络的出现,使得原来资源管理单机变成以网络为主。比如说我们现在任何传统的操作系统都是装在单机上的,而单机的资源管理只是跟存储器、外设,比如说对内存、CPU进行管理。而计算机和计算机之间构建网络靠的是什么?靠的是协议,实际上相对我们人一样,大脑长在每个人头上,大家之间对话是通过中文或者是英文或者是大家相同的文化的一些沟通,这基本上是现在的一个形态。一个单机非常完整,单机网络之间是通过协议来进行沟通,云计算认为这种方式已经落后了,不能解决计算机的网络设备和存在的问题。
另外是我们的计算机的形态正在发生革命性的变化,正如大型机向桌面转移一样,现在正在经历一个从桌面向桌面,再向移动向家电比较3C合一的局面,现在实际上是到了马上就要大面积出现的这么一个时代了。大家看移动,已经是移动互联网了,唯一是家电,家电像三网合一,交互式电视等等也已经出现。
再一个就是原来计算机是以计算为中心的,随着网络的出现和应用的不断变化,现在以数据为中心,甚至有人提出来数据是核心竞争力。其实一个国家的核心竞争力有很多,但是数据是核心竞争力。为什么说数据是核心竞争力?大家想想我们计划经济为什么失败?计划经济失败的主要原因就是数据不够。如果说你能够把各种生产经营管理的数据都能准确实时,需要有一个数据模型分析一下。
现在大家对统计数据为什么老不相信,就是因为数据没有统计准确,如果把每年的数据统计下来,工业发展的数据都在那,那这个世界会完全变化。所以说数据的变化会带来很多生活和工作的变化,有一个计算为中心正在向数据为中心转移。
再有就是大家以前都买软件强调是资源,现在是向服务共享为主。你根本不用去管后面谁给你做计算,怎么样给你做计算,你不要把计算的过程和操作告诉用户,用户只需要服务就行。
从这个角度来看,我们认为是云计算应该是存储和运算分离,另外存储规模海量和分布化的,另外结构是结构化和非结构化的数据存在的,另外现在的Web是结构化的,也有非结构化的。另外还有讲话的声音和图象不经过特定的模式,他可以存储到计算机或者是存储到你的服务器里面去。
有就是运算分布化、并行化,再就是我的前端应该是小型化的,不是你拿到外面去非要那么大的。比如说你身上带MID不要带太大,也不要太多,所以说应该是小型化、跨平台、可移动,再一个就是面向服务。
另外现在的云计算是一个从后端向前端发展的过程。正如刚才前面介绍的Google和微软,还有一个从前端往后端的发展。英特的卢总也会讲到,如果说后端往前端,前端往后端同时配套是平衡发展的过程。
透明计算与云计算的异同
下面介绍一下什么是透明计算?透明计算实际上是我们国家自己提出来的,当然现在也有不少人说了,当时是清华大学1998年,也是刘汝林秘书长的支持,申请了863项目,提出从服务的角度由端向服务器不断发展和演化的概念。它的特点有这么几点,一个是强调存储和运算分离,把存储放在中央服务器上,运算由前端来做。用户只需要对他服务,数据存储在服务器和Web上,运算在前端或者指定地点。
另外一个特点是软件和硬件强调分离,为什么强调软件和硬件分离,我们现在大家知道你要买一个PC机上面基本上装一个操作系统,但是你要用别的系统的软件就很难,或者是根本就没法用。所以我们希望硬件平台能够和软件平台分离,能够装Windows系统 Linux系统,不给用户带来负担。同一个硬件平台,支持不同软件,同一个软件平台,支持不同硬件,这个支持不同的硬件是需要硬件和软件厂商有一个紧密结合。Windows底层在操作系统的接口,你想让他支持不同的硬件的时候,我们希望做同一计算的时候希望在软件和硬件平台上应用系统可以分开。
另外是程序的执行是以流的模式,通过相应的管理和控制,发现哪个CPU是空的,可以流到那去执行,执行完了就扔掉。如果我们汉一个做法,把这个软件放在服务器上,你这个用户买一台机器的时候你要上网,我不让用户知道自动以流的方式送到他那边执行,执行完了用可以直接用,用户知道也不会在意。在你现在上网的时候,他可能会随时监控你,当你退的时候他也就退了。所以最后我们让人家批评了很多,打了很多官司,人家已经做了你还不知道。
我们的贡献是什么?我们做了这么几件事情,第一件事情就是1998年当时的信产部规划司的支持下,在发改委的引导下,主要是做3C合一,做家电的轻量化以及互连服务。另外2001年通过项目不断的往下做,当时好几家有清华大学还有信产部的一些研究组提出了这个存储和运算分离的概念。在前端的单系统上我们把操作系统去掉,所以提出了没有操作系统的计算模式,最后在局域网上得以实现,最后开发终端系统,当时在桌面系统完成。当时电脑上面的桌面计算机可以支持多个操作系统的运行。
那么2004年当时也是得到了微软的帮助,提出了透明计算的概念,主要是进一步完成了跨终端、跨操作系统平台的原则,然后提出了按需服务的概念,同时也逐步推进产业化,从产业化国内的PC公司也开始进展。
2006年网络化的操作系统是什么样的,我们提出了初步的概念。通时开始和英特尔合作,把英特尔做的NEFI,下一代的BIOS引进到我们的透明计算里来。通过从底层开始做网络化的操作系统,同时英特尔也开始研究。
09年我们把原来面向局域网上进行扩,提出面向服务的端到端的体系结构,同时把它从桌面的计算开始向无线和移动互联网方向开始研究,同时在09年上半年到今年下半年在移动互联网上提出一个模型。这是整个一个发展的过程,然后我们可以简单的比较一下这两个计算的区别,实际上国内有学者已经在08年云计算刚刚出来的时候,清华大学陈刚教授就他们写过一篇文章,实际上云计算的概念无非是前端和后端的推进问题,国外很早就提出这个概念,只不过名字不一样。另外Google在08年10月份专门为此做了研讨会,他们来的人职位还挺高,一个是全球副大中华区副总裁,另外一个是李开复,我们三个人各讲了一个小时。
相同之处我个人认为是存储和计算分离的概念,把计算机整个给用户提出服务的角度,从面向网络的计算来进行。另外相同之处是中央管理,我们做过一个实验管理放到用户这 一块,用户就很烦,但是把它放到中央那一端,你只要保证中央的关系,同时做一些改变。再有就是面向服务,我们都是强调给用户提供服务。
结语:不同的地方云计算是从整个互联网从服务器开始,互联网开始往终端、浏览器等等,他现在做交互式家电的网络,我们实际上是走了一个从终端开始,从3C合一从终端开始往前端和后端推进。我们有一个特点,我们的终端是强调一种可管理的一种虚拟的终端,要求你前端是一个新的很小的,不要很多的。
第二篇:云计算人才发展现状
云计算人才发展现状
云计算发展现状
云计算从概念提出到落地,短短几年时间,迅速跃居最符合条件的的战略技术,是时代发展的必然趋势。毋庸置疑,云计算已经成为IT业的主旋律,无论是亚马逊,谷歌还是IBM、微软等IT巨头将“云”规划为未来的发展核心,到目前为止,这已经不再是空谈。
如何培养云计算人才
与之俱来的是云计算人才短缺的问题,相关云计算开发岗位的需求开始出现供不应求的局面,具有云计算开发背景的技术开发人员更是企业争抢的对象。我国云计算人才的现状是:专业人才培养严重不足,众多高校的云计算相关专业设置尚处在积极筹备之中,专业人才培养模式较为单一。为此,2012年阿里巴巴旗下阿里云计算与森纵教育联合提出,建立高校、企业和第三方培训机构为核心的云计算人才培养和输送体系。以云计算产业发展方向和市场需求为导向,注重创新和应用技能的培养,完善云计算人才培训体系。
阿里云万千云才-云计算人才保障计划
2012年11月,阿里云与森纵教育启动“万千云才”项目,主要针对在校大学生进行普及推广培训;针对大学应届毕业生的深度培训,为云计算产业培养可用人才。这是目前为止第一个具有云计算专业开发背景的公司作为支持,森纵教育作为第一个开设云计算课程的授权培训机构。阿里云计算是作为国内最早从事云计算开发平台,马云数据王国的缔造者。
万千云才项目主要为阿里巴巴集团合作伙伴和客户输送云计算开发人才,以保证“飞天平台”企业对云计算人才的渴求。森纵教育具有专业的技术师资队伍,从事JAVA、C/C++、、NET语言开发6年经验,为企业培养和输送开发人才上万人。此次将为万千云才项目的运行提供师资和技术保障。
第三篇:云计算发展现状分析
1.云计算概述
云计算是2007年底正式提出的一个新的概念,至今为止,几乎所有的IT行业巨头都将云计算作为未来发展的主要战略之一,相关商业媒体也将云计算视为计算机未来发展的主要趋势,其商业前景和应用需求已勿庸置疑。
云计算是一种全新的商业模式,其核心部分依然是云后端的数据中心,它使用的硬件设备主要是成千上万的工业标准服务器,它们由英特尔或AMD生产的处理器以及其他硬件厂商的产品组成。企业和个人用户通过高速互联网得到计算能力,从而避免了大量的硬件投资。
云计算的基本原理是,通过将计算分布在大量的分布式计算机上,使企业数据中心的运行更加类似于使用互联网。从而使企业能够将随时资源切换到需要的应用上,根据需求访问计算机和存储系统。
狭义的云计算指的是厂商通过分布式计算和虚拟化技术搭建数据中心或超级计算机,以免费或按需租用方式向技术开发者或者企业客户提供数据存储、分析以及科学计算等服务,比如亚马逊数据仓库出租生意。广义的云计算指厂商通过建立网络服务器集群,向各种不同类型客户提供在线软件服务、硬件租借、数据存储、计算分析等不同类型的服务。广义的云计算包括了更多的厂商和服务类型,例如国内用友、金蝶等管理软件厂商推出的在线财务软件,谷歌发布的Google应用程序套装等。
2.云计算发展国内外现状
IBM于2007年8月高调推出“蓝云(Blue Cloud)一计划。IBM的Willy Chiu透露,“云计算将是IBM接下来的一个重点业务。“这也是IBM扩张自身领地的绝佳机会,IBM具有发展云计算业务的一切有利因素:应用服务器、存储、管理软件、中间件等等,IBM抓住了这样一个良好的机会,提出了“蓝云”计划。2008年8月,IBM斥资3.6亿美元在美国北卡罗来纳州开始建立云计算数据中心,并将该数据中心称为史上最复杂的数据中心,投入了大量人力物力。IBM还在东京建立了一所新的研究机构,建立帮助用户使用云计算基础设施。该数据中心占地6万平方英尺,预计将于2009年下半年投入运营。IBM表示:“使用该数据中心的用户能够获得空前的互联网计算能力,并获得业内领先的环保优势和成本”。IBM在东京的专家将为大企业、大学和政府提供云计算咨询,帮助他们利用云计算设施,设计云计算应用,以及向他们的用户提供基于云计算的服务。在2009年的计划中,IBM计划于推出数种云计算服务产品。
Google于2007年10月在全球宣布了云计划,同时与IBM合作,把全球很多大学纳入搿云计算”计划当中。当月,Google与IBM开始在美国大学校园,包括卡耐基梅隆大学、麻省理工学院、斯坦福大学、加州大学伯克利分校及马里兰大学等,推广云计算的计划。希望从而降低分布式计算技术在学术研究方面的成本,并为这些大学提供相关的软硬件设备及技术支援(包括数百台个人计算机及Blade Center与System X服务器,以及Linux、Xen、Hadoop等开源平台)。而这些学校的学生则可以通过网络开发各项以大规模计算为基础的研究计划。2008年1月30日,Google宣布在台湾启动“云计算学术计划”.与台湾台大、交大等学校合作,将这种先进的大规模、快速计算技术推广到校园。
2009年4月,Google App Engine(GAE)的最新升级已经开始支持Java,并且添加了一系列专门瞄准企业业务的新功能:此后,Google还发布了一款Eclipse插件,可以对Google App Engine的Java开发提供强力支持,由此可见Google已经为企业级云计算做好了准备。
亚马逊于2007年开放了名为“弹性计算机云“(Elastic Compute Cloud,EC2)的服务,以便让小的软件公司可以按需购买亚马逊数据中心的处理能力,而不需要从硬件开始搭建自己的系统。如今,Linux,Window,JBoss,Eclipse等常用操作系统和软件都已经在EC2平台上得到了支持,其他应用软件也在不断地加入。截至2008年底,亚马逊地云计算相关业务收入已达l亿美元。
2007年11月,雅虎建立了一个小规模的云,开放给卡内基梅隆大学的研究人员。2008年7月,雅虎与惠普、英特尔、伊利诺斯州大学香槟分校、新加坡信息通信发展管理局以及德国卡尔斯鲁理工学院共同创立了开源试验场Open Cirrus,主要进行云计算方面的研究和教育。2009年4月雅虎宣布了与加州大学伯克利分校、康奈尔大学以及马萨诸塞大学阿姆赫斯特分校合作,与卡内基梅隆大学一起使用雅虎的云计算群来进行大规模系统软件研究,开发新的应用程序以分析互联网上的各种数据集如投票记录和在线新闻源等等。
微软公司正在开发脱离普通桌面的互联网操作系统“Midori一,该系统不同于已经有20多年历史的Windows。Midori目的是为了大规模应用云计算技术。微软的竞争优势很明显,全世界有数以亿计的Windows用户,微软所要做的就是将这些用户通过互联网更紧密地连接起来,并通过Windows Live向他们提供云计算服务。微软正在努力创造一种从一般的硬盘存储方式转移到任何时间地点都可以接入的存储的模式用户体验,从而在互联网战略上拉近同Google的距离。微软的的云平台Azure开发己初步完成,如今已可以随时访问其站点嘲。
云计算在国内的起步稍晚,大概是从2008年开始的,但发展迅猛,如今中国IT界的各大企业基本都涉及该行业:2008年3月17日,Google全球总裁埃里克〃斯密特(Eric Schmidt)在北京访问期间,宣布在中国大陆推出“云计算(Cloud Computing)刀计划。在这个中国的“云计算”计划中,清华大学将是第一家参与合作的高校。它将与Google合作开设“大规模数据处理”课程,其中,Google提供课程资料给清华大学教授整理加工,提供实验设备,并协助学校在现有的运算资源上构建“云计算”实验环境。2008年5月10日,IBM在中国无锡太湖新城科教产业园建立的中国第一个云计算中心投入运营。2008年6月24日,IBM在北京IBM中国创新中心成立了第二个中国的云计算中心IBM大中华区云计算中心。
2008年11月,广东电子工业研究院与东莞松山湖科技产业园管委会签约,在东莞松山湖投资2亿元建立云计算平台;2008年12月30日,阿里巴巴集团旗下子公司阿里软件与江苏省南京市政府正式签订了2009年战略合作框架协议,计划于2009年初在南京建立国内首个“商业云",首期投资额将达上亿元;中国移动研究院做云计算的探索起步较早,已经完成了云计算中心试验,另外,中国移动网站也专门为云计算开辟了版块,时刻关注云计算的最新动态。
此外,我国在云安全方面的进展迅速,云安全的思想是通过大量分布的客户端对网络中软件行为的异常监测,以获取互联网中木马、恶意程序的最新信息,搜集到服务端进行自动分析和处理,再把研发的病毒和木马的解决方案分发到每一个客户端。云安全的策略基本构想是:用户越多,每个用户就越安全,因为庞大的用户群可以覆盖互联网的每个角落,从而更快更精准的定位病毒和木马。如今,包括360安全卫士、瑞星、趋势、卡巴斯基、~ICAFEE、SYMANTEC、江民科技、金山公司等都推出了云安全解决方案。瑞星基于云安全策略开发的2009新品,每天可以拦截数百万次木马攻击,其中2009年1月8日这一天就达到了765万余次。趋势科技的云安全已经在全球建立了5大数据中心,使用上万台在线服务器,现在趋势每天阻断病毒高达上千万次。
2008年11月25日,中国电子学会专门成立了云计算专家委员会,聘任中国工程院院士李德毅为主任委员,聘任IBM大中华区首席技术总裁叶天正、中国电子科技集团公司第十五研究所所长刘爱民、中国工程院院士张尧学、Google全球副总裁/中国区总裁李开复、中国工程院院士倪光南、中国移动通信研究院院长黄晓庆六位专家为副主任委员,聘任国内外30多位知名专家学者为专家委员会委员。2009年5月22日,中国电子学会组织的首届中国云计算大会将于在北京中国大饭店隆重举行。随着国内外云计算应用及研究的不断推进,其研究的技术要点也日益丰富,主要包括:虚拟化技术,云计算存储结构研究,云数据管理的研究,云编程模式的演示,云网络的研究以及云安全的研究。
在云计算系统的后端,有成千上万的服务器,如何将如此大量的服务器有效地组织是云计算系统高效稳定运行关键问题之一。然而云计算系统后端的网络拓扑有别于一般的网络拓扑特性:它的服务器节点分布广泛,数据流量大,服务等级区分度高,扩展性和可靠性要求较强,拓扑结构相对复杂,因此确实具有重新研究的必要性。Hadoop作为目前最为广泛应用的开源云计算软件平台,成功地设计了分布式存储和计算的对使用者透明的框架,在短短的一两年时间内,已经在多家网络公司的云计算平台上面得到了应用,但由于其发展时间短,还有较多需要改进的地方,比如其中MapReduce的任务调度就是一个亟待解决的问题。
3.云计算的基本概念
云计算是分布处理(Distributed Computing)、并行处理(Parallel Computing)和阿格计算(Grid Computing)的综台发展,或者说是这些计算机科学概念的商业实现;也是效用计算(Utility Computing)、虚拟化(Virtualization)、Haas(硬件即服务)、SaaS(软件即服务)、PaaS(平台即服务)等概念结合创新的结果。
云计算是一种革命性的突破,它表示计算能力也可咀作为一种商品进行流通,当然这种商品是通过通过互联网进行传输的。云计算的最主要目标就是:在来来,只需要一台笔记本或者一个手机,就可以通过网络服务来得到我们需要的一切服务,甚至包括实现超级计算这样的任务。从这个角度而言,最终用户将成为云计算的真正拥有者。简单的说.云计算就是利用互联网上的大型数据中心的软件和处理数据的能力,把复杂的运算从用户终端移到云上去做。
从硬件的角度来看,云计算有三个方面是新的:
1).可以按需获取的看似无限的计算资源,从而使云计算用户不需要在提供服务很久之前就要做计算资源的规划。
2).消除了云用户的先期的投入,从而使公司可以从小规模做起,随着需求增加来扩展他们的硬件资源,降低了风险。
3).能够以很短的时间为单位付费按需使用计算资源(例如,处理器按小时付费以及存储器按天付费),不需要的时候就将这些资源释放。这样,通过将闲置的机器和存储器释放来节省开支,提高整体利用率。
4.云计算的关键技术
云计算是一种新型的超级计算方式,以数据为中心,是一种数据密集型的超级计算。在数据存储和管理、编程模式和虚拟化等方面具有自身独特的技术。
1)简单的编程模式
编程模式主要针对的是使用云计算的服务进行开发的用户,为了使这些用户能方便的利用云后端的资源,使用合适的编程模式编写应用程序来达到需要的目的或提供服务,云计算中的编程模式应该尽量方便简单。最好使得后台复杂的并行执行和任务调度向编程人员透明,从而是编程人员可以将精力集中与业务逻辑。
Google提出的Map/ Reduce的编程模式是如今最流行的云计算编程模式。现在几乎所有IT厂商提出的“云”计划中采用的编程模式,都是基于MapReduce思想的。MapReduce这种编程模式并不仅适用于云计算,在多核计算和并行处理上同样具有有良好的性能。但该编程模式仅适用于编写数据处理为主、能够高度并行化的程序,简单的说,它是对同类型数据的分布式处理,对于计算数据具有相互联系,不可分割的应用并不适合。如何改进该编程模式,使程序员得能够轻松的编写各种需要的程序,实现真正意义上的并行编程,是MapReduce编程模式未来的发展方向。
2)数据存储和管理
为保证数据的高可用和高可靠性,云计算的数据一般采用分布式的方式来存储和管理。类似于一般的数据存储安全保证办法,云计算也采用冗余存储的方式来保证存储数据的可靠性。由于云计算系统需要同时满足大量用户的需求,并行地为大量用户提供服务,因此云计算的数据存储技术必须具有高吞吐率,分布式存储正好满足了这一需求特点。现在,云计算的数据存储技术主要有谷歌的非开源的体系GFS(Google File System)例和Hadoop团队的开发的对于GFS的开源实现HDFS(Hadoop Distributed FileSystem)。有很大一部分IT厂商,包括Yahoo,Intel,阿里巴巴的云存储计划采用的都是HDFS的数据存储技术。
云计算系统对大数据集进行处理,而且需要向用户提供高效的服务,因此数据管理技术也必须能够对大量数据进行高效的管理。由于云计算的特点是对大量的数据进行反复的读取和分析,数据的读操作频率远大于数据的更新频率,因此一般来讲,云计算系统的数据管理通常采用数据库领域中列存储的数据管理模式,即将表按列划分后存储。在现有的云计算的数据管理技术中,最著名的是谷歌的BigTable数据管理技术,同时Hadoop开发团队开发了类似BigTable的开源数据管理模块。由于采用列存储的方式管理数据会造成写的不方便,因此如何提高数据的更新速率以及进一步提高随机读速率是未来的数据管理技术需要解决的问题。
3)虚拟化技术
虚拟化是云计算的一个非常关键的技术,也可以说是云计算区别于一般并行计算的一个根本性的特点。通过虚拟机的方式进行云计算资源的管理具有特殊的好处。由于虚拟机是一类特殊的软件,能够完全模拟硬件的执行,因此能够在上面运行操作系统,进而能够保留一整套运行环境语义。这样,可以将整个执行环境通过打包的方式传输到其他物理节点上,使得执行环境与物理环境隔离,方便整个应用程序模块的部署。一般来说,通过将虚拟化的技术应用到云计算的平台,可以获得如下一些良好的特性:
1).云计算的管理平台能够动态地将计算平台定位到所需要的物理平台上,而无需停止运行在虚拟机平台上的应用程序,这比采用虚拟化技术之前的进程迁移方法更加灵活。
2).能够更加有效率地使用主机资源,将多个负载不是很重的虚拟机计算节点合并到同一个物理节点上,从而能够关闭空闲的物理节点,达到节约电能的目的。
3).通过虚拟机在不同物理节点上的动态迁移,能够获得与应用无关的负载平衡性能。由于虚拟机包含了整个虚拟化的操作系统以及应用程序环境,因此在进行迁移的时候带着整个运行环境,达到了与应用无关的目的。
4).在部署上也更加灵活,即可以将虚拟机直接部署到物理计算平台当中,或者提供给用户的资源就直接是一个虚拟机,如亚马逊的EC2。虚拟化技术现在最成熟的系统包括Xen和VMware,还有开源的系统Linux KVM。
第四篇:零售业云计算发展现状
零售业云计算发展现状
(一)零售业云计算应用较好,保持着平稳发展的状态 调研数据显示,目前,已部署云计算的企业占 23%,其中实践周期在 1-3 年的企业占 47%,相比来说,实践周期在 3 年以上的企业占 53%。
同时,1 年将部署云计算的企业也占到了一个比较高的比例。这说明,相比其他行业来说,零售业云计算应用较好,未来将保持着相对平稳的发展状态。
(二)中型民营企业处于云计算实践前列
调研数据显示,从企业性质上看,部署云计算的企业或机构中,有 73% 的是民营企业;
从企业规模上看,500-1000 人规模的企业占到了 25%,占比相对较高。这说明,在零售业,中型的民营企业处于云计算实践的前列。
(三)云计算预算保持了稳中有升的趋势
零售业企业用户未来云计算的预算计划中,60% 的用户选择保持投入,40% 的企业选择继续追加。
从实践周期上看,实践周期较短的企业选择加大预算投入的力度则更高,而实践周期在 5 年以上的企业则在云计算的投入规划上则较为稳定。
而在零售业企业用户追加预算的关键原因中,业务拓展和长期规划成为首要因素,分别占比 67% 和 53%。
换言之,基于业务拓展与云计算长期规划的需要,多数零售业用户制定了较为稳定的云计算预算投入规划。
(四)全面、深入云计算应用是预算的主要用途
调研中,有一项数据非常突出,相比其他行业,零售业「将预算用于扩大部署范围」占 80%。
其次才是 73% 的为升级投入,67% 的为安全投入。因此,零售业用户投入云计算预算主要用于扩大云计算的部署范围,并在现有部署基础上进行升级、扩容。
零售业云计算实践
(一)「创建技术优势」驱动零售业用户部署云计算 零售业用户希望能够借助云计算产品/服务的导入,促进自身的「生产力」发展,确立企业在未来市场竞争中的优势地位。
(二)云计算实践的路上也会有种种坎坷
1、「不了解」阻碍了部分零售业用户的云计算实践 部分零售业企业用户暂无引入云计算计划,其背后的原因大有不同。
其中,对云计算的了解不足,对如何基于云计算有效推动零售业发展暂时没有理清思路,成为阻碍企业导入云计算的首要原因。
从根本上来讲,零售业企业用户信息化发展水平参差不齐,制约了部分企业云计算实践进程的步伐。
2、兼容性、资金评估是企业开始云计算实践不容回避的挑战 企业首次规划部署云产品时,挑战依旧存在。
其中,与原信息系统的兼容性问题、云计算标准缺失和资金投入上的担忧,成为企业云计算规划中遇到的首要问题。
3、建设实践阶段,需要突破「数据互联互通」的难关 在云计算建设落地阶段,企业用户遇到的主要问题中,有 51% 在于如何基于云产品进行分阶段实施,有 44% 认为实现数据互联互通困难。
另外还有 42% 的问题在于安全技术不成熟,35% 的问题在于培训是否到位。
由此可见,以上这些问题在各行业的云计算实践存在普遍性。
(三)客户资料外泄是零售业用户最担忧的云安全威胁之一 零售业用户最关注与数据、应用相关的安全威胁,除了数据库威胁与未授权入侵外,客户资料外泄是企业用户最担忧的安全威胁。
另外,调研数据还显示,仅有 2% 的数字显示不担忧,这更加说明,很瘦有企业对云安全不存在担忧。
(四)企业倾向于选择运维外包的部署模式
调研数据显示,企业用户选择自行运维私有云的仅占 14%,而选择第三方运维的云部署模式时,被托管的私有云占比最高,达 27%。
这说明,零售业用户倾向于选择运维外包的云计算部署模式,其中第三方运维、被托管的私有云部署比率最高。
(五)云计算产品/服务主要集中在 SaaS 层
调研数据显示,SaaS 层产品/服务占 46%,PaaS 层产品/服务占 32%,而 IaaS 层产品/服务仅占 22%。
那么针对以上三种不同的云服务模式,零售业企业用户需求的主要关注点也有所差异。
1、SaaS:主要集中于运营环节的资源管控
零售业部署 SaaS 层产品/服务主要围绕运营环节的管控展开,对预算、仓储、供应商等资源进行统一管控。
2、PaaS:以支撑、管控云计算应用为目的
零售业用户对 PaaS 层产品/服务的需求主要集中在支撑云计算应用方面,对开发、测试环节的产品/服务关注度相对不高。
3、IaaS:需求主要集中于资源类产品/服务
IaaS 层为企业用户提供的产品/服务中,云虚拟主机、云服务器占比最高,达 50%,其次为资源托管类服务,占 43%。
(六)零售业用户获取咨询服务主要依靠厂商
调研数据显示,信息服务行业用户获取咨询服务主要依靠厂商。
此外,从获取咨询服务的内容上看,从 SaaS 层主要获取云实施咨询服务,从 PaaS 层获取云应用管理咨询服务,而从 IaaS 层则比较均衡,云安全咨询服务占比较高。
零售业云计算的进一步实践
当然,企业用户云计算进行进一步实践,关注点会有所变化。
(一)提升实时决策支持能力是企业进一步实践的主要动力 基于云计算长期战略,加强战略管控,提升实时决策能力这两大因素驱动了零售业用户在云端的进一步实践。
(二)进一步实践中,IaaS 相对首次部署的比例出现明显提升
在预算计划中,零售业用户提出了兼顾云计算的应用深度与覆盖广度的要求,反应在进一步部署阶段,企业用户开始着重巩固基础资源与环境的构建,对 IaaS(该数字从首次部署上升了 14%)的关注度更高。
部署模式方面依然倾向于运维外包的模式。
1、SaaS:加强资源管理,提升运营效率
在进一步实践中,零售业用户对客户关系管理、HR 人力资源管理、ERP 企业资源计划管理等 SaaS 应用关注度大幅提升。
2、PaaS:集中加强开发环节的能力
零售业用户对 PaaS 的进一步部署诉求中,开发环节的产品/服务开始逐渐显露出较强的增长势头。
3、IaaS:强化资源类产品/服务,优化云端环境
进一步实践计划中,多数 IaaS 层产品/服务的关注度出现较大上浮,其中以数据存储/灾备与环境配置服务关注度增长最大。
第五篇:我国云计算产业发展现状
中安顾问:我国云计算产业发展的现状
由于云计算是多种技术混合演进的结果,其成熟度较高,又有大公司推动,发展极为迅速。Amazon、Google、IBM、微软和Yahoo等大公司是云计算的先行者。云计算领域的众多成功公司还包括Salesforce、Facebook、Youtube、Myspace等。云计算的新颖之处在于它几乎可以提供无限的廉价存储和计算能力。根据云计算产业的发展情况,我国政府在“十二五”规划里明确提及对云产业的相关政策优惠,各大城市也在积极构建自己的云计算产业中心,在北京,南京,成都等城市都发布了自身的云计算产业规划。
在我国,云计算发展非常迅猛。在中安顾问《2012-2016年我国云计算行业运行态势及投资前景分析》报告中有相关内容:2008年5月10日,IBM在中国无锡太湖新城科教产业园建立的中国第一个云计算中心投入运营。2008年6月24日,IBM在北京IBM中国创新中心成立了第二家中国的云计算中心——IBM大中华区云计算中心;2008年11月28日,广东电子工业研究院与东莞松山湖科技产业园管委会签约,广东电子工业研究院将在东莞松山湖投资2亿元建立云计算平台;2008年12月30日,阿里巴巴集团旗下子公司阿里软件与江苏省南京市政府正式签订了2009年战略合作框架协议,计划于2009年初在南京建立国内首个“电子商务云计算中心”,首期投资额将达上亿元人民币;世纪互联推出了CloudEx产品线,包括完整的互联网主务“CloudExComputingService”,基于在线存储虚拟化的“CloudExStorageService”,供个人及企业进行互联网云端备份的数据保全服务等等系列互联网云计算服务;中国移动研究院做云计算的探索起步较早,已经完成了云计算中心试验。中移动董事长兼CEO王建宙认为云计算和互联网的移动化是未来发展方向。
我国企业创造的“云安全”概念,在国际云计算领域独树一帜。云安全通过网状的大量客户端对网络中软件行为的异常监测,获取互联网中木马、恶意程序的最新信息,推送到服务端进行自动分析和处理,再把病毒和木马的解决方案分发到每一个客户端。云安全的策略构想是:使用者越多,每个使用者就越安全,因为如此庞大的用户群,足以覆盖互联网的每个角落,只要某个网站被挂马或某个新木马病毒出现,就会立刻被截获。云安全的发展像一阵风,瑞星、趋势、卡巴斯基、MCAFEE、SYMANTEC、江民科技、PANDA、金山、360安全卫士、卡卡上网安全助手等都推出了云安全解决方案。瑞星基于云安全策略开发的2009新品,每天拦截数百万次木马攻击,其中1月8日更是达到了765万余次。趋势科技云安全已经在全球建立了5大数据中心,几万部在线服务器。据中安顾问行业分析师介绍,云安全可以支持平均每天55亿条点击查询,每天收集分析2.5亿个样本,资料库第一次命中率就可
以达到99%。借助云安全,趋势科技现在每天阻断的病毒感染最高达1000万次。
行业分析师还认为,云安全的核心思想,与2003年就提出的反垃圾邮件网格非常接近。当时有人认为,垃圾邮件泛滥而无法用技术手段很好地自动过滤,是因为所依赖的人工智能方法不是成熟技术。垃圾邮件的最大的特征是:它会将相同的内容发送给数以百万计的接收者。为此,可以建立一个分布式统计和学习的平台,以大规模用户的协同计算来过滤垃圾邮件:首先,用户安装客户端,为收到的每一封邮件计算出一个唯一的“指纹”,通过比对“指纹”可以统计相似邮件的副本数,当副本数达到一定数量,就可以判定邮件是垃圾邮件;其次,由于互联网上多台计算机比一台计算机掌握的信息更多,因而可以采用分布式贝叶斯学习算法,在成百上千的客户端机器上实现协同学习过程,收集、分析并共享最新的信息。反垃圾邮件网格体现了真正的网格思想,每个加入系统的用户既是服务的对象,也是完成分布式统计功能的一个信息节点,随着系统规模的不断扩大,系统过滤垃圾邮件的准确性也会随之提高。用大规模统计方法来过滤垃圾邮件的做法比用人工智能的方法更成熟,不容易出现误判假阳性的情况,实用性很强。反垃圾邮件网格就是利用分布互联网里的千百万台主机的协同工作,来构建一道拦截垃圾邮件的“天网”。反垃圾邮件网格思想提出后,被IEEECluster2003国际会议选为杰出网格项目在香港作了现场演示,在2004年网格计算国际研讨会上作了专题报告和现场演示,引起较为广泛的关注,受到了中国最大邮件服务提供商网易公司创办人丁磊等的重视。既然垃圾邮件可以如此处理,病毒、木马等亦然,这与云安全的思想就相去不远了。(中安顾问)