云计算大数据趋势
㈠ 云计算未来发展趋势
一、虚拟化技术向软硬协同方向发展
按照IDC的研究,2005年之前是虚拟化技术发展的第一阶段,称之为虚拟化1.0,从2005年到2010年时虚拟化发展的第二阶段,称之为虚拟化2.0,目前已经进入虚拟化2.5阶段,虚拟化3.0阶段在不久也将会到来。根据Gartner的预测,到2016年中国70%的X86企业服务器将实现虚拟化。
ArsTechnica网站上刊出的一篇文章评论到,当前的虚拟化市场当中,VMware是老大,微软Hyper-V老二,思杰Xen第三,红帽和甲骨文在争夺第四把交椅。随着服务器等硬件技术和相关软件技术的进步、软件应用环境的逐步发展成熟以及应用要求不断提高,虚拟化由于具有提高资源利用率、节能环保、可进行大规模数据整合等特点成为一项具有战略意义的新技术。
首先,随着各大厂商纷纷进军虚拟化领域,开源虚拟化将不断成熟。
其次,随着虚拟化技术的发展,软硬协同的虚拟化将加快发展。在这方面,内存的虚拟化已初显端倪。
第三,网络虚拟化发展迅速。网络虚拟化可以高效地利用网络资源,具有节能成本、简化网络运维和管理、提升网络可靠性等优点。
二、数据中心向整合化和绿色节能方向发展
目前传统数据中心的建设正面临异构网络、静态资源、管理复杂、能耗高等方面问题,云计算数据中心与传统数据中心有所不同,它既要解决如何在短时间内快速、高效完成企业级数据中心的扩容部署问题,同时要兼顾绿色节能和高可靠性要求。高利用率、一体化、低功耗、自动化管理成为云计算数据中心建设的关注点,整合、绿色节能成为云计算数据中心构建技术的发展特点。
数据中心的整合首先是物理环境的整合,包括供配电和精密制冷等,主要是解决数据中心基础设施的可靠性和可用性问题。进一步的整合是构建针对基础设施的管理系统,引入自动化和智能化管理软件,提升管理运营效率。还有一种整合是存储设备、服务器等的优化、升级,以及推出更先进的服务器和存储设备。艾默生公司就提出,整合创新决胜云计算数据中心。
兼顾高效和绿色节能的集装箱数据中心出现。集装箱数据中心是一种既吸收了云计算的思想,又可以让企业快速构建自有数据中心的产品。与传统数据中心相比,集装箱数据中心具有高密度、低PUE、模块化、可移动、灵活快速部署、建设运维一体化等优点,成为发展热点。国外企业如谷歌、微软、英特尔等已经开始开发和部署大规模的绿色集装箱数据中心。
通过服务器虚拟化、网络设备智能化等技术可以实现数据中心的局部节能,但尚不能真正实现绿色数据中心的要求,因此,以数据中心为整体目标来实现节能降耗正成为重要的发展方向,围绕数据中心节能降耗的技术将不断创新并取得突破。数据中心高温化是一个发展方向,低功耗服务器和芯片产品也是一个方向。
三、大规模分布式存储技术进入创新高峰期
在云计算环境下,存储技术将主要朝着从安全性、便携性及数据访问等方向发展。分布存储的目标是利用多台服务器的存储资源来满足单台服务器不能满足的存储需求,它要求存储资源能够被抽象表示和统一管理,并且能够保证数据读写操作的安全性、可靠性、性能等各方面要求。为保证高可靠性和经济性,云计算采用分布式存储的方式来存储数据,采用冗余存储的方式来保证存储数据的可靠性,以高可靠软件来弥补硬件的不可靠,从而提供廉价可靠的海量分布式存储和计算系统。在大规模分布式存储技术中,基于块设备的分布式文件系统适用于大型的、海量数据的云计算平台,它将客户数据冗余部署在大量廉价的普通存储上,通过并行和分布式计算技术,可以提供优秀的数据冗余功能。且由于采用了分布式并发数据处理技术,众多存储节点可以同时向用户提供高性能的数据存取服务,也保证数据传输的高效性。目前国外很多大学、研究机构和公司已经或正在着手开发分布式文件系统,已经涌现出一批著名的分布式文件系统,如PVFS、GPFS、zFS、Google FS、Hadoop FS等,进一步更深入的研发也还在进行中。
除了大规模分布式存储技术,P2P存储、数据网格、智能海量存储系统等方也是海量存储发展的趋势体现。其中,P2P存储可以看做是分布式存储的一种,是一个用于对等网络的数据存储系统,旨在提供高效率、鲁棒和负载均衡的文件存取。数据网格是有机的智能单元的组合,类似于计算网格。智能海量存储系统包括主动的数据采集、数据分析、主动调整等。云计算中存储的海量数据应用将为云计算提供新的价值高点,也必将成为云计算发展的重点方向之一。
四、安全与隐私将获得更多关注
云计算作为一种新的应用模式,在形态上与传统互联网相比发生了一些变化,势必带来新的安全问题,例如数据高度集中使数据泄漏风险激增、多客户端访问增加了数据被截获的风险等等。云安全技术是保障云计算服务安全性的有效手段,它要解决包括云基础设施安全、数据安全、认证和访问管理安全以及审计合规性等诸多问题。云计算本身的安全仍然要依赖于传统信息安全领域的主要技术。不过另一方面,云计算具有虚拟化、资源共享等特点,传统信息安全技术需要适应其特点采取不同的模式,或者有新的技术创新。另外,由于在云计算中用户无法准确知道数据的位置,因此云计算提供商和用户的信任问题是云计算安全要考虑的一个重点。总体来说,云计算提供商要充分结合云计算特点和用户要求,提供整体的云计算安全措施,这将驱动云计算安全技术发展。适应云计算的特点和安全需求,云计算安全技术在加密技术、信任技术、安全解决方案、安全服务模式方面加快发展。
此外,未来的安全趋势,势必会涉及终端及移动终端各个层面,包括各类PC、手机在内的智能终端、可穿戴设备,都有可能会面临攻击者的挑战,这样的攻击对多种设备会变得日益难以防护。解决终端安全,云安全是首先需要解决的,即从云端首先判断安全的趋势,而不是孤立的从一台终端来判断。通过云端安全的大数据分析,可以清晰发现其中存在的多种威胁趋势,从而及时拦截新木马以及防止网络入侵和攻击。隐私权保护问题虽是云计算普及过程中需要解决的一大难题,但随着云计算的发展及相关标准的成熟。相信隐私权会得到更好地保护,云计算也将像互联网上的其他应用环境一样,深刻地影响我们的生活方式。
五、分布式计算技术不断完善和提升
资源调度管理被认为是云计算的核心,因为云计算不仅是将资源集中,更重要的是资源的合理调度、运营、分配、管理。云计算数据中心的突出特点,是具备大量的基础软硬件资源,实现了基础资源的规模化。但如何合理有效调度管理这些资源,提高这些资源的利用率,降低单位资源的成本,是云计算平台提供商面临的难点和重点。业务/资源调度中心、副本管理技术、任务调度算法、任务容错机制等资源调度和管理技术的发展和优化,将为云计算资源调度和管理提供技术支撑。不过,正成为业界关注重点的云计算操作系统有可能使云计算资源调度管理技术走向新的道路。云计算操作系统是云计算数据中心运营系统,是指架构于服务器、存储、网络等基础硬件资源和单机操作系统、中间件、数据库等基础软件管理海量的基础硬件资源和软件资源的云平台综合管理系统,可以实现极为简化和更加高效的计算模型,以低成本实现指定服务级别、响应时间、安全策略、可用性等规范。
现在云计算的商业环境对整个体系的可靠性提供了更高的需求,为了支持商业化的云计算服务,分布式的系统协作和资源调度最重要的就是可靠性。未来成熟的分布式计算技术将能够支持在线服务(SaaS),自从2007年苹果iPhone进入市场开始,事情发生很大的变化,智能手机时代的到来使得Web开始走进移动终端,SaaS的风暴席卷整个互联网,在线应用成为一种时尚。分布式计算技术不断完善和提升,将支持在跨越数据中心的大型集群上执行分布式应用的框架。
六、SLA细化服务质量监控实时化
要想让用户敢于将关键业务应用放在云计算平台上,粗放的服务协议显然无法让人放心,用户需要知道云计算厂商能否快速地将数据传遍全国、网络连接状况又能好到何种程度。对于激增的商业需求而言,性能的拓展是不够的,而云计算提供商能够多快地拓展性能也事关重要。用户需要能够让他们高枕无忧的服务品质协议,细化服务品质是必然趋势。云计算对计算、存储和网络的资源池化,使得对底层资源的管理越来越复杂,越来越重要,基于云计算的高效工作负载监控要在性能发生问题之前就提前发现苗头,从而防患于未然,实时的了解云计算运行详细信息将有助于交付一个更强大的云计算使用体验,也是未来发展的方向(关于更多可以关注微信公号漫步云计算)谢谢。
㈡ 大数据与云计算的未来如何
网络云计算是未来一种发展趋势。
以大数据、物联网、人工智能、5G为核心特征的数专字化浪潮正席属卷全球,车联网、工业物联网、人工智能生物识别带来的海量异构化数据,高带宽、低时延等新业务个性化需求。未来,云计算存储技术需求会越来越强烈,无论是个人还是企业,向云端转型都是一种趋势。
小鸟云专注为个人开发者用户、中小型、大型企业用户提供一站式核心网络云端部署服务,促使用户云端部署化简为零,轻松快捷运用云计算。
纯属个人意见。
㈢ 云计算是未来的发展趋势 机会在哪里
文章来源:计算机世界
云计算成必然趋势(1)
作为一项有望大幅降低成本的新兴技术,云计算正日益受到业界厂商的追捧,亚马逊、IBM、英特尔、微软、雅虎、EMC、Google等大型IT厂商都已涉足该领域。现在,随着云计算理念推广的逐步深入,云计算在资源最大限度利用、IT成本可精确量化、实现更广泛信息交付等方面的优势已经得到了多数用户的认可。毫无疑问,云计算正在成为IT业的重要发展趋势,它的影响将会逐渐渗透到整个产业以及用户的应用中。那么,对于国内IT企业和用户来说,云计算会带来哪些机会呢?三大影响
计世资讯认为,云计算将对互联网应用、产品应用模式、IT产品开发方向等产生深远影响。
首先,云计算将赋予互联网更大的内涵,并在某种程度上改变互联网企业的运营模式,通过云计算,更多的应用能够以互联网服务的方式交付和运行。云计算的先驱者之一谷歌甚至强调,未来几乎所有的软件应用都可以搬到互联网上,以服务取代软件。
其次,云计算将扩大IT软硬件产品应用的外延,并改变软硬件产品的应用模式。目前,业界有一种很流行的说法,将云计算模式比喻为发电厂集中供电的模式。也就是说,通过云计算,用户可以不必去购买新的服务器,更不用去部署软件,就可以得到应用环境或者应用本身。对于用户来说,软硬件产品也就不再需要部署在用户身边,这些产品也不再是专属于用户自己的产品,而是变成了一种可利用的、虚拟的资源。
再者,IT产品的开发方向也将发生改变以适应上述两种变化。英特尔曾表示,未来的技术发展将会与云里的应用发生很大关联,英特尔设计的服务器平台会去顺应这种改变,在技术发展的目标中也将增加关于云的新内容;IBM对云计算更是投下了重注,并为此命名为蓝云计划。此外,现在甚至已经有专门定位于云计算应用的终端设备发布,其被称为云计算计算机。
综上所述,云计算作为一种应用模式,它的出现以及应用范围的逐渐扩大,必将对产业链的上下游产生重要影响。
一项针对CIO的调查结果显示,55%的CIO表示听说过云计算的概念,但对其具体含义并不清楚;25%的 CIO表示比较了解;16%的CIO表示很了解,并且很有兴趣。虽然有一多半的CIO仅限于了解云计算这一概念,不过,我们仍然很欣喜地得出这样的结论,绝大多数CIO已经开始了解和认知云计算的理念。
在多数CIO仅限于了解概念的发展初期,有高达58%的CIO表示云计算是未来的发展趋势,只是目前还并不成熟;29%的CIO表示云计算将彻底改变IT技术的发展现状; 同时也有8%的CIO表示云计算虽好,但却并不适合于企业应用; 仅有8%的CIO认为云计算只是厂商昙花一现的炒作。可见,CIO们对云计算的发展前景还是持乐观态度的。
当然,云计算能否真正被CIO们所接受,概念的认知只是第一步,能否真正落地到企业应用中才是关键。此次的调查结果显示,近50%的CIO表示没有计划或者不清楚是否会采用;仅有12%的CIO表示会在1到3年内考虑应用;29%的CIO表示正在积极研究中。看来,从概念到落地还有一段很长的路要走。
不过,目前还只是云计算发展的初期,像发电一样提供IT资源,并让用户实现随取随用还只是愿景。计世资讯认为,在云计算的初期推广中,IT厂商应抓住两大着力点,即市场的两端:高端企业级用户和消费级个人用户。
在高端市场,企业级用户会逐步开始尝试构建自己的云计算基础设施,也就是现在业界所说的内部云。通过研究,我们发现,企业级用户建立自己的云计算平台,是在对企业内部的IT基础设施进行改善,关键业务与核心数据仍运行在企业内部的计算平台上。因此,对于这部分高端企业级用户来说,接受云计算基本上就是接受一种新的技术和解决方案。
在低端市场,消费级个人用户更易于接受云计算服务。目前,诸多网站正在推出价格合理的数据在线存储服务,甚至是免费的无容量限制的存储服务:微软宣布Windows live skydrive向用户开放;谷歌正式推出了升级版的付费存储服务。相对于企业核心业务数据来说,消费者的一些普通个人文档、照片和视频等非机密文件对敏感性的要求要低得多,现在已经有了大量的个人用户正在享用云存储的服务。
云计算成必然趋势(3)
云计算从操作系统开始着陆
在一次与某位CIO的交谈中,他半开玩笑地说:云计算的名字起得‘好’,真的是有点像天上的云,飘忽不定。的确,现在云计算需要的是落地。 不久前,VMware发布了首款云操作系统VMware vSphere 4,相信云操作系统的发布会让云计算走出真正着陆的第一步。
作为VMware Infrastructure 3的升级,却并没有沿用Infrastructure 4的称谓,而是改名为vSphere 4,那么其究竟有哪些与云计算相称的功能和特点呢?虽然说云计算是一定要建立在虚拟化的基础上的,但仅仅具备虚拟化的功能,肯定是不能够被称为完备的云操作系统的。那么,较之此前的虚拟化产品,VMware此次发布的云操作系统究竟有什么不同呢?
VMware大中华区技术总监张振伦表示,如果说上一代的虚拟化技术重点应用在节省用户投资,通过服务器整合有效减少数据中心的物理服务器数量上; 那么,作为新一代的云操作系统,其应用对象的范围则从单个服务器整合,扩展到了整个服务器集群,其重点集中在构建高可用、精确的动态资源分配、提高运行效率和降低成本等多个方面。虚拟化的价值已经从节省投资成本逐渐扩展到了降低运营成本,也就是说,更专注于商业价值的创新。 张振伦说。
此外,VMware vSphere 4更强调帮助企业构建内部云。现在,业界更多地将目光投向了外部公共云,希望利用新的应用满足用户的业务需求,而VMware希望能够从帮助企业构建内部云开始让‘云计算’落地。张振伦表示,当然,在构建内部云之后,内部云和外部云如何协同,如何跨越内部云和外部云,如何形成一个虚拟私有云,这就需要另一个层面的功能去完成,而这部分功能我们计划在下半年发布的产品中会有所体现。
据张振伦介绍,VMware对企业应用云计算的规划是这样的:首先将企业现有的数据中心转化为内部云,同时与托管和服务提供商合作共同实现可兼容的外部云;随后,再通过在云之间进行连接和统一管理,使内部资源和可利用的外部资源联系起来,以帮助企业获得云计算的所有好处和灵活性,也就是现在VMware所说的虚拟私有云。
当然,这并非是一个绝对的发展过程。用友目前已经构建的一个‘云’专为中小企业提供服务,对中小企业而言这是外部云,但对用友来说这也可以看做是内部云。因此,内部云和外部云的概念是相对的。 张振伦补充说。
㈣ 大数据与云计算哪个发展前景好
大数据
大数据技术是一种新一代技术和构架,以快速的采集、处理和分析技术,从各种超大规模的数据中提取价值。
大数据涉及到数据的采集、整理、存储、安全、分析、呈现和应用,大数据技术庞大复杂,基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。
云计算
云计算是一种创新的技术,底层离不开虚拟化,平台操作系统,数据库,存储技术,负载均衡,高可用,群集技术,分布式技术,安全技术等等,想要学习云计算,就要精通其中的一门技术。
云计算技术从技术应用服务的场景可划分为三个层次IaaS(基础架构即服务)、PaaS(平台即服务)、SaaS(软件即服务)。
哪个发展更好?
大数据常和云计算联系到一起,二者各有不同的关注点,但是在技术体系结构上,都是以分布式存储和分布式计算为基础,所以二者之间的联系也比较紧密。
从应用角度来讲,大数据离不开云计算,因为大规模的数据运算需要很多计算资源,大数据是云计算的应用案例之一,云计算是大数据的实现工具之一。
二者的发展前景都很好,想转行的同学可以根据自己的兴趣进行选择。
关于大数据与云计算哪个发展前景好,青藤小编就和您分享到这里了。如果您对大数据工程有浓厚的兴趣,希望这篇文章可以为您提供帮助。如果您还想了解更多关于数据分析师、大数据工程师的技巧及素材等内容,可以点击本站的其他文章进行学习。