A. 什么是云存储技术
云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。 当云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就需要配置大量的存储设备,那么云计算系统就转变成为一个云存储系统,所以云存储是一个以数据存储和管理为核心的云计算系统。
云存储的两个层面
云存储的两个层面是作为云计算支撑的存储计算,主要涉及分布式存储(如分布式文件系统、IPSAN、数据同步、复制)、数据存储(如重复数据删除、数据压缩、数据编码)和数据保护(如RAID、CDP、快照、备份与容灾)等技术领域,如图8-30所示,这在第6章中已有所介绍。和云安全技术一样,云存储技术也需要利用现有的所有存储技术针对云计算三层架构的各个环节采用适当的存储技术,才能取得最佳效果,例如,对应不同需求,有时应该使用数据库技术但有时却应该使用LDAP技术,有些性能要求高的系统不能使用SAN或NAS,需直接使用基于RPC或Socket技术的并发文件系统,有些应用使用SAN成本太高等,这里不再做深入介绍。如图8-31所示是一个采用NetApp FAS、思科 UCS和 VMWare vShpere 4技术打造的存储系统,对上述两种云存储技术和应用都有促进作用。云存储架构
分为两类:一种是通过服务来架构;另一种是通过软件或硬件设备来架构。
传统的系统利用紧耦合对称架构,这种架构的设计旨在解决HPC(高性能计算、超级运算)问题,现在其正在向外扩展成为云存储从而满足快速呈现的市场需求。下一代架构已经采用了松弛耦合非对称架构,集中元数据和控制操作,这种架构并不非常适合高性能HPC,但是这种设计旨在解决云部署的大容量存储需求。各种架构的摘要信息如下:
紧耦合对称(TCS)架构
构建TCS系统是为了解决单一文件性能所面临的挑战,这种挑战限制了传统NAS系统的发展。HPC系统所具有的优势迅速压倒了存储,因为它们需要的单一文件I/O操作要比单一设备的I/O操作多得多。业内对此的回应是创建利用TCS架构的产品,很多节点同时伴随着分布式锁管理(锁定文件不同部分的写操作)和缓存一致性功能。这种解决方案对于单文件吞吐量问题很有效,几个不同行业的很多HPC客户已经采用了这种解决方案。这种解决方案很先进,需要一定程度的技术经验才能安装和使用。
松弛耦合非对称(LCA)架构
LCA系统采用不同的方法来向外扩展。它不是通过执行某个策略来使每个节点知道每个行动所执行的操作,而是利用一个数据路径之外的中央元数据控制服务器。集中控制提供了很多好处,允许进行新层次的扩展:
● 存储节点可以将重点放在提供读写服务的要求上,而不需要来自网络节点的确认信息。
● 节点可以利用不同的商品硬件CPU和存储配置,而且仍然在云存储中发挥作用。
● 用户可以通过利用硬件性能或虚拟化实例来调整云存储。
● 消除节点之间共享的大量状态开销也可以消除用户计算机互联的需要,如光纤通道或infiniband,从而进一步降低成本。
● 异构硬件的混合和匹配使用户能够在需要的时候在当前经济规模的基础上扩大存储,同时还能提供永久的数据可用性。
● 拥有集中元数据意味着,存储节点可以旋转地进行深层次应用程序归档,而且在控制节点上,元数据经常都是可用的。
B. 网上云存储,那种软件最安全
网络、华为、联想、中国移动、115之类的云存储软件都是可以的!但是总是用着不放心,我们公司用的是南京云创存储开发的Minicloud迷你云软件,我感觉用着挺好的,文件数据块始终以双副本方式在不同节点上存放,绝不丢失数据,既可作为应用软件(如邮箱、视频监控)的海量存储空间,又可作为员工的私密存储空间,还可以作为数据共享空间等,大家可以试试看!
C. 云存储架构分哪些层次,各自实现了什么功能
(1)存储层
云存储系统对外提供多种不同的存储服务,各种服务的数据统一存放在云存储系统中,形成一个海量数据池。从大多数网络服务后台数据组织方式来看,传统基于单服务器的数据组织难以满足广域网多用户条件下的吞吐性能和存储容量需求;基于P2P架构的数据组织需要庞大的节点数量和复杂编码算法保证数据可靠性。相比而言,基于多存储服务器的数据组织方法能够更好满足在线存储服务的应用需求,在用户规模较大时,构建分布式数据中心能够为不同地理区域的用户提供更好的服务质量。
云存储的存储层将不同类型的存储设备互连起来,实现海量数据的统一管理,同时实现对存储设备的集中管理、状态监控以及容量的动态扩展,实质是一种面向服务的分布式存储系统。
(2)基础管理层
云存储系统架构中的基础管理层为上层提供不同服务间公共管理的统一视图。通过设计统一的用户管理、安全管理、副本管理及策略管理等公共数据管理功能,将底层存储与上层应用无缝衔接起来,实现多存储设备之间的协同工作,以更好的性能对外提供多种服务。
(3)应用接口层
应用接口层是云存储平台中可以灵活扩展的、直接面向用户的部分。根据用户需求,可以开发出不同的应用接口,提供相应的服务。比如数据存储服务、空间租赁服务、公共资源服务、多用户数据共享服务、数据备份服务等。
(4)访问层
通过访问层,任何一个授权用户都可以在任何地方,使用一台联网的终端设备,按照标准的公用应用接口来登录云存储平台,享受云存储服务。
2云存储技术的优势
作为新兴的存储技术,与传统的购买存储设备和部署存储软件相比,云存储方式存在以下优点:
(1)成本低、见效快
传统的购买存储设备或软件定制方式下,企业根据信息化管理的需求,一次性投入大量资金购置硬件设备、搭建平台。软件开发则经过漫长的可行性分析、需求调研、软件设计、编码、测试这一过程。往往在软件开发完成以后,业务需求发生变化,不得不对软件进行返工,不仅影响质量,提高成本,更是延误了企业信息化进程,同时造成了企业之间的低水平重复投资以及企业内部周期性、高成本的技术升级。在云存储方式下,企业除了配置必要的终端设备接收存储服务外,不需要投入额外的资金来搭建平台。企业只需按用户数分期租用服务,规避了一次性投资的风险,降低了使用成本,而且对于选定的服务,可以立即投入使用,既方便又快捷。
(2)易于管理
传统方式下,企业需要配备专业的IT人员进行系统的维护,由此带来技术和资金成本。云存储模式下,维护工作以及系统的更新升级都由云存储服务提供商完成,企业能够以最低的成本享受到最新最专业的服务。
(3)方式灵活
传统的购买和定制模式下,一旦完成资金的一次性投入,系统无法在后续使用中动态调整。随着设备的更新换代,落后的硬件平台难以处置;随着业务需求的不断变化,软件需要不断地更新升级甚至重构来与之相适应,导致维护成本高昂,很容易发展到不可控的程度。而云存储方式一般按照客户数、使用时间、服务项目进行收费。企业可以根据业务需求变化、人员增减、资金承受能力,随时调整其租用服务方式,真正做到“按需使用”。
3云存储技术趋势
随着宽带网络的发展,集群技术、网格技术和分布式文件系统的拓展,CDN内容分发、P2P、数据压缩技术的广泛运用,以及存储虚拟化技术的完善,云存储在技术上已经趋于成熟,以“用户创造内容”和“分享”为精神的Web2.0推动了全网域用户对在线服务的认知
D. 云存储安全吗
市场上流通的云服务,开发者或者管理者通常对数据进行备份,或者设置万能密码,其宗旨是在大数据管理的名义下,为用户提供针对性的产品销售设计。因此使用云服务,存储在里面的信息等同于对云开发者全面开放。
E. 适合网站开发的云存储
你可以使用Windows Azure,高安全、高可靠,而且可以按需实时扩展
F. 云存储是什么安全么
云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。 当云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就需要配置大量的存储设备,那么云计算系统就转变成为一个云存储系统,所以云存储是一个以数据存储和管理为核心的云计算系统。
他只是一个点,可根据其特性开发很多产品,联想网盘专为企业打造的数据管理平台,既能收发,也能定向汇总等很多实用功能
G. 什么是云存储和网盘有什么区别
网盘就是一个萝卜一个坑,你上传的每一份资料都在服务器上开辟了一块空间做存储,哪怕有人再上传了一个和你一模一样的资料,也照样再开辟一块空间存储;
而云存储就是你在上传资料的时候服务器先会将你的资料大小和摘要内容和服务器上其他资料做比对,如果发现一模一样的资料,那你的上传就会立即完成,等于是共享了别人已经上传的资料。这就是区别,现在很多网络存储都采用了云存储,比如QQ的文件中转站,金山网盘等等。
H. 与云计算、云存储相关的IT技术都有哪些
云计算(Cloud Computing)是
分布式计算(Distributed Computing)、
并行计算(Parallel Computing)、
效用计算(Utility Computing)、
网络存储(Network Storage Technologies)、
虚拟化(Virtualization)、
负载均衡(Load Balance)、
热备份冗余(High Available)等传统计算机和网络技术发展融合的产物。
主要体现在虚拟化及其标准化和自动化。
云存储是在云计算概念上延伸和发展出来的一个新的概念,是一种新兴的网络存储技术,是指通过集群应用、网络技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。云计算系统中广泛使用的数据存储系统是Google的GFS和Hadoop团队开发的GFS的开源实现HDFS。
从软件看,VMware、微软的Hpyer-V、Citrix以及开源的KVM等是主要的虚拟化平台,是云计算的基础。Citrix的优势在桌面虚拟化和应用虚拟化。
至于云计算应用软件开发工具,并没有针对云计算、云存储的独特的编程语言。
许多人会将云计算与大数据联系起来,其实两者既有联系又有区别。云计算就是硬件资源的虚拟化,主要是一虚多,充分利用高性能的硬件资源;而大数据就是海量数据的高效处理,通常需要多合一、或多虚一,跨越多台硬件处理海量数据任务。Amazon是云计算应用领域的先驱,而Google则是大数据应用领域的先驱。大数据既可以采用以虚拟化为基础的云计算架构也可以基于高性能计算(HPC,集群技术、并行技术)来处理。
大数据相当于海量数据的“数据库”,而且通观大数据领域的发展也能看出,当前的大数据处理一直在向着近似于传统数据库体验的方向发展,Hadoop的产生使我们能够用普通机器建立稳定的处理TB级数据的集群,把传统而昂贵的并行计算等概念一下就拉到了我们的面前,但是其不适合数据分析人员使用(因为MapRece开发复杂),所以PigLatin和Hive出现了(分别是Yahoo!和facebook发起的项目,说到这补充一下,在大数据领域Google、facebook、twitter等前沿的互联网公司作出了很积极和强大的贡献),为我们带来了类SQL的操作,到这里操作方式像SQL了,但是处理效率很慢,绝对和传统的数据库的处理效率有天壤之别,所以人们又在想怎样在大数据处理上不只是操作方式类SQL,而处理速度也能“类SQL”,Google为我们带来了Dremel/PowerDrill等技术,Cloudera(Hadoop商业化最强的公司,Hadoop之父cutting就在这里负责技术领导)的Impala也出现了。
因此,云计算、云存储均为计算资源的底层,通过虚拟化的方式提供“设备”级(或操作系统级)的服务,用户可以方便地申请使用”设备“来独立地实现自己的任务(就好像给你一台服务器),而实际上在云上提供给你的是一台虚拟机,至于这台虚拟机运行在哪台硬件设备上,却不一定,甚至可以”无缝“漂移,硬件故障时几乎不影响用户使用。
I. 云存储全面发展 市场应用如何实现应用
网络磁盘是个在线存储服务,使用者可通过WEB访问方式来上传和下载文件,实现个人重要数据的存储和络化备份。高级的网络磁盘可以提供web页面和客户端软件等两种访问方式,本人在2002就用过Xdisk这个网络磁盘软件系统,它可以通过客户端软件在本地创建一个名盘符为X的虚拟磁盘,实现重要文件的存储和管理,使用的方式与使用本地磁盘相同。网络磁盘的容量空间一般取决与服务商的服务策略,或取决于使用者想服务商支付的费用多少。 2、在线文档编辑 经过近几年的快速发展,Google所能提供的服务早已经从当初单一的搜索引擎,扩展到了GoogleCalendar、GoogleDocs、GoogleScholar、GooglePicasa等多种在线应用服务。 Google一般都把这些在线的应用服务称之为云计算。相比较传统的文档编辑软件,GoogleDocs的出现将会使我们的使用方式和使用习惯发生巨大转变,今后我们将不再需要在个人PC上安装office等软件,只需要打开GoogleDocs网页,通过GoogleDocs就可以进行文档编辑和修改(使用云计算系统),并将编辑完成的文档保存在GoogleDocs服务所提供的个人存储空间中(使用云存储系统)。无论我们走到哪儿,都可以再次登录GoogleDocs,打开保存在云存储系统中的文档。通过云存储系统的权限管理功能,还有能轻松实现文档的共享、传送、以及版权管理。 3、在线的网络游戏 近年来,网络游戏越来越收到年轻人的喜爱,传奇、魔兽、武林三国等各种不同主题和风格的游戏层出不穷,网络游戏公司也使出浑身解数来吸引玩家。 但很多玩家都会发现一个很重要的问题:那就是由于带宽和单台服务器的性能限制,要满足成千上万个玩家上线,网络游戏公司就需要在全国不同地区建设很多个游戏服务器,而这些游戏服务器上上玩家相互之间是完全隔离的,不同服务器上的玩家根本不可能在游戏中见面,更不用说一起组队来完成游戏任务。 以后,我们可以通过云计算和云存储系统来构建一个庞大的、超能的游戏服务器群,这个服务器群系统对于游戏玩家来讲,就如同是一台服务器,所有玩家在一起进行竞争。云计算和云存储的应用,可以代替现有的多服务器架构,使所有玩家都能集中在一个游戏服务器组的管理之下。 所有玩家聚集在一起,这将会使游戏变得更加精彩,竞争变得更加激烈。同事,云计算和云存储系统的使用,可在最大限度上提升游戏服务器的性能,实现更多的功能;各玩家除了不再需要下载、安装大容量的游戏程序外,更免除了需要定期进行游戏升级等问题。 二、企业级云存储实例 除了个人级云存储应用外,企业级云存储应用也即将会面世,而且以后可能会成为云存储应用的主力军。从目前不同行业的存储应用现状来看,以下几类系统将有可能很快进入云存储时代。 1、企业空间租赁服务 信息化的不断发展使得各企业、单位的信息数据量呈几何曲线性增长。数据量的增长不仅仅意味着更多的硬件设备投入,还意味着更多的机房环境设备投入,以及运行维护成本和人力成本的增加。 即使是现在仍然有很多单位、特别是中小企业没有资金购买独立的、私有的存储设备,更没有存储技术工程师可以有效地完成存储设备的管理和维护。通过高性能、大容量云存储系统,数据业务运营商和IDC数据中心可以为无法单独购买大容量存储设备的企事业单位提供方便快捷的空间租赁服务,满足企事业单位不断增加的业务数据存储和管理服务,同时,大量专业技术人员的日常管理和维护可以保障云存储系统运行安全,确保数据不会丢失。 2、企业级远程数据备份和容灾 随着企业数据量的不断增加,数据的安全性要求也在不断增加。企业中的数据不仅要有足够的容量空间去存储,还需要实现数据的安全备份和远程容灾。不仅要保证本地数据的安全性,还要保证当本地发生重大的灾难时,可通过远程备份或远程容灾系统进行快速恢复。 通过高性能、大容量云存储系统和远程数据备份软件,数据业务运营商和IDC数据中心可以为所有需要远程数据备份和容灾的企事业单位提供空间租赁和备份业务租赁服务,普通的企事业单位、中小企业可租用IDC数据中心提供的空间服务和远程数据备份服务功能,可以建立自己的远程备份和容灾系统。 3、视频监控系统 近两年来,电信和网通在全国各地建设了很多不同规模的“全球眼”、“宽视界”网络视频监控系统。“全球眼”或“宽视界”系统的终极目标是建设一个类似话音网络和数据服务网络一样的,遍布全国的视频监控系统,为所有用户提供远程(城区内的或异地的)的实时视频监控和视频回放功能,并通过服务来收取费用。 但由于目前城市内部和城市之间网络条件限制,视频监控系统存储设备规模的限制,“全球眼”或“宽视界”一般都能在一个城市内部,甚至一个城市的某一个区县内部来建设。假设我们有一个遍布全国的云存储系统,并在这个云存储系统中内嵌视频监控平台管理软件,建设“全球眼”或“宽视界”系统将会变成一件非常简单的事情。 系统的建设者只需要考虑摄像头和编码器等前端设备,为每一个编码器、IP摄像头分配一个带宽足够的接入网链路,通过接入网与云存储系统连接,实时的视频图像就可以很方便地保存到云存储中,并通过视频监控平台管理软件实现图像的管理和调用。用户不仅可以通过电视墙或PC来监看图像信号,还可以通过手机来远程观看实时图像。 三、云存储的备份、归档、分布和协同 1、备份 像Mozy和Carbonite等厂商的备份实例已经开始从消费模式或者生产消费模式更多地渗透到中小企业市场。 在备份方面,最常见的方法就是使用混合配置方法,也就是将你最常用的数据组保存在本地,然后复制到云存储中。Axcient和DS3都提供了这种功能性。 2、归档 归档最终将在商业云存储市场占据大部分市场份额。归档是云存储的一个理想使用实例——将陈旧数据从你自己的设备迁移到其他人的设备中。这个迁移过程是安全的,可进行端对端的加密,很多提供商甚至不会保留密钥,这样他们就不能看到你的数据。混合模式在这方面也倍受欢迎。 这种模式让归档变得非常简单,只需要将数据复制到一个类似NFS或者CIFS挂接点上。Nirvanix、Bycast和IronMoundtain都提供了这种产品或者服务。在归档方面,用户需要采用这些产品的API组。例如,我想对归档中某些特定的元数据打上标签。理想地说,我应该在启动归档之前设定归档时间和冗余性。 3、分布和协同 目前来说,分布或者协同的使用实例更多是由服务提供商提供的。这两种模式通常使用来自多长提供商的一种云基础架构产品,例如上面提到的Nirvanix或者Bycast,还有Mezeo、Parscale、EMCAtmos和Cleversafe。其他像Permabit或者Nexsan等传统归档和可扩展存储厂商也提供了这种专门的云产品。 由此看来,服务提供商将利用并运行这些基础架构。我们将开始看到这个领域厂商之间的分离。Box.net采用了一种类似于Facebook的协同模式,Sooner通过其备份功能将你的数据自动保存到云存储中,然后让你基于使用需求共享或者处理这些内容。Dropbox和SpiderOak也开发出了很强大的多平台备份和同步代理,可以在不影响用户操作的前提下同步和实现共享。 在共享方面存在着一种加强checkin/checkout文件状态的需求。我需要持续了解谁正在对哪些文件进行操作。现在云存储和云服务市场呈现一派繁荣景象,有成百上千种产品,在这篇文章中我没有提到具体的一款产品并不意味着这些产品不可靠,只是因为我并不了解这些产品或者我忘记了。