精华内容
下载资源
问答
  • 云存储产品介绍腾讯云存储产品云硬盘CBS文件存储CFS对象存储COS归档存储CAS 腾讯云存储产品 云存储产品 对象存储COS 文件存储CFS 归档存储CAS 云硬盘CBS 云存储服务 存储网关CSG 日志服务CLS 云数据迁移CDM ...

    腾讯云存储产品

    • 云存储产品
      • 对象存储COS
      • 文件存储CFS
      • 归档存储CAS
      • 云硬盘CBS
    • 云存储服务
      • 存储网关CSG
      • 日志服务CLS
      • 云数据迁移CDM

    云硬盘CBS

    • 云硬盘(Cloud Block Storage,CBS)是CVM使用的持久性块级存储服务
      • 类型:系统盘/数据盘;普通云硬盘/高性能云硬盘/SSD云硬盘
        在这里插入图片描述

      • 可靠性达 999999999%,同可用区内数据保存3翻本

      • 快照

        • 快照是云硬盘在指定时间点的数据备份,只能云硬盘的同地域使用快照,快照属于增量备份,仅保存前一次快照后更改过的数据。
        • 应用场景
          • 数据日常备份
          • 数据快速恢复
          • 数据多副本应用
      • 应用场景

        • 关系数据库/NoSQL数据库
        • 企业办公应用
        • 海量数据分析

    文件存储CFS

    • 文件存储(Cloud File Storage,CFS):提供安全可靠、可扩展的共享文件存储服务。

    • 支持 NFS v3.0/v4.0,CIFS/SMB协议,支持 POSIX 访问语义(例如强数据一致性和文件锁定)。

    • 用户可以使用标准操作系统挂载命令来挂载文件系统。

    • 对比CBS
      CBS与CFS

    • 应用场景
      CFS 可以作为一种持久性强、吞吐量高的文件系统,用于各种内容管理系统,为网站、在线发行、存档等应用存储和提供信息。

      • 企业文件共享
      • 流媒体处理
      • Web服务及内容管理
      • 大数据应用

    对象存储COS

    • 对象存储(Cloud Object Storage,COS)是无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。
      • 数据以对象(Object)形式存放在用户自助创建的存储(Bucket)中。
      • 可通过按地域分配的域名对COS中的数据直接进行数据访问、下载或管理。
        - 可通过对象地址对COS
    • 访问控制:
      • 共享权限:私有读写、公有读私有写、公有读写
      • 用户权限:完全控制、数据读取、权限读取、权限写入
      • 优势
        • 高安全性——全面防护,分权管理
          • 防盗链功能,用以屏蔽恶意来源的访问
          • DDOS攻击防护和CC攻击防护
          • 过滤恶意攻击数据包,清洗出正常流量
          • 多级分权限管理系统
        • 高性能———智能调度,访问可靠
          • 智能调度∶访问可靠COS支持分块和并发发起请求
          • 最优的 BGP 链路上传
          • 结合CDN降低时延,提高下载速度
        • 高扩展性———方便接入,一键迁移
          • 详尽的RESTful API接入说明和丰富的 SDK接入工具
          • 无缝迁移工具
        • 高性价比——按量付费,自动扩容
          • 无需采购、部署和运维费用
          • 根据使用量收取费用
          • 无最低限制,可随时无限扩容
      • 应用场景
        • COS主要存储非结构化数据,如视频、音频、图片、文件等。
        • 应用场景:内容分发、UGC应用数据存储、大数据分析与处理等

    归档存储CAS

    • 归档存储(Cloud Archive Storage,CAS)是低成本、高可靠且易管理的云端离线存储服务。

    • CAS通过文件库Vault(存储容器)来存取档案Archive(存储对象)。

    • 数据取回
      数据取回

    • 与COS对比
      CAS和COS

    • 优势

      • 安全性∶
        • 支持分级鉴权
        • 支持指定条件访问、指定人员、指定操作、指定资源多维度复合鉴权
      • 扩展性 ∶自动扩容
        • 单用户无存储容量上限
        • 无需提前准备设备扩容
      • 成本低 ∶
        • 每G单价远低于在线存储 ,低于友商
        • 按量付费,无最低使用量限制
    • 应用场景:合规性文件归档

      • 在金融、保险、医疗、直播、会计等多个行业往往需要保存甚至10年以上的合规性文件,如文书档案、患者病例、视频截图、合同档案等。
    展开全文
  • 阿里云存储 承宗在2017云栖大会·北京峰会中做了题为《阿里云存储产品全系解读》的分享,就云存储的分类和应用场景,阿里云的存储产品实践,如何打通上云数据通路等方面的内容做了深入的分析。
  • 云存储

    千次阅读 2013-05-09 11:17:06
    云存储 百科名片   云存储构架图 云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备...

    云存储

    百科名片

    云存储构架图   
    云存储构架图
    云存储是在 云计算(cloud computing)概念上延伸和发展出来的一个新的概念,是指通过 集群应用、 网格技术分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过 应用软件集合起来 协同工作,共同对外提供 数据存储和业务访问功能的一个系统。 当 云计算系统运算和处理的核心是大量数据的存储和管理时,云计算系统中就需要配置大量的存储设备,那么云计算系统就转变成为一个云 存储系统,所以云存储是一个以 数据存储和管理为核心的云计算系统。

    编辑本段简介

    云存储是在云计算 [1] (cloud computing)概念上延伸和 衍生发展出来的一个新的概念。 云计算分布式处理(Distributed Computing)、 并行处理(Parallel Computing)和 网格计算(Grid Computing)的发展,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经计算分析之后将处理结果回传给用户。通过 云计算技术, 网络服务提供者可以在数秒之内,处理数以千万计甚至亿计的信息,达到和” 超级计算机”同样强大的网络服务。

    各类云存储图册

    各类云存储图册 (2张)
    云存储的概念与 云计算类似,它是指通过 集群应用、 网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过 应用软件集合起来 协同工作,共同对外提供 数据存储和业务访问功能的一个系统。 如果这样解释还是难以理解,那我们可以借用广域网和互联网的结构来解释云存储。
    云状的网络结构
    相信大家对局域网、广域网和互联网都已经非常了解了。在常见的局域网系统中,我们为了能更好地使用局域网,一般来讲,使用者需要非常清楚地知道网络中每一个软硬件的型号和配置,比如采用什么型号 交换机,有多少个端口,采用了什么 路由器防火墙,分别是如何设置的。系统中有多少个服务器,分别安装了什么操作系统和软件。各设备之间采用什么类型的连接线缆,分配了什么 xml:lang=IP地址和 子网掩码
    但当我们使用 广域网和互联网时,我们只需要知道是什么样的接入网和用户名、密码就可以连接到广域网和互联网,并不需要知道广域网和互联网中到底有多少台 交换机路由器防火墙和服务器,不需要知道数据是通过什么样的路由到达我们的电脑,也不需要知道网络中的服务器分别安装了什么软件,更不需要知道网络中各设备之间采用了什么样的连接线缆和端口。 广域网和互联网对于具体的使用者是完全透明的,我们经常用一个云状的图形来表示广域网和互联网,如下图:
    虽然这个云图中包含了许许多多的 交换机、路由器、防火墙和服务器,但对具体的 广域网、互联网用户来讲,这些都是不需要知道的。这个云状图形代表的是 广域网和互联网带给大家的互联互通的网络服务,无论我们在任何地方,都可以通过一个 网络接入线缆和一个用户、密码,就可以接入广域网和互联网,享受网络带给我们的服务。
    参考云状的网络结构,创建一个新型的云状结构的 存储系统系统,这个存储系统由多个存储设备组成,通过集群功能、分布式文件系统或类似网格计算等功能联合起来协同工作,并通过一定的应用软件或应用接口,对用户提供一定类型的存储服务和访问服务。
    当我们使用某一个独立的存储设备时,我们必须非常清楚这个存储设备是什么型号,什么接口和传输协议,必须清楚地知道存储系统中有多少块磁盘,分别是什么型号、多大容量,必须清楚存储设备和服务器之间采用什么样的连接线缆。为了保证 数据安全和业务的连续性,我们还需要建立相应的数据备份系统和 容灾系统。除此之外,对存储设备进行定期地状态监控、维护、软硬件更新和升级也是必须的。如果采用云存储,那么上面所提到的一切对使用者来讲都不需要了。云状存储系统中的所有设备对使用者来讲都是完全透明的,任何地方的任何一个经过授权的使用者都可以通过一根接入线缆与云存储连接,对云存储进行数据访问。
    云存储实际应用 [2]
    云存储导航
    云存储导航是中国云计算云存储第一导航网,一般来说云计算存储导航汇集国内各类云存储专业网址,分类详细。能帮您在最短的时间内找到您最想要的云存储网址大全,省去了您在搜索引擎上的重重点击。

    编辑本段模型

    存储系统的结构模型由 4层组成。

    存储层

    存储层是云存储 [1] 最基础的部分。存储设备可以是FC 光纤通道存储设备,可以是NAS和 iSCSI等IP存储设备,也可以是 SCSI或SAS等 DAS存储设备。云存储中的存储设备往往数量庞大且分布多不同地域,彼此之间通过 广域网、互联网或者 FC 光纤通道网络连接在一起。
    存储设备之上是一个统一存储设备管理系统,可以实现存储设备的逻辑 虚拟化管理、多链路 冗余管理,以及硬件设备的状态监控和 故障维护。

    基础管理

    基础管理层是云存储最核心的部分,也是云存储中最难以实现的部分。基础管理层通过 集群分布式文件系统网格计算等技术,实现云存储中多个存储设备之间的 协同工作,使多个的存储设备可以对外提供同一种服务,并提供更大更强更好的数据访问性能。

    应用接口

    应用接口层是云存储最灵活多变的部分。不同的云存储运营单位可以根据实际业务类型,开发不同的应用服务接口,提供不同的应用服务。比如 视频监控应用平台、IPTV和 视频点播应用平台、 网络硬盘引用平台,远程数据备份应用平台等。

    访问层

    任何一个授权用户都可以通过标准的公用应用接口来登录云 存储系统,享受云存储服务。云存储运营单位不同,云存储提供的访问类型和访问手段也不同。

    编辑本段前提

    一、宽带网络的发展
    真正的云 存储系统将会是一个多区域分布、遍布全国、甚至于遍布全球的庞大公用系统,使用者需要通过ADSL、DDN等宽带接入设备来连接云存储,而不是通过FC、 SCSI或 以太网线缆直接连接一台独立的、私有的存储设备上。只有宽带网络得到充足的发展,使用者才有可能获得足够大的数据传输 带宽,实现大量容量数据的传输,真正享受到云存储服务,否则只能是空谈。
    二、 WEB2.0技术
    Web2.0 技术的核心是分享。只有通过 web2.0技术,云存储的使用者才有可能通过 PC、手机、移动多媒体等多种设备,实现数据、文档、图片和视音频等内容的 集中存储和资料共享。Web2.0技术的发展使得使用者的应用方式和可得服务更加灵活和多样。
    三、应用存储的发展
    云存储不仅仅是存储,更多的是应用。应用存储是一种在存储设备中集成了 应用软件功能的存储设备,它不仅具有 数据存储功能,还具有应用软件功能,可以看作是服务器和存储设备的集合体。应用存储技术的发展可以大量减少云存储中服务器的数量,从而降低系统建设成本,减少系统中由服务器造成单点故障和性能瓶颈,减少数据传输环节,提供系统性能和效率,保证整个系统的高效稳定运行。
    四、集群技术、网格技术和分布式文件系统
    存储系统是一个多存储设备、多应用、多服务 协同工作的集合体,任何一个单点的存储系统都不是云存储。
    既然是由多个存储设备构成的,不同存储设备之间就需要通过 集群技术分布式文件系统和网格计算等技术,实现多个存储设备之间的协同工作,多个存储设备可以对外提供同一种服务,提供更大更强更好的数据访问性能。如果没有这些技术的存在,云存储就不可能真正实现,所谓的云存储只能是一个一个的独立系统,不能形成云状结构。
    五、 CDN内容分发、P2P技术、数据压缩技术
    CDN内容分发、P2P技术、数据压缩技术、 重复数据删除技术、 数据加密技术
    CDN内容分发系统、 数据加密技术保证云存储中的数据不会被未授权的用户所访问,同时,通过各种数据备份和 容灾技术保证云存储中的数据不会丢失,保证云存储自身的安全和稳定。如果云存储中的 数据安全得不到保证,想来也没有人敢用云存储,否则,保存的数据不是很快丢失了,就是全国人民都知道了。
    六、存储虚拟化技术、存储网络化管理技术
    云存储中的存储设备数量庞大且分布多在不同地域,如何实现不同厂商、不同型号甚至于不同类型(如FC存储和 IP存储)的多台设备之间的逻辑 卷管理、存储虚拟化管理和多链路 冗余管理将会是一个巨大的难题,这个问题得不到解决,存储设备就会是整个云 存储系统的性能瓶颈,结构上也无法形成一个整体,而且还会带来后期 容量和性能扩展难等问题。
    云存储中的存储设备数量庞大、分布地域广造成的另外一个问题就是存储设备运营管理问题。虽然这些问题对云存储的使用者来讲根本不需要关心,但对于云存储的运营单位来讲,却必须要通过切实可行和有效的手段来解决集中管理难、状态监控难、故障维护难、人力成本高等问题。因此,云存储必须要具有一个高效的类似与 网络管理软件一样的集中管理平台,可实现云 存储系统中设有存储设备、服务器和 网络设备的集中管理和状态监控。
    七、云存储完整性监测方法和标准
    完整性监测在云存储服务中是必不可少的,同样,数据完整性也是所有数据中心最核心的任务。任何级别的存储和任何类型的媒质都有可能发生数据损坏。位衰减(存储介质上的数据减弱或丢失)、控制器故障、重复数据删除元数据损坏、磁带故障是导致不同类型媒质数据损坏的主要因素。元数据损坏是上述故障导致的直接结果,比如位衰减,并且也极其容易受到除硬件错误率以外的软件故障的影响。不幸的是,重复数据删除的一个副作用是,损坏的文件、块(block)或字节将影响到每一块与之相关联的元数据。事实上,存储坏境内的任何一个环节都有可能发生数据损坏。将数据迁移到不同的平台过程中很容易就被损坏,即将数据迁移到云端。云存储系统也是由硬件和软件组成的数据中心,其也容易受到攻击而导致数据损坏。比如广为人知的亚马逊云宕机事件。许多企业不仅受到长时间的宕机影响,实际上,他们0.07%的客户数据已经丢失。据报道,引发数据丢失的原因是“ 亚马逊ESB卷……不一致的数据快照恢复。”这就意味着亚马逊系统中的数据已经损坏,因此,客户数据已经丢失。每当数据丢失,尤其是重要数据丢失,人们倾向于相互指责以推脱责任。在IT行业,这通常会导致工作人员被解雇、公司承受巨大经济损失,甚至最严重的情况是企业破产。因此,关键是要了解云服务提供商要承担的法律责任,以及每个服务水平协议(SLA)已采取一切可能的措施以确保数据的安全,防止数据丢失。就很多法律文件来说,SLA大多偏向于提供商的利益,而不是客户的利益。许多云服务提供商都提供了不同层次的数据保护,但是,所有的存储供应商都不对数据完整性承担责任 [1]
    云SLA协议,包括云提供商的保护都明确表明,数据丢失或损坏是最常见的情况。比如亚马逊的客户web服务协议,其中规定,“我们……不提供任何形式的声明或保证,所提供的服务或第三方内容是不间断的、无差错的、无故障部件的,或任何内容…将是安全的、不丢失的或无损坏的。”这个协议甚至据以建议客户“频繁归档”他们的数据。如前所述,数据的完整性管理,无论其是在数据中心、私有云、混合云或公共云,其责任总是要该数据的实际拥有公司来承担。

    编辑本段架构

    架构方法分为两类:一种是通过服务来架构;另一种是通过软件或硬件设备来架构。
    传统的系统利用 紧耦合对称架构,这种架构的设计旨在解决HPC( 高性能计算、超级运算)问题,正在向外扩展成为云存储从而满足快速呈现的市场需求。下一代架构已经采用了松弛耦合非对称架构,集中元数据和控制操作,这种架构并不非常适合高性能HPC,但是这种设计旨在解决云部署的大容量存储需求。各种架构的摘要信息如下:
    紧耦合对称(TCS)架构
    构建TCS系统是为了解决单一文件性能所面临的挑战,这种挑战限制了传统NAS系统的发展。HPC系统所具有的优势迅速压倒了存储,因为它们需要的单一文件I/O操作要比单一设备的I/O操作多得多。业内对此的回应是创建利用 TCS架构的产品,很多节点同时伴随着分布式锁管理(锁定文件不同部分的写操作)和缓存一致性功能。这种解决方案对于单文件吞吐量问题很有效,几个不同行业的很多 HPC客户已经采用了这种解决方案。这种解决方案很先进,需要一定程度的技术经验才能安装和使用。
    松弛耦合非对称(LCA)架构
    LCA系统采用不同的方法来向外扩展。它不是通过执行某个策略来使每个节点知道每个行动所执行的操作,而是利用一个数据路径之外的中央元数据控制服务器。集中控制提供了很多好处,允许进行新层次的扩展:
    ● 存储 节点可以将重点放在提供读写服务的要求上,而不需要来自 网络节点的确认信息。
    节点可以利用不同的商品硬件CPU和存储配置,而且仍然在云存储中发挥作用。
    ● 用户可以通过利用硬件性能或虚拟化实例来调整云存储。
    ● 消除节点之间共享的大量状态开销也可以消除用户计算机互联的需要,如光纤通道或infiniband,从而进一步降低成本。
    ● 异构硬件的混合和匹配使用户能够在需要的时候在当前经济规模的基础上扩大存储,同时还能提供永久的数据可用性。
    ● 拥有集中元数据意味着,存储 节点可以旋转地进行深层次应用程序归档,而且在控制节点上,元数据经常都是可用的。

    编辑本段功能

    云存储提供的诸多功能和性能旨在满足伴随海量非活动数据的增长而带来的存储难题:
    · 随着容量增长,线性地扩展性能和存取速度。
    · 将数据存储按需迁移到分布式的物理站点。
    · 确保数据存储的高度适配性和自我修复能力,可以保存多年之久。
    · 确保多租户环境下的私密性和安全性。
    · 允许用户基于策略和服务模式按需扩展性能和容量。
    · 改变了存储购买模式,只收取实际使用的存储费用,而非按照所有的存储系统,包含未使用的存储容量,来收取费用。
    · 结束颠覆式的技术升级和 数据迁移工作。

    编辑本段选择

    ● 服务模式:最普遍的情况下, 当你考虑云存储的时候,你就会想到其所提供的服务产品。这种模式很容易开始,其可扩展性几乎是瞬间的。根据定义,你拥有一份异地数据的备份。然而,带宽是有限的,因此要考虑你的恢复模型。你必须要满足你网络之外的数据的需求。
    ● HW模式:这种部署位于防火墙背后,并且其提供的吞吐量要比公共的内部网络好。购买整合的硬件存储解决方案非常方便,而且,如果厂商在安装/管理上做的好的话,其往往伴随有机架和堆栈模型。但是,这样你就会放弃某些 摩尔定律的优势,因为你会受到硬件设备的限制。
    ● SW模式:SW模式具有HW模式所具有的优势。另外,它还具有HW所没有的价格竞争优势。然而,其安装/管理过程序要谨慎关注,因为安装某些SW的确非常困难,或者可能需要其他条件来限制人们选择HW,而选择SW。

    编辑本段分类

    云存储可分为以下三类 [2]
    1. 1. 公共云存储
    像亚马逊公司的Simple Storage Service(S3)和Nirvanix公司提供的存储服务一样,它们可以低成本提供大量的文件存储。供应商可以保持每个客户的存储、应用都是独立的,私有的。其中以Dropbox为代表的个人云存储服务是公共云存储发展较为突出的代表,国内比较突出的代表的有 搜狐企业网盘,百度云盘, 金山快盘 [3] 坚果云酷盘115网盘华为网盘360云盘等。
    公共云存储可以划出一部分用作 私有云存储。一个公司可以拥有或控制基础架构,以及应用的部署, 私有云存储可以部署在企业 数据中心或相同地点的设施上。 私有云可以由公司自己的IT部门管理,也可以由服务供应商管理。
    1. 2.内部云存储
    这种云存储和 私有云存储比较类似,唯一的不同点是它仍然位于企业防火墙内部。
    1. 3. 混合云存储
    这种云存储把公共云和私有云/内部云结合在一起。主要用于按客户要求的访问,特别是需要临时配置 容量的时候。从 公共云上划出一部分 容量配置一种私有或内部云可以帮助公司面对迅速增长的负载波动或高峰时很有帮助。尽管如此, 混合云存储带来了跨公共云和私有云分配应用的复杂性。

    编辑本段隐患

    从功能实现上来讲,异地文件存取与文件分享共步技术早上互联网形成之初就已经得到应用,上个世纪初互联网刚刚进入国内时就有厂商提供过网盘服务,当时所谓的网盘并不是大家所熟知的网络虚拟磁盘,当时的网盘更像是一个SVN 或FTP 的客户端,而今十多年的发展以后,融入了移动互联网营销理念与新技术的“网盘”被包装成了“云存储”高调的出现在大众面前,据相关统计数据显示国内一线的云存储服务商每天的用户数据新增量已经达PB为单位,可见每天都有数以亿计的用户正在向自己云存储空间中上传下载着各种文件,在这种环境下排除网络带宽消耗之外,我们是否应该反思一下云存储下的未来隐患

    版权风险

    有关版权问题已经大范围的出现在了国内的网盘服务中,一些个人或团体会将以影视音乐为主体的文件通过云存储的客户端上传至网盘中,然后通过分享的方式对圈子内提供下载,大量的有版权的视频音乐被这种特殊盗版方式进行传播,而且这种传播方式暂时属于监管的空白,部分云存储提供商在版权单位的压力下开始限制链接分享的范围,加强文件的过滤。但是这些手段不能从根本上解决云存储中用户上传文件的盗版传播。而要建立起一整套影视文件数字指纹签名检验系统除了庞大的研发的运维成本外,各个利益团体之间的技术标准统一也是短期内难以统一的,但是在问题得到解决之前,此刻这种分享还在进行中,面临侵权问题不仅是用户还是云存储的提供商。 [4]

    个人隐私

    有很多移动平台用户喜欢随时将自己用手机或平板拍摄的照片与视频通过云存储快速上传到网盘中,这样可以非常快捷的通过WEB 或PC 客户端在异地甚至即时取回照片,但是大家可能不太相信的是你上传的每一张照片或其他文件都有可能是云存储的服务端是明文保存的,据参与过某云存储项目开发的人员介绍从运维成本上考虑实现私钥加密不太现实,管理员可以服务端的平台中直接查看和删除用户上传的文件,这些文件中不泛用户的机密文件或用户私隐,现阶段大型服务端都是通过建立严格的制度体系来约束管理人员的职业操守,但是人都是弱点的,一旦人的操守被弃的时候在其权力范围内可视的内容是否还是只属你是自己呢?

    数据安全

    从数据安全上分两个方面分析,1.用户的操作安全:大多数的云存储都设计了多客户端数据同步机制,一般以最后一次更新为标准,其他客户端开启时自动同步,这点与SVN的设计有很大的差别,当一个用户在公司编辑某个文件后,回到家中再次编辑,那么当他再次回到公司时文件已是昨晚在家更新过的,这是理想状态下的,在很多时候用户编辑一个文件后,会发现编辑有误,想取回存在公司的文件版本时,可能在没有支持版本管理云存储中你的附本也已经被错误的更新了,同样的道理你删除一个文件时候,如果没有额外的备份,也许你到网盘回收站中再找了,版本管理技术上并不存在问题,但是会加大用户的操作难度,云存储服务商只有少数的私有云提供商有限的支持,多数情况下这种覆盖是时常发生的。 2.服务端的安全操作:云存储服务器早已经成为了黑客入侵的目标,因为服务器上不仅有无穷用户数据,对此类大用户群服务的劫持更加是黑色收入的重要来源,也就是说服务器的安全性直接影响着用户上传数据的安全,在服务器虚拟化技术的支撑下V2V迁移的可靠性相当高,多数的云存储厂商都预备安全防护方案,但是不能忽视的永远人的操作。

    运营停止

    在当下的互联网环境下,提供公众的云存储服务,每年的资金投入在5亿元以上,而且对私提供的云存储盈利模式还并不清晰,究竟有多少服务商可以持续永久的提供这种服务,这种服务后期是否收费?是否会因为亏损问题、盈收问题而被迫停止运营,在这种情况已有用户的数据向何处迁移?数据安全由谁负责,IM和Emai的盈利模式已经成熟所以相关厂商可以持续免费,而云存储的投入至入是前两者之和的十倍,厂商之间的服务整合和公约形成,首要解决并不是技术问题,而是利益分配问题,服务商在一定时间会关停服务才是用户数据留存问题最大的隐患。

    编辑本段企业私有

    考虑到公共云存储所存在的数据异存安全性、私密文件保护隐患方面的问题、以及企业上网行为管理的在执行上的需求,云存储作为一种方便快捷的文件备份方式很多企业开始在自己的网络内部架设私有的云,将云存储的服务端部署在企业的内部网络中,服务端的维护与管理可以由企业自行控制,企业员工可以在授权范围内安全的使用私有的云存储功能。很多在公共云存储服务端无法实现的功能,都能在私有的环境下得到良好的解决。作为一套适用于中小企业的私有云存储系统,必须区别于公共云存储的设计,从现今的需求上看主要分为两个方面:

    文件管控

    自动同步
    Windows客户端在指定目录下添加、修改、删除文件或目录,这种状态将会自动同步到云端。如果云端任意一个文件被添加、修改、删除,也会自动同步到当前Windows电脑。
    选择性同步
    用户不需要把云端所有的文件都同步到Windows电脑中,可根据需要,在Windows客户端进行选择性同步。选择一个或多个子目录进行同步。
    文件共享
    提供目录共享,企业成员可在共享目录编辑文件后,可自动同步到对方目录中。提供文件外链与文件分享,成员可将文件进行外部分享。
    快速部署
    通过单一安装文件完成,自动获取安装所需信息,无需用户干预。
    历史版本恢复.
    用户多次编辑文件后,可根据时间找到以前的版本,并可恢复。

    部署管理

    软件架构
    采用元/流分开技术模型,元数据存储在数据库中、流数据加密并混淆存在的硬盘介质上和信云盘采用Nginx服务器负载均衡方案以及Mysql冗余备份方案,确保系统高可靠性与数据库的搞可用性。
    多终端支持
    提供多终端支持,包括:Windows PC客户端、Android手机客户端、iPhone手机客户端、适配多款浏览器等。
    完善后台管理
    提供完善的管理后台。包括系统是否开放注册、Logo修改、用户管理、文件管理、用户统计、文件统计等操作。
    运行环境
    具有很好的兼容性和信云存储支持主流机型。包括:Windows XP、Windows 7、Android手机、iPhone手机、IE8浏览器、Chrome浏览器、Firefox浏览器等。
    节点配置
    CPU 支持ACPI规范中P-State,内存1G以上,硬盘空余空间1G以上,百兆及以上以太网,显示器屏幕分辩率1024×768及以上,使用IE 8和Firefox 4.0及更高版本的浏览器。
    性能
    千兆网络情况下,每秒可达50M传输速度。单节点数据规模达到1千万,系统可正常运转。
    结合等保管理的需求,在私有云存储的设计,还应该考虑到员工个人私钥加解密的功能,即员工根据工作权限分级的不同存放在企业私云上的文件应该是加密保存的,信息管理人员无法直接从服务端数据库中获取到明文的文件,只有分发了特定密钥的客户端下载文件后,才能在系统后台完成透明还原。

    优势

    1、节约成本
    云存储从短期和长期来看,最大的特点就是可以为小企业减少成本。因为如果小企业想要放在他们自己的服务器上存储,那就必须购买硬件和软件,要知道它是多么昂贵的。接着,企业还要聘请专业的IT人士,管理这些硬件和软件的维护工作,并且还要更新这些设备和软件。
    通过云存储,服务器商可以服务成千上万的中小企业,并可以划分不同消费群体服务。它可以担负起一个初创公司拥有最新、最好的存储成一部分成本,来帮助初创公司减少不必要的成本预算。
    2、更好的备份本地数据并可以异地处理日常数据
    如果你的所在办公场所发生自然灾害,由于你的数据是异地存储,因此是它非常安全的。即使自然灾害让你不能通过网络访问到数据,但是数据依然存在。如果问题只出现在你的办公室或者你所在的公司,那么可以你可以随便去一个地方用你的笔记本来访问重要数据和更新数据。它可以让你保持在恶劣条件下依然让你保持工作。
    当然,这不是意味你应该忘记备份数据。云存储提供给大多数的公司备份自己重要数据和保护个人数据。
    3、更多的访问和更好的竞争
    公司员工不在需要通过本地网络来访问公司信息。这就可以让公司员工甚至是合作商在任何地方访问他们需要的数据。
    因为中小企业不需要花费上千万美元来打造最新技术和最新应用来创造最好的系统,所以云存储为中小企业和大公司竞争铺平道路。事实上,对于很多企业来说,云存储利于小企业比大企业更多,原因就是大企业已经花重金打造自己的数据存储中心。 [5]

    编辑本段发展趋势


      云存储已经成为未来存储发展的一种趋势。但随着云存储技术的发展,各类搜索、应用技术和云存储相结合的应用,还需从安全性、便携性及数据访问等角度进行改进。
      (1)安全性
      从云计算诞生,安全性一直是企业实施云计算首要考虑的问题之一。同样在云存储方面,安全仍是首要考虑的问题,对于想要进行云存储的客户来说,安全性通常是首要的商业考虑和技术考虑。但是许多用户对云存储的安全要求甚至高于它们自己的架构所能提供的安全水平。既便如此,面对如此高的不现实的安全要求,许多大型、可信赖的云存储厂商也在努力满足它们的要求,构建比多数企业数据中心安全得多的数据中心。用户可以发现,云存储具有更少的安全漏洞和更高的安全环节,云存储所能提供的安全性水平要比用户自己的数据中心所能提供的安全水平还要高。
      (2)便携性
      一些用户在托管存储的时候还要考虑数据的便携性。一般情况下这是有保证的,一些大型服务提供商所提供的解决方案承诺其数据便携性可媲美最好的传统本地存储。有的云存储结合了强大的便携功能,可以将整个数据集传送到你所选择的任何媒介,甚至是专门的存储设备。
      (3)性能和可用性
      过去的一些托管存储和远程存储总是存在着延迟时间过长的问题。同样地,互联网本身的特性就严重威胁服务的可用性。最新一代云存储有突破性的成就,体现在客户端或本地设备高速缓存上,将经常使用的数据保持在本地,从而有效地缓解互联网延迟问题。通过本地高速缓存,即使面临最严重的网络中断,这些设备也可以缓解延迟性问题。这些设备还可以让经常使用的数据像本地存储那样快速反应。通过一个本地NAS网关,云存储甚至可以模仿终端NAS设备的可用性、性能和可视性,同时将数据予以远程保护。随着云存储技术的不断发展,各厂商仍将继续努力实现容量优化和WAN(广域网)优化,从而尽量减少数据传输的延迟性。
      (4)数据访问
      现有对云存储技术的疑虑还在于,如果执行大规模数据请求或数据恢复操作,那么云存储是否可提供足够的访问性。在未来的技术条件下,此点大可不必担心,现有的厂商可以将大量数据传输到任何类型的媒介,可将数据直接传送给企业,且其速度之快相当于复制、粘贴操作。另外,云存储厂商还可以提供一套组件,在完全本地化的系统上模仿云地址,让本地NAS网关设备继续正常运行而无需重新设置。未来,如果大型厂商构建了更多的地区性设施,那么数据传输将更加迅捷。如此一来,即便是客户本地数据发生了灾难性的损失,云存储厂商也可以将数据重新快速传输给客户数据中心。 [6]
    展开全文
  • 云存储技术

    2019-12-03 21:21:47
    云存储技术10.1 存储概述10.1.1 存储组网形态10.1.2 RAID10.1.3 磁盘热备10.1.4 快照10.2 云存储的概念与技术原理10.2.1 云存储技术分类10.2.2 存储类型10.2.3 块存储技术10.2.4 分布式文件存储10.2.5 传统分布式...

    10.1 存储概述

    10.1.1 存储组网形态

    存储的分类
    在这里插入图片描述

    DAS/SAN/NAS组网示意图
    在这里插入图片描述
    DAS(Direct Attachment Storage)
    直接连接存储:存储设备是通过电缆(通常是SCSI接口电缆)直接连到服务器的。 I/O请求直接发送到存储设备

    在这里插入图片描述
    DAS分析
    在这里插入图片描述
    NAS(Network Attachment Storage)
      网络 连接/附加/附属 存储:存储设备连接到现有的网络上,提供数据和文件服务,应用服务器直接把File I/O请求通过LAN传给远端NAS中的文件系统,NAS中的文件系统发起Block I/O到与NAS直连的磁盘。主要面向高效的文件共享任务,适用于那些需要网络进行大容量文件数据传输的场合。

    在这里插入图片描述
    在这里插入图片描述
    SAN(Storage Area Network)
    存储区域网络:它是一个用在服务器和存储资源之间的、专用的、高性能的网络体系。它为实现大量原始数据的传输而进行了专门的优化。
    在这里插入图片描述
    SAN的优缺点
    在这里插入图片描述
    DAS、NAS、SAN三种形态比较
    在这里插入图片描述

    10.1.2 RAID

    RAID0 :Striped Disk Array without Fault Tolerance( 没有容错设计的条带磁盘阵列,以条带形式将RAID阵列的数据均匀分布在各个阵列中。
    总容量=(磁盘数量)*(磁盘容量)
    在这里插入图片描述

    RAID 1 :以镜像作为冗余手段,虚拟磁盘中的数据有多个拷贝,放在成员磁盘上。
    总容量=(磁盘数量 / 2)*(磁盘容量)
    在这里插入图片描述

    RAID3 (条带分布+专用盘校验):以xor校验为冗余方式,使用专门的磁盘存放校验数据, 虚拟磁盘上的数据块被分为更小的数据块并行传输到各个成员物理磁盘上 ,同时计算出xor校验数据存放到校验磁盘上。 总容量=(磁盘数量 -1)*(磁盘容量)
    在这里插入图片描述

    RAID5 (条带技术+分布式校验):以XOR检验为冗余方式,校验数据均匀分布在各个数据磁盘上,对各个数据磁盘的访问为异步操作。

    在这里插入图片描述

    RAID6:能够允许两颗磁盘同时失效的RAID级别系统。总容量=(磁盘数 -2)(磁盘容量)
    在这里插入图片描述
    在这里插入图片描述
    RAID10 (镜像阵列条带化):将镜像和条带组合起来的组合RAID级别,最低一级是RAID1镜像对,第二级为RAID0。
    总容量=(磁盘数 /2)
    (磁盘容量)
    在这里插入图片描述
    RAID10 数据分布组织方法: 首先将磁盘两两镜像(RAID1),然后将镜像后得磁盘条带化。

    RAID50定义:将镜像和条带组合起来的组合RAID级别,最低一级是RAID5镜像对,第二级为RAID0。
    总容量=(磁盘数 -1)*(磁盘容量)
    在这里插入图片描述
    RAID50 数据分布组织方法:首先将分为n组磁盘,然后将每组磁盘做RAID5,最后将N组RAID5条带化。

    RAID 级别比较
    在这里插入图片描述

    10.1.3 磁盘热备

      热备份是指在建立RAID磁盘阵列系统的时候,将其中一个磁盘指定为热备磁盘,此热备磁盘在平常并不操作,当阵列中某一磁盘发生故障时,热备磁盘便取代故障磁盘,并自动将故障磁盘的数据重构在热备磁盘上。
    热备磁盘分为全局热备磁盘和局部磁盘
    1)全局热备盘:针对整个磁盘阵列,对阵列中所有RAID组起作用。
    2)局部热备盘:只针对某一RAID组起作用。

    磁盘热备的主要过程如下:
    1)由5个磁盘组成RAID5,其中4个数据盘,1个热备盘存储校验条带集,热盘平时参与计算。
    2)某个时刻某个数据盘损坏,热备盘根据校验集开始自动重构
    3)热备盘重构结束,加入RAID5代替损坏磁盘参与计算。
    4)替换新的磁盘,热备磁盘进行复制。
    5)热备盘复制完成后,重新建立校验集。

    10.1.4 快照

    在这里插入图片描述

    10.2 云存储的概念与技术原理

    10.2.1 云存储技术分类

    目前业界两种主流云存储技术解决方案:基于虚拟化技术和分布式存储。
    在这里插入图片描述

    10.2.2 存储类型

    在这里插入图片描述

    10.2.3 块存储技术

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    10.2.4 分布式文件存储

    文件存储以标准文件系统接口形式向应用系统提供海量非结构化数据存储空间。分布式文件系统把分布在局域网内各个计算机上的共享文件夹集合成一个虚拟共享文件夹,将整个分布式文件资源以统一的试图呈现给用户。 它对用户和应用程序屏蔽各个节点计算机底层文件系统的差异,提供用户方便的管理资源的手段或统一的访问接口。
    分布式文件系统的出现很好的满足互联网信息不断增长的需求,并为上层构建实时性更高,更易使用的结构化存储系统提供有效的数据管理的支持。在催生了许多分布式数据库产品的同时,也促使分布式存储技术不断的发展和成熟。
    在这里插入图片描述

    10.2.5 传统分布式文件系统NAS

    在这里插入图片描述

    10.2.6 对象存储技术

    在这里插入图片描述
    在这里插入图片描述

    10.2.7 表存储技术

    在这里插入图片描述

    10.2.8 分布式表存储

    在这里插入图片描述
    在这里插入图片描述

    10.2.9 表存储适应场景

    在这里插入图片描述
    各种存储技术对比
    在这里插入图片描述

    10.3 云存储产品与系统

    10.3.1 公有云的云存储产品

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    10.3.2 私有云的云存储产品

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    10.4 对象存储技术

    10.4.1 传统块存储与对象存储

      在传统的存储系统中用文件或块作为基本的存储单位,块设备要记录每个存储数据块在设备上的位置;而在对象存储系统中,对象是数据存储的基本单元,Object维护自己的属性,从而简化了存储系统的管理任务,增加了灵活性,在存储设备中,所有对象都有一个对象标识,通过对象标识OSD命令访问该对象。

    在这里插入图片描述

    10.4.2 对象

    在这里插入图片描述
    在这里插入图片描述

    10.4.3 对象存储系统的组成

    在这里插入图片描述
    OSD(Object-based Storage Device)
      每个OSD都是一个智能设备,具有自己的存储介质、处理器、内存以及网络系统等,负责管理本地的Object,是对象存储系统的核心。OSD同块设备的不同不在于存储介质,而在于两者提供的访问接口。
      OSD的主要功能包括数据存储和安全访问。目前国际上通常采用刀片式结构实现对象存储设备。

    OSD的主要功能
    OSD提供三个主要功能:
    (1) 数据存储。OSD管理对象数据,并将它们放置在标准的磁盘系统上,OSD不提供块接口访问方式,Client请求数据时用对象ID、偏移进行数据读写。
    (2) 智能分布。OSD用其自身的CPU和内存优化数据分布,并支持数据的预取。由于OSD可以智能地支持对象的预取,从而可以优化磁盘的性能。
    (3) 每个对象元数据的管理。OSD管理存储在其上对象的元数据,该元数据与传统的inode元数据相似,通常包括对象的数据块和对象的长度。而在传统的NAS系统中,这些元数据是由文件服务器维护的,对象存储架构将系统中主要的元数据管理工作由OSD来完成,降低了Client的开销。

    文件系统
      文件系统对用户的文件操作进行解释,并在元数据服务器和OSD间通信,完成所请求的操作。
      现有的应用对数据的访问大部分都是通过POSIX文件方式进行的,对象存储系统提供给用户的也是标准的POSIX文件访问接口。
      接口具有和通用文件系统相同的访问方式,同时为了提高性能,也具有对数据的Cache功能和文件的条带功能。
    同时,文件系统必须维护不同客户端上Cache的一致性,保证文件系统的数据一致

    元数据服务器 (Metadata Server)
    MDS控制Client与OSD对象的交互,主要提供以下几个功能:
    (1) 对象存储访问:MDS构造、管理描述每个文件分布的视图,允许Client直接访问对象。MDS为Client提供访问该文件所含对象的能力,OSD在接收到每个请求时将先验证该能力,然后才可以访问。
    (2) 文件和目录访问管理:MDS在存储系统上构建一个文件结构,包括限额控制、目录和文件的创建和删除、访问控制等。
    (3) Client Cache一致性:为了提高Client性能,在对象存储系统设计时通常支持Client方的Cache。由于引入Client方的Cache,带来了Cache一致性问题,MDS支持基于Client的文件Cache,当Cache的文件发生改变时,将通知Client刷新Cache,从而防止Cache不一致引发的问题。
    在这里插入图片描述

    10.5 存储技术的发展趋势

    1、存储虚拟化
      存储虚拟化是目前以及未来的存储技术热点,它其实并不算是什么全新的概念,RAID、LVM、SWAP、VM、文件系统等这些都归属于其范畴。
      存储的虚拟化技术有很多优点,比如提高存储利用效率和性能,简化存储管理复杂性,绿色节省,降低运营成本等。
      目前最新的存储虚拟化技术有自动分级存储(HSM)、自动精减配置(Thin provision)、云存储(Cloud storage)、分布式文件系统(Distributed file system),另外还有诸如动态内存分区、SAN和NAS虚拟化。
      虚拟化可以柔性地解决不断出现的新存储需求问题,因此我们可以断言存储虚拟化仍将是未来存储的发展趋势之一 。

    2、固态硬盘
      固态硬盘(SSD, solid state disk)是目前倍受存储界广泛关注的存储新技术,它被看作是一种革命性的存储技术,可能会给存储行业甚至计算机体系结构带来深刻变革。
      SSD与传统磁盘不同,它是一种电子器件而非物理机械装置,它具有体积小、能耗小、搞干扰能力强、寻址时间极小(甚至可以忽略不计)、IOPS高、I/O性能高等特点。
      对于存储系统来说,SSD最大突破是大幅提高了IOPS,摩尔定理的效力再次显现,通过简单地用SSD替换传统磁盘,就可能可以达到和超越综合运用缓存、预读、高并发、数据局部性、磁盘调度策略等软件技术的效用。
      SSD已经开始被广泛接受并应用,当前主要的限制因素包括价格、使用寿命、写性能抖动等。从最近两年的发展情况来看,这些问题都在不断地改善和解决,SSD的发展和广泛应用将势不可挡。

    3、重复数据删除
      重复数据删除(Deduplication)是一种目前主流且非常热门的存储技术,可对存储容量进行有效优化。它通过删除数据集中重复的数据,只保留其中一份,从而消除冗余数据。
      Dedupe技术可以帮助众多应用降低数据存储量,节省网络带宽,提高存储效率、减小备份窗口,节省成本。Dedupe技术目前大量应用于数据备份与归档系统,因为对数据进行多次备份后,存在大量重复数据。事实上,它也可以用于很多场合,包括在线数据、近线数据、离线数据存储系统。
      信息呈现的指数级增长方式给存储容量带来巨大的压力,而dedupe是最为行之有效的解决方案,因此固然其有一定的不足,它大行其道的技术趋势无法改变。更低碰撞概率的hash函数、多核、GPU、SSD等,这些技术推动dedupe走向成熟,由作为一种产品而转向作为一种功能,逐渐应用到近线和在线存储系统。

    4、SOHO存储
      SOHO(Small office, home office)存储即家庭或个人存储。现代家庭中拥有多台PC、笔记本电脑、上网本、平板电脑、智能手机,这种情况业已非常普遍,这些设备将组成家庭网络。
      SOHO存储的数据主要来自个人文档、工作文档、软件与程序源码、电影与音乐、自拍视频与照片,部分数据需要在不同设备之间共享与同步,重要数据需要备份或者在不同设备之间复制多份,需要在多台设备之间协同搜索文件,需要多设备共享的存储空间等
      SOHO存储目前大致有两种思路,一是home NAS微型存储装置,提供文件级的集中共享存储空间,并在NAS提供数据备份和复制、数据管理、高级文件检索、多种数据访问协议和接口等功能。二是p2p存储系统,利用软件系统将各个设备的存储空间统一起来,提供一个虚拟的集中共享存储空间,同样可以提供home NAS上的所有功能。

    5、ROBO存储
      ROBO(Remote office, branch office)存储即企业远程或分支机构存储。
      大的公司或组织机构会有多个子公司或分支机构组成,物理分布在世界上不同的城市。ROBO存储正是为了应对这种基于互联网的协作式工作模式而产生的。ROBO存储的需求主要集中在数据同步、共享、分发、协作,传统的上传/下载模式文件服务难以满足这种需求,天然地需要基于互联网的广域分布式文件系统。
      针对ROBO存储,通常在公司总部部署集中式存储系统保存所有的数据,在每个子公司部署较小的存储节点,然后通过高速网络互联,并提供高效的数据同步、分发、数据缓存等机制,尽量减少数据通信量以提高性能和实时性。目前ROBO存储似乎还没有成熟的解决方案。

    6、语义化检索
      数据检索目前主要分为两类,一是基于文件名,二是基于文件内容。主流文件系统的数据检索都是基于文件名进行的,桌面搜索引擎则综合文件名和文件内容进行检索,前者遍历文件系统元数据,后者需要解析文件内容,它们都是通过关键字匹配来实现检索。显然,这两类检索的语义是非常有限的,与人类思维方式有着很大的区别。
      存储系统完全可以实现语义化的检索,通过文件属性和关系来检索文件,并用关系网络(类似社会化网络)来表示检索结果。这种方式语义上更加丰富,检索结果更加精确,也更加符合人类的思维方式。
      面对海量的数据,精确、高效地检索出自己需要的数据是第一步,语义化检索符合存储的技术发展趋势。

    7、存储智能化
      人工智能是计算机的发展方向,这是个理想而艰巨的目标。对于存储系统来说,智能化代表着自动化、自适应、兼容性、自治管理、弹性应用,通过对系统的监控、分析和挖掘来发现数据应用的特点和使用者的行为模式并动态调整配置,从而达到最佳的运行状态。
      存储智能化可以分别在存储系统栈中的不同层次实现,包括磁盘、RAID、卷管理器、文件系统、NAS系统、应用系统,从而形成系统的存储智能化。
      虽然我们已经取得了一定的成果,但离真正的目标差距还很大,存储学术界和业界都在这此而努力。智慧的存储,让数据在整个信息生命周期内有序、高效、自治,存储效用最大化、简化管理、减少人工干预,这应该是存储的大趋势。
    在这里插入图片描述

    展开全文
  • 云存储是为解决传统存储无法解决的问题而产生的,并不是要完全取代传统的存储。存储方案的选择,要根据数据的形态、数据量及数据读写的方式来做规划。... 云存储种类及适合的应用 我们可以把云存储分成二类,Block


    云存储是为解决传统存储无法解决的问题而产生的,并不是要完全取代传统的存储。存储方案的选择,要根据数据的形态、数据量及数据读写的方式来做规划。每个存储方案都有它的优点与缺点。

     

    云存储的种类及适合的应用

     

      我们可以把云存储分成二类, Block Storage File Storage

      Block Storage 会把单笔的数据写到不同的硬盘,借以得到较大的单笔读写带宽,适合用在数据库或是需要单笔数据快速读写的应用。它的优点是对单笔数据读写很快,缺点是成本较高,并且无法解决真正海量文件的储存,像 EqualLogic 3PAR 的产品属于这一类。

      File Storage 是基于文件级别的存储,它是把一个文件放在一个硬盘上,即使文件太大拆分时,也放在同一个硬盘上。它的缺点是对单一文件的读写会受到单一硬盘效能的限制,优点是对一个多文件、多人使用的系统,总带宽可以随着存储节点的增加而扩展,它的架构可以无限制的扩容,并且成本低廉,代表的厂商如 Parascale

     

    那些应用适合 Block Storage

    快速更改的单一文件系统

    快速更改单一文件的例子包括 数据库、共用的电子表单,在这些例子中,好几个人共享一个文件,文件经常性地、频繁的更改。为了达到这样的目的,系统必须具备很大的内存、很快的硬盘及快照等功能,市场上有很多这样的产品可以选择。

     

    针对单一文件大量写的高性能计算( HPC

    某些高性能计算有成千上百个使用端,同时读写单一个文件,为了提高读写效能,这些文件被分布到很多个节点,这些节点需要紧密地协作,才能保证数据的完整性,这些应用由集群软件负责处理复杂的数据传输。例如石油探勘及财务数据模拟。

     

    哪些应用适合 File Storage

    File Storage 适合应用的场合如下

     

    1.   文件较大,总读取带宽要求较高 例如 网站、 IPTV

    2.   多个文件同时写入 例如 监控

    3.   长时间存放的文件 例如文件备份、存放或搜寻

     

    这些应用有一些共通的特性

    1.   文件的并发读取

    2.   文件及文件系统本身较大

    3.   文件使用期较长

    4.   对成本控制要求较高

     

    下面我们介绍一下典型的 File Storage 应用

    文件及内容搜寻

    大部分的情形,数据久了之后,使用的机会就比较少,但为了可以查询,不管是公司资料还是媒体内容,查询的成本必须低于数据本身的价值,这样才划得来。用户可以使用旧的甚至淘汰不用的服务器建立云存储,存放这些旧的数据以供查询。

     

    Tier-2 NAS

    File Storage 支持标准的网络协议,对使用者来说,就是一个 NAS ,用户在使用时,几乎不需更动数据中心任何的应用端程序,一些旧的数据,可以迁移到这个云存储中,我们可以把它作为 Tier-2 NAS 来使用。 Tier-2 是指二级存储的意思。

     

    多文件大量写入的应用

    监控是大量数据写入的典型应用,成千上万的摄像头,将数据写到各自的文件中,在一个云存储中,有很多存储节点,每个存储节点可以提供多个摄像头写入,在写的带宽不够时,只要增加存储节点即可,由于数据集中处理,只需要一个管理人员,便能管理整个监控系统。

     

    数据大量读取的应用

    数据挖掘及高性能计算是大量读取的标准应用,这些应用需要很大的读取带宽,这些带宽的要求往往不是现有一般的 NAS 可以提供的,云存储可以把很多文件分散写到不同的存储节点,以便透过多个存储节点的并发得到最大的带宽。这里的高性能计算与 Block Storage 中说的不同点是,这里的高性能计算所读取的不是单一文件,而是从不同存储节点读取很多文件,这是 File Storage 的强项。

     

    多个使用端都希望读取同一个文件的应用

    IPTV 及网站的特质是,一个文件同时供很多人读取,为了应付大量及突如其来的读取需求,云存储会复制多份文件,以满足应用端读取的需求。

     

    结论

      以上我简单了介绍云存储的种类及适合的应用,有机会我再仔细介绍每一个应用。总之云存储是希望借由服务器便宜的成本及弹性的架构,解决传统存储不能满足的问题,客户可以根据数据的形态,选择合适的存储方案。

     

    作者 Bill Lin 目前任职于 Parascale 公司

    展开全文
  • 随着企业对分布式存储的需求...恒天软件企业云存储管理方案(简称HT Box)细粒度的权限控制以及多租户模式为企业打造了灵活安全的文件共享和存储环境,为企业的各个部门以及员工提供各种安全等级要求的文件管理形式。
  • 提供云存储及文件共享服务器 内容精选换一换弹性文件服务(Scalable File Service)为您的弹性云服务器(ECS)提供一个完全托管的共享文件存储,它提供标准文件协议(NFS),能够弹性伸缩至PB规模,具备可扩展的性能,为...
  • 中国电信云存储

    千次阅读 2011-09-13 09:34:44
    用户角度:安全、高速、便捷、海量、弹性(按需扩展 ) ...电信云存储产品(天翼云存储)业务分类: 1、个人用户存储(个人数据中心)(SaaS) 2、电信自有业务个人数据整合存储; 3、面向第三方的开放平台;(PaaS)
  • 虚拟化服务器和云存储的对比 内容精选换一换云备份和镜像服务有很多功能交融的地方,有时需要搭配一起使用。镜像有时也可用来备份云服务器运行环境,作为备份来使用。云备份和镜像服务区别主要有以下几点,如表1所示...
  • 服务器 搭建 文件分类存储 内容精选换一换制作Docker镜像,有以下两种方法。快照方式制作镜像(偶尔制作的镜像):在基础镜像上,比如Ubuntu,先登录镜像系统并安装Docker软件,然后整体制作快照,即可得到所需软件...
  • 云存储是一种网上在线存储(英语:Cloudstorage)的模式,即把数据存放在通常由第三方托管的多台虚拟服务器,而非专属的服务器上。今天就让我们来看看关于云陈存储的精...
  • 阿里云的产品种类繁多,今天让我们一起来了解下对象存储(Object Storage Service,简称OSS)吧! 对象存储是什么? 简单来说,对象存储OSS是阿里云提供的海量、安全和高可靠的云存储服务。存储容量和处理能力的弹性...
  • 中国电信云存储软件天翼云4.0,6日在广州发布。据悉,天翼云4.0主打“快•乐分享”概念,体现“快-传输”与“乐-分享”的融合。除了更加突出体现天翼云的电信管道上的差异化优势、传输速度和稳定性上有更显性的提升...
  • 阿里云的产品种类繁多,今天让我们一起来了解下对象存储(Object Storage Service,简称OSS)吧! 什么是对象存储呢? 简单来说,对象存储OSS是阿里云提供的海量、安全和高可靠的云存储服务。存储容量和处理...
  • 当今***的存储类型是哪种?...不急,通过下面的分析对比,你将会找到最适合自己使用的那个云存储方式~首先你要明白,什么是云存储?云存储是在云计算概念上发展起来的一种复杂存储资源池系统,它通过集群应用、分布...
  • 无论阿里,还是腾讯、百度等其他公有平台一般都会提供对象存储服务。对象存储是目前云计算应用非常广泛的一项技术。今天我们就来聊聊这项有用的技术。 阿里对象存储服务的入口 对象存储是什么? ...
  • 针对混合云存储的分析,需要从两条路线来展开,一个是来自企业级存储厂商拓展到云端的混合云存储产品;一个是来自公有云厂商奋发图强兼顾企业级用户本地私有云与公有云构建的混合云存储。 全球存储观察创始人 ...
  • 从单机到互联网,存储作为的基础设施,主要发展都是围绕构建 低成本、高性能、可扩展、易用的目标进行演进,时至今日,在形态上存储分为单机存储、集中存储、分布式存储、云存储、云原生存储 各阶段存储的基本...
  • 云存储进化

    2017-07-03 14:01:00
    大数据时代,PC互联网,移动互联网以及社交化平台的发展,让数据呈现几何化、爆炸式增长。而随着数据来源渠道的增多,网络的数据也不再是单一的数据类型,大量的非结构化数据涌现改变了数据的...2013年,世界上存储...
  • 云存储呼唤软实力

    2017-07-04 10:59:00
    虽然还有两个多月才到2010年,但“云存储”早已在存储行业2009年热门词汇榜上的...不过,对于“云”究竟为何物,大家仍有不少疑问,特别是在一些存储厂商宣称推出专门的“云存储产品之后,愈发令大家迷惑——实现...
  • 1.2云存储标准的特性

    2017-07-25 16:23:05
    云存储发展的历程并不长,市场上涌现出了各式各样的云存储产品,如何衡量云存储设备的性能、服务质量和节能减排等问题。 第一、实用性。 云计算 是一个集成性很强的项目 项目包括:网络、硬件、软件、数据中心、...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 30,818
精华内容 12,327
关键字:

云存储产品分类