阿里云存储学习笔记

个人总结的阿里云存储常用产品的学习笔记。

阿里云存储

• 块存储
  • 云盘
    • 类型
      • 云盘——数据块级别的块存储产品。云盘采用多副本的分布式机制，具有低时延、高性能、持久性、高可靠等性能，支持随时创建、扩容以及释放。
      • 共享块存储——与云盘类似，采用多副本的分布式机制，支持多实例并发访问，具有低时延、高性能、高可靠等特性，适用于完全共享型（shared-everything）架构下对块存储设备的共享访问场景。
      • 本地盘——基于云服务器ECS所在物理机（宿主机）上的本地硬盘设备，具有低时延、高随机IOPS、高吞吐量、高性价比等优势。
    • 性能指标
      • IOPS
      • 吞吐量（Throughput）
      • 访问时延（Latency）
      • 容量（Capacity）
    • 云盘类型
      • ESSD云盘
      • SSD云盘
      • 高效云盘
      • 普通云盘
    • 创建方式
      • 系统盘
      • 数据盘
    • 共享块存储
      • 共享块存储专为企业级用户的核心业务而设计，打造高可用集群架构，适用于完全共享型（Shared-everything）数据库架构下对块存储设备的访问场景。例如，政府、企业和金融行业常用的高可用架构数据库集群Oracle RAC（Real Application Cluster）以及高可用架构服务器集群（High-availability cluster）。
      • 类型
        • SSD共享块存储
        • 高效共享块存储
      • 文件系统
        • 共享块存储不提供预装的集群文件系统，需要您自行安装，例如GFS（Google File System）和GPFS（General Parallel File System）等集群文件系统。对于典型的Oracle RAC业务场景，推荐您使用Oracle ASM（Automatic Storage Management）管理存储卷和文件系统。
    • 本地盘
      • 本地盘是ECS实例所在物理机上的本地硬盘设备。本地盘能够为ECS实例提供本地存储访问能力，具有低时延、高随机IOPS、高吞吐量和高性价比的优势。
      • 类型
        • SSD本地盘
        • SATA HDD本地盘
    • 云盘三副本技术
      • 三副本原理
        • 在阿里云数据存储平台中，有三类角色，分别为Master、Chunk Server和Client。您的一个写操作最终由Client执行，执行过程简要说明如下：
          • Client收到写操作请求，并计算出写操作对应的Chunk。
          • Client向Master查询该Chunk的三份副本存放的数据节点（即Chunk Server）。
          • Client根据Master返回的结果，向这三个Chunk Server发出写请求。
          • 如果三份都写成功，Client返回成功，反之则Client返回失败。
      • 数据保护机制
        • 当有数据节点损坏，或者某个数据节点上的部分硬盘发生故障时，集群中部分Chunk的有效副本数就会小于三。此时，Master就会发起自动同步任务，在Chunk Server之间复制数据，使集群中所有Chunk的有效副本数达到三份。
  • 快照
    • 快照是云盘数据在某个时刻完整的只读拷贝，是一种便捷高效的数据容灾手段，常用于数据备份、制作自定义镜像、应用容灾等。
    • 用途
      • 容灾备份：为云盘创建快照，再使用快照创建云盘获取基础数据，实现同城容灾和异地容灾。
      • 环境复制：使用系统盘快照创建自定义镜像，再使用自定义镜像创建ECS实例，实现环境复制。
      • 数据开发：为数据挖掘、报表查询和开发测试等应用提供近实时的真实生产数据。
      • 提高容错率：出现操作失误时，能及时回滚数据，降低操作风险，实现版本回退。
    • 适用场景
      • 本地快照具有秒级别的备份速度，大幅缩短业务等待时间，主要适用于以下场景：
      • 快速备份数据量较大的关键业务系统，例如数据库、容器、SAP HANA等。
      • 高危操作提前备份，缩短等待时间。例如更换系统盘、扩容云盘、更新系统补丁等。
      • 常见的DevOps场景，需要缩短ECS实例的启动时间。假设您希望复制一台ECS实例的环境，本地快照能缩短自定义镜像的制作时间，再通过复制镜像实现跨地域迁移实例数据。
  • 镜像
    • ECS镜像提供了创建ECS实例所需的信息。创建ECS实例时，必须选择镜像。镜像文件相当于副本文件，该副本文件包含了一块或多块云盘中的所有数据，对于ECS而言，这些云盘可以是单块系统盘，也可以是系统盘加数据盘的组合。
    • 镜像类型
      • 公共镜像
      • 自定义镜像
      • 共享镜像
      • 镜像市场
• 对象存储OSS
  • 结构化非结构化数据存储到OSS 以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）和归档存储（Archive）作为不经常访问数据的存储方式。
  • 相关概念
    • 存储类型（Storage Class）
      • OSS 提供标准、低频访问、归档三种存储类型，全面覆盖从热到冷的各种数据存储场景。
    • 存储空间（Bucket）
      • 存储空间是您用于存储对象（Object）的容器，所有的对象都必须隶属于某个存储空间。存储空间具有各种配置属性，包括地域、访问权限、存储类型等。
    • 对象/文件（Object）
      • 对象是 OSS 存储数据的基本单元，也被称为 OSS 的文件。对象由元信息（Object Meta）、用户数据（Data）和文件名（Key）组成。对象由存储空间内部唯一的 Key 来标识。对象元信息是一组键值对，表示了对象的一些属性，例如最后修改时间、大小等信息，同时您也可以在元信息中存储一些自定义的信息。
    • 地域（Region）
      • 地域表示 OSS 的数据中心所在物理位置。您可以根据费用、请求来源等选择合适的地域创建 Bucket。
    • 访问域名（Endpoint）
      • Endpoint 表示 OSS 对外服务的访问域名。OSS 以 HTTP RESTful API 的形式对外提供服务，当访问不同地域的时候，需要不同的域名。通过内网和外网访问同一个地域所需要的域名也是不同的。
    • 访问密钥（AccessKey）
      • AccessKey（简称 AK）指的是访问身份验证中用到的 AccessKeyId 和 AccessKeySecret。OSS 通过使用 AccessKeyId 和 AccessKeySecret 对称加密的方法来验证某个请求的发送者身份。AccessKeyId 用于标识用户；AccessKeySecret 是用户用于加密签名字符串和 OSS 用来验证签名字符串的密钥，必须保密。
    • 强一致性
      • Object 操作在 OSS 上同样具有强一致性，用户一旦收到了一个上传（PUT）成功的响应，该上传的 Object 就已经立即可读，并且 Object 的冗余数据已经写成功。不存在一种上传的中间状态，即 read-after-write 却无法读取到数据。对于删除操作也是一样的，用户删除指定的 Object 成功之后，该 Object 立即变为不存在。
    • 数据冗余机制
      • OSS 采用数据冗余存储机制，将每个对象的不同冗余存储在同一个区域内多个设施的多个设备上，确保硬件失效时的数据可靠性和可用性。
  • 应用场景
    • 图片和音视频等应用的海量存储
    • 网页或者移动应用的静态和动态资源分离（结合CDN）
    • 云端数据处理
  • 一般常见问题
    • OSS 适合谁用？
      • OSS 适合社区、多媒体分享站、电子商务等各类形式规模的网站站长，APP应用和软件应用开发者，游戏开发企业以及有大规模数据存储需求的用户使用。
    • OSS 适合存储什么？
      • OSS 适合存储论坛网站与软件应用中的附件、高清图片、音视频、备份文件等，以及各种APP应用、多终端同步软件、网盘下载站的文件。
    • OSS 可以存储多少数据，有上限吗？
      • OSS 总存储容量不限制，单个 Bucket 容量也不限制。通过 OSS 控制台仅可以上传小于 5GB 的文件。对于大于 5GB 的文件，需要使用分片上传和断点续传功能，或者使用图形化工具 ossbrowser 或命令行工具 ossutil 直接上传。
    • OSS 提供哪些存储类型？
      • OSS 提供标准、低频访问、归档三种存储类型，全面覆盖从热到冷的各种数据存储场景。其中标准存储类型提供高可靠、高可用、高性能的对象存储服务，能够支持频繁的数据访问；低频访问存储类型适合长期保存不经常访问的数据（平均每月访问频率 1 到 2 次），存储单价低于标准类型；归档存储类型适合需要长期保存（建议半年以上）的归档数据，在三种存储类型中单价最低。详情请参见存储类型介绍。
    • OSS 的可靠性如何？
      • OSS 为开发人员提供了一个安全、低成本、高可靠且高度可扩展的云存储基础设施。阿里云自己也使用该基础设施来运行其全球网站网络。OSS 标准存储和低频访问存储类型的设计可实现 99.995% 的可用性，归档存储类型的设计可实现 99.99% 的可用性。所有这些存储类型均受阿里云对象存储 OSS 服务等级协议支持。
    • 如果来自应用程序的流量突然激增，OSS 如何保证业务的可用性？
      • OSS 一开始就将处理来自任何互联网应用程序的高流量作为设计目标，提供按量计费的定价策略以及无限制的容量，确保您的服务不会因流量激增而中断。OSS 能够均衡地分布负载，任何应用程序都不会受到流量峰值的影响。
    • OSS的数据是如何组织的？
      • OSS 是一个分布式的对象存储服务，提供的是一个 Key-Value 对形式的对象存储服务。当您存储文件（Object）时，需要指定此 Object 的名称（Key），后续您将通过这个 Key 来获取该 Object 的内容。
    • 什么是地域？
      • 地域是一个地理位置，在其中提供多个在物理上独立且隔离的可用区，这些可用区通过延迟低、吞吐量高且冗余性高的网络连接在一起。
    • 什么是可用区（AZ）？
      • 可用区是指在同一地域内，电力和网络互相独立的物理区域。同一可用区内实例之间的网络延时更小。在同一地域内可用区与可用区之间内网互通，可用区之间能做到故障隔离。
    • OSS 的费用是多少？
      • 使用 OSS，您可以按实际使用量付费，先使用，后付费，没有最低费用限制。您也可以预先购买资源包，之后使用资源时，扣除相应的额度。一般情况下，资源包更加优惠。详细的价格信息请参见阿里云产品定价。
    • 如果其他账号访问我的 OSS 资源，应该如何付费？
      • 当其他账号访问您的 OSS 资源，我们将按正常的 OSS 定价收费。您也可以选择将存储空间配置为请求者付费模式，在这种模式下，将由请求方支付 OSS 数据的相关请求和下载费用。详情请参见请求者付费模式。
    • 安全性
      • 数据存储在 OSS 上安全吗？
        • OSS 本身是非常安全的。创建完成后时，只有资源所有者才能访问其 OSS 资源。OSS 提供用户身份验证，以控制对数据的访问。您可以使用各种访问控制策略，例如存储空间级别和文件级别的访问控制列表（ACL），选择性地向用户和用户组授予权限。OSS 控制台会显示您可公开访问的存储空间。 您可以将不希望公开访问的存储空间及文件设置为私有读写。如果您将私有读写的存储空间或文件的 ACL 设置为公共读/写时，OSS 会向您发出警告。
    • 存储管理
      • 什么是 OSS 生命周期管理？如何利用生命周期管理来帮助降低 OSS 存储成本？
    • OSS 跨区域复制？
      • 跨区域复制（Bucket Cross-Region Replication） 是跨不同 OSS 数据中心（地域）的 Bucket 自动、异步复制 Object，它会将 Object 的创建、更新和删除等操作从源存储空间复制到不同区域的目标存储空间。该功能能够很好的提供 Bucket 跨区域容灾或满足用户数据复制的需求。目标 Bucket 中的文件是源 Bucket 中文件的精确副本，它们具有相同的文件名、元数据以及内容，例如创建时间、拥有者、用户定义的元数据、Object ACL、文件内容等。
    • 跨区域复制如何收费？
      • 开启跨区域复制功能后，主从两个区域的 Bucket 在备份文件时会产生跨区域间的数据流量，OSS 会收取跨区域复制流量费用。每同步1个 Object，OSS 会累计计算请求次数并进行按量计费。目前跨区域复制流量仅支持按量计费，不提供资源包。
• 云存储网关
  • 云存储网关（Cloud Storage Gateway：简称CSG）是一款可以部署在用户本地数据中心和阿里云上的网关产品。它以阿里云对象存储（OSS）为后端存储，为云上和云下应用提供业界标准的文件服务（NFS和SMB）和块存储服务（iSCSI）。
    • 文件网关
      • 文件网关将OSS Bucket的对象结构与NAS文件系统的目录/文件建立映射关系。用户通过标准的NFS和SMB协议即可读写指定OSS Bucket里的对象。并且利用本地存储空间作为热数据缓存，使用户在享受OSS Bucket海量空间的同时，保障数据访问的高性能。文件网关还高度兼容POSIX和第三方备份软件。如果是小文件的备份和共享读写场景，推荐使用标准型或基础型文件网关；如果对性能有一定要求或者同时有多个客户端访问数据的用户，推荐使用增强型/性能型文件网关。
    • 块网关
      • 块网关在OSS中创建存储卷，提供Internet小型计算机系统接口（iSCSI）协议访问。本地应用程序可将这些卷作为iSCSI目标进行访问。块网关提供两种模式：透传模式和缓存模式。透传模式可以将块卷数据切片同步上云，适用于专线等高速链路客户；缓存模式提供本地缓存盘进行读写加速，缓存数据异步上云，适用于期望本地快速访问但是上云链路慢的客户。
  • 应用场景
    • 文件网关
      • 在本地存储有限的情况下搭建一个海量文件系统的文件存储服务。
      • 将数据以对象形式存储在云端，但希望应用仍然以文件系统的方式访问文件而不需修改代码。
      • 在多个数据中心，通过文件存储服务的方式访问共享文件夹。
      • 文件网关支持NFS和SMB这两种网络传输协议，两者都是基于局域网的网络文件传输协议。
    • 块网关
      • 通过备份软件备份数据到云上且备份软件支持iSCSI高效传输。
      • 将视频流数据通过iSCSI访问方式导入存储卷上，实现云上存储。
  • 使用场景
    • 云存储扩容和迁移
      • 集成智能缓存算法，自动识别冷热数据，将热数据保留在本地缓存，保证数据访问体验，无感知的将海量云存储数据接入本地数据中心，拓展存储空间。同时在云端保留全量数据（冷+热）保证数据的一致性。
    • 云容灾
      • 随着云计算的普及，越来越多的用户把自己的业务放到了云上。但是随着业务的发展，如何提高业务的可靠性和连续性，跨云容灾是一个比较热门的话题。借助云存储网关对虚拟化的全面支持，可以轻松应对各种第三方云厂商对接阿里云的数据容灾。
    • 多地数据共享和分发
      • 通过多个异地部署的文件网关实例，对接同一个阿里云OSS Bucket，可以实现快速的异地文件共享和分发，非常适合多个分支机构之间互相同步和共享数据。
    • 适配传统应用
      • 有很多用户在云上的业务是新老业务的结合，老业务是从数据中心迁移过来的使用的是标准的存储协议，例如： NFS/SMB/iSCSI。新的应用往往采用比较新的技术，支持对象访问的协议。如何沟通两种业务之间的数据是一个比较麻烦的事情，云存储网关正好起到一个桥梁的作用，可以便捷的沟通新旧业务，进行数据交换。
    • 替代ossfs和ossftp
      • 通过文件网关的服务可以完美替代ossfs和ossftp。通过创建文件网关，用户只需要执行简单的挂载（NFS）和映射（Windows SMB）就可以像使用本地文件系统一样使用OSS。
  • 使用须知
    • 无论本地或者云上部署需要在防火墙或者VPC安全组打开相应协议端口
    • 块网关需要部署本地缓存需要计算缓存空间
• 混合云存储阵列 Hybrid Cloud Storage Array
  • 应用场景
    • 双活容灾
      • Apsara系列提供了丰富的数据保护服务，满足最严苛应用双活需求，在前端应用到配合下可以实现本地的应用双活容灾，为企业关键业务的保驾护航。
    • 异构虚拟化
      • 接管各种品牌、型号、接口的存储设备，打通存储设备间的容量壁垒，实现跨设备存储资源集中调度。存储虚拟化技术结合多项先进特性，保证存储资源的高效利用与可靠管理。 • 依靠SA系列的透明接管，可以实现旧存储的无缝接入，支持业界95%以上品牌和型号的光纤存储（和部分IP SAN）； • 可实现异构存储数据迁移，迁移过程无需停机，省时省力，支持回退安全可靠； • 数据100%同步后可以撤走旧存储或者继续保持镜像关系运行。
    • 数据迁移
      • 对于老旧和性能比较差的阵列，Apsara可以实现对旧数据的热迁移，并且可以通过无中断迁移功能，实现卓越的效率和业务价值。 • 帮助客户实现老旧存储的利旧整合和存储空间再利用，节约用户成本，降低管理运维复杂度 • 可实现异构存储的在线数据迁移，降低数据迁移复杂度和业务中断时间风险 • 同云卷功能结合，实现旧设备的快照上云备份
  • 原生云集成
    • 云扩容
      • 支持云缓存，云复制和云分层模式，利用云空间扩展本地存储。
    • 云备份
      • 自动云备份简化数据管理与维护，支持用户在阵列本地存储中建立快照，并将各时间的快照镜像上传到预配置的云端OSS Bucket作为备份。
    • 云复制
      • 文件级云复制兼顾性能与数据保护，支持混合云存储阵列的本地存储和云端在文件夹级的双向数据镜像。
• 混合云容灾HDR
  • 混合云容灾服务（Hybrid Disaster Recovery， 简称 HDR）是一个为您的数据中心提供企业级应用的本地备份与云上容灾一体化的服务。
    • 混合云容灾服务解决的核心问题
      • 混合云容灾解决的两个核心问题是：
        • 应用级容灾 - 业务持续性 (Business Continuity) 保障：在数据中心故障或长时间系统维护作业时，在云上快速恢复应用运行，缩短业务停机时间，极大减少损失。
        • 数据级容灾：在数据中心备份您的数据库、虚拟机、物理机整机，备份数据存储在本地并自动上云。可在自建数据中心发生重大灾害时保障数据安全，同时提供高效的本地和云上的双重恢复。
        • 此外，利用混合云容灾服务的服务器整机复制能力，您可以方便地将本地服务器迁移到阿里云 ECS，无需重构，您就可以完成应用轻松上云。
    • 混合云容灾服务支持的业务类型
      • 混合云容灾服务目前支持三种业务类型：
        • 连续复制型容灾（CDR）：解决企业关键应用的高标准容灾方案，提供秒-分级的 RPO 和 RTO 容灾。
        • 快照型容灾（SDR） ：解决企业核心应用的数据级容灾数据，可以对数据库、虚机、文件等实现多版本本地备份和自动备份上云。此外，还可以实现应用服务器的小时级别 RPO、RTO 的整机容灾。关于CDR 与 SDR 的区别以及如何选择，您还可以参考选型参考文档。
        • 混合云大数据容灾（公测中）：解决 Hadoop 集群数据的实时容灾复制，跨集群大数据湖建设，Hadoop 备份的问题，实现大数据集群间的近 0 RPO 实时双向复制。
  • 应用场景
    • 关键应用的异地容灾
      • 在本地数据中心上运行的应用可能面临各种意外情况。例如，由于软硬件环境被破坏而无法在短时间内恢复应用，火灾、自然灾害等事件甚至可能导致整个数据中心的重建。这些情况会导致关键应用长时间不可使用，从而对您的业务造成较大损失。当自有 IDC 内的应用无法短时间恢复时，混合云容灾服务能够帮助您将应用在云上快速拉起。
      • 使用混合云容灾网关后，核心应用的服务器镜像、应用数据、文件等都被持续复制到阿里云上。如果自有 IDC 内应用出现难以恢复的故障时，您可以在阿里云上启动容灾恢复网关，快速在 ECS 上恢复应用服务器运行，使应用迅速重新上线，极大减少业务损失。平时，您还可以方便地进行容灾演练，确保真实故障发生时恢复流程顺畅，保证容灾计划的准确性。
      • 混合云容灾服务让您无需承担自建灾备中心的巨大投入，也无需担心传统容灾方案复杂的软硬件部署运维，极大减少了异地容灾的成本，提高容灾的有效性。
    • 应用级本地与远程备份
      • 本地备份设备的容量限制了可以保留的备份数量。备份媒介的损坏、火灾、自然灾害等情况可能导致数据的永久丢失，造成难以承受的损失。针对这些问题，远程备份成为一种主流选择，但是异地灾备中心建设的复杂性和高成本不容忽视。
      • 混合云灾备一体机可以对服务器镜像、应用数据、文件等进行备份，并将备份数据高效保存在一体机内以备快速恢复。同时，利用重删压缩加密能力，一体机可以安全高效地将备份保存到阿里云上，提供高性能的异地备份。并且，利用云上的海量空间，您可以设置远超自有 IDC 的备份过期时间，进一步提升备份能力。
    • 整机云迁移
      • 传统的上云迁移一般需要应用在云镜像上重新安装配置，ECS虚拟机重新配置，甚至应用重构等步骤，这个过程往往比较漫长。尤其是一些第三方开发的应用，因为软件依赖多且不明确、配置复杂等情况，上云迁移操作较为困难。
      • 混合云容灾网关或者灾备一体机提供了整机备份上云并在云上恢复的方式，让您可以在 ECS 中非常方便地真实还原云下服务器环境，让上云迁移变得简单直观。
• 混合云备份HBR
  • 混合云备份服务（Hybrid Backup Recovery，简称HBR) 是一种高效、安全、低成本的全托管式云备份存储服务。您可以使用混合云备份将企业数据中心的数据、分支机构数据，或云上资源备份到混合云备份的云上备份仓库。
  • 应用场景
    • 备份数据中心数据
      • 本地数据中心发生无法短期恢复的故障时，从阿里云备份库上直接通过软件还原数据。
    • 备份阿里云云上数据
      • 备份阿里云虚拟机上数据，利用内部网络带宽将数据高效地备份到HBR备份库。
    • 多分支机构统一备份管理
      • 您可以使用HBR备份部署在云下、云上多个分支机构的数据。您还可以将云上的数据备份到其他地域，从而实现跨区域容灾，保证备份数据或服务的可用性。多区域数据备份统一管理，减少管理成本。
    • 备份基于workflow的数据源
      • 您可以使用HBR备份基于workflow的其它数据源，提高数据的安全性。目前HBR支持备份SAP HANA、SQL Server、MySQL、Oracle、MongoDB、 Hyper-v 等。
  • 应用方式
    • ECS备份
    • 本地备份
    • 云存储网关备份
    • 阿里云NAS备份
    • OSS备份
    • 数据迁移
• 文件存储HDFS
  • 文件存储HDFS允许您就像在Hadoop分布式文件系统 (Hadoop Distributed File System) 中管理和访问数据。您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件系统。
  • 文件存储HDFS适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户，进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。
  • 创建文件存储HDFS实例后，即可在ECS及容器服务等计算资源内通过标准的HDFS协议接口访问文件系统。此外，多个计算节点可以同时访问同一个文件存储HDFS，共享文件和目录。
  • 应用场景
    • 大数据分析与机器学习
      • 文件存储HDFS适用于对吞吐要求较高的大数据分析与机器学习的业务需求场景。
• 文件存储CPFS
  • 什么是 CPFS
    • 文件存储 CPFS，是阿里云完全托管，可扩展的并行文件系统，可以满足高性能计算场景的需求。CPFS 提供了统一的命名空间，可以让成百上千的机器同时访问，性能上可以达到数百 GB 的吞吐、数百万的 IOPS，而只有亚毫秒级的延时。
  • CPFS 的使用场景有哪些
    • CPFS 可以满足计算密集型的应用对文件存储的要求，包括基因计算、石油勘探、气象分析等 HPC 高性能计算，机器学习，大数据分析以及媒体文件处理等。
  • 如何开通服务，并创建 CPFS 文件系？
    • 如果您已经注册登录阿里云，在开通 NAS 产品服务后，就可以访问 CPFS 的管理控制台进行相关操作。在首次使用时，需要先完成对 CPFS 产品的授权， 才能创建文件系统。文件系统的创建通常需要几分钟时间，在此之后，您就可以通过计算实例来访问和使用文件系统。
  • 如何通过计算实例来访问 CPFS 文件系统
    • 您需要在计算实例的服务器主机上，下载和安装 CPFS 客户端，并挂载 CPFS 文件系统。
  • 如果文件在OSS上，如何在CPFS上访问和处理
    • 您可以通过ossutil工具，将文件下载到CPFS中，再进行处理。后续也会支持与OSS之间的数据流动，例如自动从OSS拉取数据、数据归档OSS。
  • CPFS 兼容 Posix
  • CPFS 性能可以达到多少
    • CPFS 可以提供数百 GB 的带宽，数百万的 IOPS 以及亚毫秒级的延时。具体的带宽和 IOPS 与您购买的文件系统规模有关。50TB 的 CPFS 文件系统，可以提供约 5GB 的带宽以及约 35 万的 IOPS。
  • 怎样更改 CPFS 的文件系统性能
    • 文件系统被创建后其大小和性能是固定的，不能直接更改。但是您可以对已有的文件系统规格进行升级，当选择更大的规格时，其相应的性能也会被提升。
• 文件存储NAS
  • 基于 POSIX 文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。
  • 优势
    • 成本
      • 一个 NAS 文件系统可以同时挂载到多个计算节点上，由这些节点共享访问，从而节约大量拷贝与同步成本。
      • 单个 NAS 文件系统的性能能够随存储容量线性扩展，使用户无需购买高端的文件存储设备，大幅降低硬件成本。
      • 使用 NAS文件存储，您只需为文件系统使用的存储空间付费，不需要提前配置存储，并且不存在最低费用或设置费用。更多详情，请参见计量项和计费说明。
      • NAS 的高可靠性能够降低数据安全风险，从而大幅节约维护成本。
    • 简单
      • 一键创建文件系统，无需部署维护文件系统。
    • 安全
      • 基于 RAM 实现的资源访问控制，基于VPC实现的网络访问隔离，结合文件存储 NAS 的传输加密与存储加密特性，保障数据不被窃取或篡改。
    • 高可靠性
      • 文件存储NAS的数据在后端进行多副本存储，每份数据都有多份拷贝在故障域隔离的不同设备上存放， 提供 99.999999999% 的数据可靠性，能够有效降低数据安全风险。
    • 高性能
      • 基于分布式架构文件系统，随着容量的增长性能线性扩展，提供远高于传统存储的性能。
    • 兼容性
      • NAS 文件存储提供良好的协议兼容性，支持 NFS 和 SMB 协议方案，兼容POSIX 文件系统访问语义，提供强大的数据一致性和文件锁定。
      • 在 NAS 中，任何文件修改成功后，用户都能够立刻看到修改结果，便于用户实时修改存储内容。
  • 功能特性
    • 容量弹性可扩展
    • 共享访问
    • 丰富的协议兼容
    • 安全控制与合规
    • 加密
    • 灵活的访问模式
    • 数据传输
    • 数据备份
  • 应用场景
    • 企业应用程序
    • 媒体和娱乐工作流
    • 大数据分析
    • 内容管理和 Web 服务
    • 容器存储
• 如何选用NAS、OSS和EBS
  • 文件存储NAS和对象存储OSS有什么不同？
    • 文件存储NAS和对象存储OSS的主要区别：您无需修改应用，即可直接像访问本地文件系统一样访问文件存储NAS。文件存储NAS提供高吞吐和高IOPS的同时支持文件的随机读写和在线修改。
    • 对象存储OSS是比较新的存储类型，相对于文件存储目录树的组织形式，对象存储OSS采用扁平的文件组织形式，采用RESTFul API接口访问，不支持文件随机读写，主要适用于互联网架构的海量数据的上传下载和分发。
  • 文件存储NAS和块存储EBS有什么不同？
    • 文件存储NAS相对于块存储EBS的主要区别：文件存储NAS可以同时支持上千个ECS客户端同时共享访问，提供高吞吐量。
    • 块存储EBS是裸磁盘，挂载到ECS后不能被操作系统应用直接访问，需要格式化成文件系统（ext3、ext4、NTFS等）后才能被访问。块存储EBS的优势是性能高、时延低，适合于OLTP数据库、NoSQL数据库等IO密集型的高性能、低时延应用工作负载。但是块存储EBS无法容量弹性扩展，单盘最大只能32TB，并且对共享访问的支持有限，需要配合类Oracle RAC、WSFC Windows故障转移集群等集群管理软件才能进行共享访问。因此，块存储EBS主要还是针对单ECS的高性能，低时延的存储产品。
  • 性能
    • 文件存储NAS 低时延（毫秒级） 数百Gbps 上千个ECS通过POSIX接口并发访问，随机读写
    • 对象存储OSS 较低时延（几十毫秒级） 数百Gbps 数百万客户端通过WEB并发，追加写
    • 块存储EBS 极低时延（微秒级） 数十Gbps 单ECS通过POSIX接口访问，随机读写