产品介绍

Size: px

Start display at page:

Download "产品介绍"

跃贰胡
5 years ago
Views:

1 对象存储服务产品介绍文档版本 16 发布日期华为技术有限公司

2 版权所有华为技术有限公司 2018 保留一切权利非经本公司书面许可, 任何单位和个人不得擅自摘抄复制本文档内容的部分或全部, 并不得以任何形式传播商标声明和其他华为商标均为华为技术有限公司的商标本文档提及的其他所有商标或注册商标, 由各自的所有人拥有注意您购买的产品服务或特性等应受华为公司商业合同和条款的约束, 本文档中描述的全部或部分产品服务或特性可能不在您的购买或使用范围之内除非合同另有约定, 华为公司对本文档内容不做任何明示或默示的声明或保证由于产品版本升级或其他原因, 本文档内容会不定期进行更新除非另有约定, 本文档仅作为使用指导, 本文档中的所有陈述信息和建议不构成任何明示或暗示的担保文档版本 16 ( ) 版权所有华为技术有限公司 i

4 1 产品概述 1 产品概述对象存储服务 (Object Storage Service,OBS) 是一个基于对象的海量存储服务, 为客户提供海量安全高可靠低成本的数据存储能力, 包括 : 创建修改删除桶, 上传下载删除对象等 OBS 为用户提供了超大存储容量的能力, 适合存放任意类型的文件, 适合普通用户网站企业和开发者使用由于 OBS 是一项面向 Internet 访问的服务, 提供了基于 HTTP/HTTPS 协议的 Web 服务接口, 用户可以随时随地连接到 Internet 的电脑上, 通过 OBS 管理控制台或客户端访问和管理存储在 OBS 中的数据此外,OBS 支持 REST API 接口, 可使用户方便管理自己存储在 OBS 上的数据, 以及开发多种类型的上层业务应用 OBS 还提供图片处理特性 (Image Processing), 为用户提供稳定安全高效易用低成本的图片处理服务, 包括 : 图片剪切图片缩放图片水印格式转换等图片处理特性相关内容请参见图片处理特性指南云服务实现了在多地域部署基础设施, 具备高度的可扩展性和可靠性, 用户可根据自身需要指定地域使用 OBS, 由此获得更快的访问速度和实惠的服务价格文档版本 16 ( ) 版权所有华为技术有限公司 1

5 2 产品优势 2 产品优势对象存储服务具有如下优势 : 数据稳定, 业务可靠 :OBS 支撑华为手机云相册, 数亿用户访问, 稳定可靠通过 AZ 内设备和数据多冗余 AZ 之间数据容灾, 保障数据持久性高达 %, 业务连续性高达 99.99%, 远高于传统架构多重防护, 授权管理 :OBS 通过可信云认证, 让数据安全放心支持多版本服务端加密防盗链 VPC 网络隔离访问日志审计以及细粒度的权限控制, 保障数据安全可信智能高效, 随需扩展 :OBS 通过智能调度和响应, 优化数据访问路径, 并结合事件通知传输加速大数据垂直优化, 为用户提供大并发大带宽稳定时延的数据访问体验, 为业务保驾护航简单易用, 便于管理 :OBS 支持标准 REST API 多版本 SDK 和数据迁移工具, 让业务快速上云无需事先规划存储容量, 存储资源可线性无限扩展, 不用担心存储资源扩容减容问题数据分层, 按需使用 : 提供按量计费和包年包月两种支付方式, 支持标准低频访问归档数据独立计量计费, 降低存储成本文档版本 16 ( ) 版权所有华为技术有限公司 2

6 3 常用概念 3 常用概念 3.1 对象 (Object) 对象 (Object) 是 OBS 中数据存储的基本单位, 一个对象实际是一个文件的数据与其相关属性信息 ( 元数据 ) 的集合体用户上传至 OBS 的数据都以对象的形式保存在桶中对象包括了 Key,Metadata,Data 三部分 : Key: 键值, 即对象的名称, 为经过 UTF-8 编码的长度大于 0 且不超过 1024 的字符序列一个桶里的每个对象必须拥有唯一的对象键值 Metadata: 元数据, 即对象的描述信息, 包括系统元数据和用户元数据, 这些元数据以键值对 (Key-Value) 的形式被上传到 OBS 中系统元数据由 OBS 自动产生, 在处理对象数据时使用, 包括 Date,Contentlength,Last-modify,Content-MD5 等用户元数据由用户在上传对象时指定, 是用户自定义的对象描述信息 Data: 数据, 即对象的数据内容通常, 我们将对象等同于文件来进行管理, 但是由于 OBS 是一种对象存储服务, 并没有文件系统中的文件和文件夹概念为了使用户更方便进行管理数据,OBS 提供了一种方式模拟文件夹通过在对象的名称中增加 /, 例如 test/123.jpg 此时, test 就被模拟成了一个文件夹, 123.jpg 则模拟成 test 文件夹下的文件名了, 而实际上, 对象名称 (Key) 仍然是 test/123.jpg 上传对象时, 可以指定对象的存储类别, 若不指定, 默认与桶的存储类别一致上传后, 对象的存储类别可以修改在 OBS 管理控制台和客户端中, 用户均可直接使用文件夹的功能, 符合了文件系统下的操作习惯 3.2 桶 (Bucket) 桶 (Bucket) 是 OBS 中存储对象的容器对象存储提供了基于桶和对象的扁平化存储方式, 桶中的所有对象都处于同一逻辑层级, 去除了文件系统中的多层级树形目录结构文档版本 16 ( ) 版权所有华为技术有限公司 3

3 常用概念对象存储服务设置有三类存储类别, 分别为 : 标准存储低频访问存储归档存储, 从而满足客户业务对存储性能成本的不同诉求创建桶时可以指定桶的存储类别, 桶的存储类别可以修改在 OBS 中, 桶名必须是全局唯一的且不能修改, 即用户创建的桶不能与自己已创建的其他桶名称相同, 也不能与其他用户创建的桶名称相同每个桶在创建时都会生成默认的桶 ACL(Access Control

7 3 常用概念对象存储服务设置有三类存储类别, 分别为 : 标准存储低频访问存储归档存储, 从而满足客户业务对存储性能成本的不同诉求创建桶时可以指定桶的存储类别, 桶的存储类别可以修改在 OBS 中, 桶名必须是全局唯一的且不能修改, 即用户创建的桶不能与自己已创建的其他桶名称相同, 也不能与其他用户创建的桶名称相同每个桶在创建时都会生成默认的桶 ACL(Access Control List), 桶 ACL 列表的每项包含了对被授权用户授予什么样的权限, 如读取权限写入权限等用户只有对桶有相应的权限, 才可以对桶进行操作, 如创建删除显示设置桶 ACL 等一个账号可创建 100 个桶每个桶中存放的对象的数量和大小总和没有限制, 用户不需要考虑数据的可扩展性由于 OBS 是基于 REST 风格 HTTP 和 HTTPS 协议的服务, 您可以通过 URL(Uniform Resource Locator) 来定位资源 OBS 中桶和对象的关系如图 3-1 所示 : 图 3-1 桶和对象 3.3 AK 和 SK OBS 向您提供的账号包括了 AK 和 SK, 用于鉴别身份您通过客户端向 OBS 发送请求时, 客户端发送的头域需要包含签名信息, 该签名信息由 SK 请求时间请求类型等计算生成 AK 与 SK 是用户访问 OBS 时需要使用的密钥对当通过对象存储服务 API(Application Programming Interface) 访问存储数据时,AK/SK 用于生成鉴权信息进行安全认证在用户注册开通 OBS 后, 可以登录我的凭证, 根据需要创建 AK 和 SK, 系统通过 AK 识别访问系统的用户, 而 SK 用于密钥鉴权一个 AK 唯一对应一个用户, 而一个用户可以拥有多个 AK SK 与 AK 一一对应, 形成访问 OBS 时的密钥对, 确保访问安全 3.4 区域用户在创建桶时, 可以根据自身对价格响应时延请求来源等不同要求, 指定该桶所在的区域桶创建完成后, 不支持修改该桶所在的区域文档版本 16 ( ) 版权所有华为技术有限公司 4

4 使用方式 4 使用方式 OBS 为用户提供 OBS 管理控制台 OBS 客户端 REST API 等多样化的使用方式图 4-1 使用方式表 4-1 OBS 使用方式使用方法管理控制台 OBS Browser obscmd 描述管理控制台是网页形式的通过管理控制台, 您可以使用直观的界面进行相应的操作 OBS Browser 是一款运行在 Windows

9 4 使用方式 4 使用方式 OBS 为用户提供 OBS 管理控制台 OBS 客户端 REST API 等多样化的使用方式图 4-1 使用方式表 4-1 OBS 使用方式使用方法管理控制台 OBS Browser obscmd 描述管理控制台是网页形式的通过管理控制台, 您可以使用直观的界面进行相应的操作 OBS Browser 是一款运行在 Windows 和 MAC 系统上的对象存储服务客户端, 可以非常方便的让您在个人电脑上进行对象存储的操作 obscmd 是一款运行在 Linux 操作系统上的对象存储服务客户端, 实现了本地系统文件上传到 OBS, 或从 OBS 下载文件到本地, 主要特点是可以多并发处理上传下载的文件, 实现快速传输数据的能力文档版本 16 ( ) 版权所有华为技术有限公司 6

10 4 使用方式使用方法 SDK API 描述 OBS SDK 是对 OBS 服务提供的 REST API 进行的封装, 以简化用户的开发工作用户直接调用 OBS SDK 提供的接口函数即可实现使用 OBS 服务业务能力的目的 OBS 提供 REST 形式的访问接口, 使用户能够非常容易地从 Web 应用中访问对象存储服务用户可以通过本文档提供的简单的 REST 接口, 在任何时间任何地点任何互联网设备上进行上传和下载数据文档版本 16 ( ) 版权所有华为技术有限公司 7

11 5 用户权限 5 用户权限统一身份认证 (Identity and Access Management, 简称 IAM) 为云服务提供身份管理和访问控制功能其中身份管理主要体现在对用户组与用户的管理, 访问控制主要体现在对用户组和用户的授权管理对 OBS 而言,IAM 提供的用户权限主要用于管理对 OBS 资源 ( 请参见控制台指南 > 桶访问权限中对 OBS 资源的描述 ) 的访问对于 IAM 用户, 需要根据具体的 OBS 操作权限, 为用户所在用户组设置如表 5-1 所示权限的任意一种或多种, 才可以拥有操作 OBS 资源的权限如果不选择这 3 种权限, 则没有任何 OBS 权限表 5-1 OBS 资源权限权限名称 Tenant Administrator Tenant Guest OBS Buckets Viewer 描述拥有该权限的用户可以对 OBS 资源执行任意操作拥有该权限的用户可以查询 OBS 资源的利用情况, 即仅拥有 OBS 读权限具备该权限的用户, 可以执行获取桶列表查询桶元数据和位置信息的操作用户拥有 OBS 资源权限后, 对应在 OBS 上可以执行的具体操作如表 5-2 所示表 5-2 OBS 操作与资源权限关系操作名称 Tenant Administrator 权限 Tenant Guest 权限 OBS Bucket Viewer 权限列举桶可以可以可以创建桶可以不可以不可以删除桶可以不可以不可以获取桶基本信息可以可以可以获取桶监控数据可以可以不可以文档版本 16 ( ) 版权所有华为技术有限公司 8

12 5 用户权限操作名称 Tenant Administrator 权限 Tenant Guest 权限 OBS Bucket Viewer 权限管理桶访问权限可以不可以不可以修改桶存储类别可以不可以不可以列举对象可以可以不可以列举多版本对象可以可以不可以上传文件可以不可以不可以新建文件夹可以不可以不可以删除文件可以不可以不可以删除文件夹可以不可以不可以下载文件可以不可以不可以修改对象存储类别可以不可以不可以恢复文件可以不可以不可以取消删除文件可以不可以不可以删除碎片可以不可以不可以管理对象访问权限可以不可以不可以设置对象元数据可以不可以不可以管理多版本控制可以不可以不可以管理日志记录可以不可以不可以管理事件通知可以不可以不可以管理标签可以不可以不可以管理生命周期规则管理静态网站托管可以不可以不可以可以不可以不可以域名管理可以不可以不可以管理跨区域复制可以不可以不可以管理图片处理可以不可以不可以文档版本 16 ( ) 版权所有华为技术有限公司 9

13 6 应用场景 6 应用场景 OBS 可应用于视频监控视频点播备份归档 HPC 移动互联网企业云盘 ( 网盘 ) 等场景视频监控 OBS 为视频监控解决方案提供大容量存储空间, 同时提供标准存储低频访问存储和归档存储分类存储数据图 6-1 视频监控视频点播 OBS 配合 CDN 服务, 可实现在线视频快速播放, 大存储空间, 单流大带宽, 同时支持高并发访问文档版本 16 ( ) 版权所有华为技术有限公司 10

14 6 应用场景图 6-2 视频点播备份归档 OBS 提供低成本高可靠访问存储, 根据备份和归档需求不同, 可以选择不同类型的存储使用图 6-3 备份归档 HPC OBS 配合弹性云服务器 (ECS) 弹性伸缩 (AS) 云硬盘 (EVS) 镜像服务 (IMS) 统一身份认证服务 (IAM) 和云监控服务 (CES), 为 HPC 提供大容量大单流带宽安全可靠的解决方案文档版本 16 ( ) 版权所有华为技术有限公司 11

6 应用场景图 6-4 HPC 移动互联网 OBS 配合弹性云服务器 (ECS) 弹性负载均衡

(ELB) 关系型数据库 (RDS) 和云硬盘备份 (VBS) 服务为企业云盘提供高并发高可靠

15 6 应用场景图 6-4 HPC 移动互联网 OBS 配合弹性云服务器 (ECS) 弹性负载均衡 (ELB) 关系型数据库 (RDS) CDN 和云解析服务 (DNS), 为移动互联网提供资源弹性伸缩灵活配置, 大容量高安全和高并发的解决方案图 6-5 移动互联网企业云盘 ( 网盘 ) OBS 配合弹性云服务器 (ECS) 弹性负载均衡 (ELB) 关系型数据库 (RDS) 和云硬盘备份 (VBS) 服务为企业云盘提供高并发高可靠低时延低成本的存储系统, 存储容量可随用户数据量的提高而自动扩容文档版本 16 ( ) 版权所有华为技术有限公司 12

17 7 与其他服务的关系 7 与其他服务的关系除直接使用 OBS 提供的超大存储空间外, 如果您同时购买了云服务中的其他产品, 您还可充分利用 OBS 提供的存储资源, 服务于您购买的其他产品表 7-1 与其他服务的关系功能相关服务位置迁移数据到 OBS 内网访问用户的身份鉴权特定用户的权限设置和 IAM 委托的设置对象存储迁移服务 (Object Storage Migration Service,OMS) 云数据迁移 (Cloud Data Migration, CDM) 数据快递服务 (Data Express Service,DES) 云专线 (Direct Connect,DC) 弹性云服务器 (Elastic Cloud Server,ECS) 统一身份认证服务 (Identity and Access Management, IAM) 迁移第三方云厂商数据至 OBS_OMS 方式迁移第三方云厂商数据至 OBS_CDM 方式搬迁本地数据至 OBS_CDM 方式搬迁本地数据至 OBS_DES 磁盘方式搬迁本地数据至 OBS_DES Teleport 方式搬迁本地数据至 OBS_ 云专线方式在 ECS 上通过内网访问 OBS 用户权限设置用户权限创建 IAM 委托文档版本 16 ( ) 版权所有华为技术有限公司 14

18 7 与其他服务的关系功能相关服务位置资源使用情况监控日志审计事件通知标签服务端加密 CDN 加速域名解析云监控服务 (Cloud Eye Service) 可以监控 OBS 以下指标 : 下载流量上传流量 GET 类请求次数 PUT 类请求次数 GET 类请求首字节平均时延 4xx 异常次数 5xx 异常次数云审计服务 (Cloud Trace Service, CTS) 消息通知服务 (Simple Message Notification, SMN) 标签管理服务 (Tag Management Service,TMS) 数据加密服务 (Data Encryption Workshop, DEW) 的密钥管理 KMS 功能 CDN(Content Delivery Network, 内容分发网络 ) 云解析服务 (Domain Name Service,DNS) Cloud Eye 控制台监控指标审计事件通知标签服务端加密自定义域名绑定通过 CDN 加速访问 OBS 使用自定义域名托管静态网站自定义域名绑定通过 CDN 加速访问 OBS OBS 可以作为其他云服务的存储资源池, 例如关系型数据库 (Relational Database Service,RDS), 镜像服务 (Image Management Service,IMS), 云审计服务 (Cloud Trace Service,CTS) 等 OBS 可以作为其他云服务的数据分析学习的数据源, 例如 MapReduce 服务 (MapReduce Service,MRS), 机器学习服务 (Machine Learning Service,MLS) 等文档版本 16 ( ) 版权所有华为技术有限公司 15

19 8 文档导读 8 文档导读表 8-1 对象存储服务帮助文档文档摘要查阅方式产品介绍介绍对象存储服务的相关概念功能特性应用场景以及产品优势 HTML PDF 价格说明介绍对象存储服务的计费方式 HTML 购买指南介绍如何购买对象存储服务 HTML PDF 快速入门控制台指南客户端指南 (OBS Browser) 客户端指南 (obscmd) 用户指南 ( 海外区域 ) 图片处理特性指南最佳实践 SDK 参考提供基本的操作指导帮助您快速使用 OBS 介绍 OBS 管理控制台完整的产品功能及操作指导, 同时提供应用举例帮助您更好的使用 OBS 介绍 OBS 客户端 (OBS Browser) 的功能特性使用限制, 并提供完整的操作指导以及应用举例介绍 OBS Linux 客户端 (obscmd) 的功能特性, 完整的使用指导以及应用举例, 帮助您更好的使用 OBS 服务介绍海外区域的 OBS 概念功能特性管理控制台和客户端应用, 以及常见问题介绍图片处理特性的基本概念功能常见问题等, 同时提供控制台和接口的操作指导以及应用举例提供示例操作指导, 帮助您了解各应用场景下如何使用 OBS 介绍对象存储服务软件开发工具包 (OBS SDK,Object Storage Service Software Development Kit) HTML HTML PDF HTML PDF HTML PDF HTML PDF HTML PDF HTML PDF HTML PDF 文档版本 16 ( ) 版权所有华为技术有限公司 16

20 8 文档导读文档摘要查阅方式开发指南介绍如何使用对象存储服务提供的 API 接口和 SDK 等进行二次开发, 可作为您二次开发的参考依据 HTML PDF API 参考介绍对象存储服务提供的 API 接口参考, 详细描述了各个接口的功能参数等 HTML PDF 常见问题视频帮助产品术语介绍对象存储服务的常见问题, 包含概念性安全性以及各个特性功能等相关的问题通过视频的方式, 介绍相关场景下 OBS 的应用介绍对象存储服务相关的术语和缩略语 HTML PDF MP4 HTML 文档版本 16 ( ) 版权所有华为技术有限公司 17

21 9 修订记录 9 修订记录发布日期修订记录第十六次正式发布本次更新说明如下 : 更新了与其他服务的关系更新了文档导读第十五次正式发布本次更新说明如下 : 更新了 OBS 的应用场景第十四次正式发布本次更新说明如下 : 增加了 OBS 使用方式描述第十三次正式发布本次更新说明如下 : 更新了用户权限描述第十二次正式发布本次更新说明如下 : 增加了用户权限描述第十一次正式发布本次更新说明如下 : 增加了云审计功能第十次正式发布本次更新说明如下 : 增加了 Tag 功能文档结构调整, 用户权限章节调整到控制台指南文档版本 16 ( ) 版权所有华为技术有限公司 18

22 9 修订记录发布日期修订记录第九次正式发布本次更新说明如下 : 增加了 Cloud Eye 管理控制台监控指标第八次正式发布本次更新说明如下 : 增加了自定义域名绑定功能第七次正式发布本次更新说明如下 : 增加了桶级监控第六次正式发布本次更新说明如下 : 增加了跨区域复制第五次正式发布本次更新说明如下 : 增加流量监控功能增加了对象级存储类别增加了修改桶和对象的存储类别的功能购买指南中删除计费介绍和计费案例, 详细的服务资费费率标准请参见价格说明第四次正式发布本次更新说明如下 : 在控制台指南中增加如下内容 : 配置事件通知中增加多项目出现客户端与服务器的时间相差 15 分钟的报错章节创建桶时增加了一键式设置桶策略功能第三次正式发布本次更新说明如下 : 在控制台指南的查看桶的基本信息中增加 Endpoint 和访问域名在控制台指南的通过对象 (URL) 访问对象中修改 URL 的格式在控制台指南的配置桶策略中增加了一键式配置通用策略在控制台指南的异常处理中增加配置事件通知失败章节在购买指南中删除余额小于 100 的限制在快速入门的注册云服务账号中删除隐私保护文档版本 16 ( ) 版权所有华为技术有限公司 19

javascript sdk javascript sdk 列出 Bucket 内的对象上传 textarea 内容到 Bucket 上传本地文件生成私有下载链接生成带过期时间的私有链接删除对象下载对象拷贝对象查看文件访问权限设置文件访问权限获取静态网站配置设置静态网站删除静态网站查询对象元数据查询

javascript sdk javascript sdk 列出 Bucket 内的对象上传 textarea 内容到 Bucket 上传本地文件生成私有下载链接生成带过期时间的私有链接删除对象下载对象拷贝对象查看文件访问权限设置文件访问权限获取静态网站配置设置静态网站删除静态网站查询对象元数据查询桶的多版本 Bucket 开启对象多版本支持挂起 Bucket 的多版本对象功能浏览器客户端浏览器客户端的