开源广进用 Service Catalog 构造 K8S 服务能力中心

Size: px

Start display at page:

Download "开源广进用 Service Catalog 构造 K8S 服务能力中心"

壤葛
4 years ago
Views:

1 开源广进用 Service Catalog 构造 K8S 服务能力中心

2 目录什么是 Open Service Broker API 什么是 Service Catalog 什么是 Service Broker 服务能力中心的实践

3 什么是 Open Service Broker API 2011 V1 VMware 开源 MySQL PostgreSQL RabbitMQ MongoDB Redis 增加异步服务创建满足 12 因子应用中应用数据应存储在后端服务中 2013 v2 将平台与服务提供解耦定义与平台无关的 ServiceBroker API 2016 Google Cloud/Deis OPEN ServiceBroker API 扩大使用范围

4 Open Service Broker API 基本概念应用平台 (App Platform) 应用托管平台 (K8S CF 等 ), 由应用平台承载的应用需要使用相关服务 Service Broker 平台与服务间的消息通道, 用来管理服务平台服务 (Services): 由服务平台提供的能力列表,MySQL Hadoop 等套餐 (Plan) 服务平台与服务最终用户间约定的服务标准能力指标, 例如空间性能安全等约束条件服务实例 (Service Instance) 按照套餐约定向指定用户提供的服务实体, 例如一个 MySQL 数据库, 一个 YARN 资源队列

5 Open Service Broker API 基本流程平台获取服务列表 GET v2/catalog Service Broker 服务返回服务信息 ( 服务项套餐等 ) 创建服务实例 PUT v2/service_instance/:id ( 异步 ) 返回服务实例创建结果与应用进行绑定 PUT v2/service_instance/:instance_id/service_binding/:id 创建 / 销毁 / 变更服务实例返回服务连接信息 (IP 用户名密码等 ) 删除服务实例或绑定 OSBA 流程

6 Open Service Broker API 基本流程平台获取服务列表 GET v2/catalog 信息集中展示返回服务信息 ( 服务项套餐等 ) Service Broker 服务创建服务实例 PUT v2/service_instance/:id 服务集中提供 ( 异步 ) 返回服务实例创建结果能力集中输出与应用进行绑定 PUT v2/service_instance/:instance_id/service_binding/:id 创建 / 销毁 / 变更服务实例返回服务连接信息 (IP 用户名密码等 ) 删除服务实例或绑定 OSBA 流程

7 Open Service Broker API 基本流程平台 Service Broker 服务 Service Catalog 调用 API 定义流程提供界面返回服务信息 ( 服务项套餐等 ) 创建服务实例 PUT v2/service_instance/:id ( 异步 ) 返回服务实例创建结果 Service Brokers 提供 API 执行任务输出能力与应用进行绑定 PUT v2/service_instance/:instance_id/service_binding/:id 创建 / 销毁 / 变更服务实例返回服务连接信息删除服务实例或绑定 OSBA 流程

8 目录什么是 Open Service Broker API 什么是 Service Catalog 什么是 Service Broker 服务能力中心的实践

9 Service Catalog 是 K8S 向前演进的一环 Kubernetes1.6 and the Open Source Roadmap - Aparna Sinha

10 OSB API 在 K8S 中的实现 -Service Catalog 2016 年 9 月成立 Kubernetes Service Catalog SIG 最新版本 Deis/steward 项目

11 ServiceCatalog 设计

12 运行 ServiceCatalog 安装命令 $ helm install charts/catalog --name catalog --namespace catalog 注意设置几个参数 apiserver.image = quay.io/kubernetes-service-catalog/apiserver:canary controllermanager.image = quay.io/kubernetes-service-catalog/controller-manager:canary apiserver.storage.type = etcd etcd_image = quay.io/coreos/etcd:latest $ helm install charts/catalog --name catalog --namespace catalog --set key=value[,key=value]

13 ServiceCatalog 基本概念 ServiceCatalog OSB API Application 部署在 K8S 中的程序包 Binding Binding 表示应用与服务实例之间的连接关系 Broker Broker 用来管理一组服务的实体 Credentials 应用连接服务的鉴权信息 Instance Service Instance 服务实例 Service Class Service 通过 Broker 提供的服务能力列表项 Plan Plan 套餐, 用来标明服务特性的列表项

14 关于鉴权信息向应用的注入借助于 K8S 新发布的 PodPreset 特新来管理鉴权信息的注入将用户信息与系统信息分离简化 Binding 设计方便提供多种注入方式

15 目录什么是 Open Service Broker API 什么是 Service Catalog 什么是 Service Broker 服务能力中心的实践

16 Service Brokers 是服务的中介 Service Catalog 统一流程 OSBA Service Broker 个性执行

17 如何开发一个 Broker 在 CloudFoundry 中给我们提供了足够的参考当然也有更容易与 K8S 适配的方案如果你有一些 Openshift 的模板 (openshift template) 在 openshift 3.6 版本之后新增了一个 template Service Broker 如果你使用 ansible 来自动化你的日常工作

18 关于 Service Catalog 和 Brokers 的更多信息 FROM Paul

19 目录什么是 Open Service Broker API 什么是 Service Catalog 什么是 Service Broker 服务能力中心的实践

20 传统服务交付效率不高 TASK TIME (MINS) 准备服务器 30 准备存储和网络 30 基础设施管理员工作任务排期安装操作系统 4 Days 90 安装后检查 60 配置操作系统 120 开发者系统管理员安装应用运行时配置应用程序工作任务排期 5 Days 安全配置和扫描 270 安全管理员工期人日 12 hours 10 Days

21 信息传递效率不高

22 需要交付的服务越来越多存储分析预测

23 服务能力中心达成目标自动化规范化自服务

24 为什么选择 Open Service Broker API Service Broker API 在 CloudFoundry 中的成功应用 BlueMix pivotal.io 通过 Service Broker 集成了众多服务协议简单, 易于实现, 易于沟通有众多适用于 CF 的 Broker 代码可以参考

25 使用流程 provision bind unbind deprovision 设置服务发现运行环境 1 服务发现服务凭证 Backing Service catalog provision bind unbind deprovision app1 Service Service Broker Broker Service Service Service Broker Broker PlatForm Service Instance1 Service Instance2 运行环境 2 服务发现服务凭证 app2

26 新增 K8S 资源 type Service struct {...} type Pod struct {...} type ReplicationController struct {...}... type ServiceBroker struct {...} type BackingService struct {...} type ServiceInstance struct {...} RunNodeController() RunScheduler() RunReplicationController()... RunServiceBrokerController() RunServiceInstanceController() create servciebroker create serviceinstance ServiceBorker Controller catalog Api Server Service Broker etcd update rc ServiceInstance Controller provision bind

27 Controller 调用 ServiceBroker API ServiceBrokerController Fetch catalog (GET /v2/catalog) ServiceInstanecController Provision instance (PUT /v2/service_instances/:id) Creating binding (PUT /v2/service_instances/:id/service_bindings/:id) Update RC Remove binding (DELETE /v2/service_instances/:id/service_bindings/:id) Update RC Remove instance (DELETE /v2/service_instances/:id)

28 大数据服务 ServiceBroker 实现

29 应用与大数据服务编排更新应用 RC 增加服务环境变量 app1 user:pass 生成服务实例开通绑定 service broker user:pass kubernetes node node node node node new spark instance user:pass yarn default spark instance

30 应用与大数据服务编排生成服务实例更新应用 RC 增加服务环境变量生产测试 service service broker broker 生产 user:pass user:pass kubernetes 测试 user:pass new spark instance user:pass node node node node node new spark instance user:pass yarn default spark instance

31 大数据应用和常规应用的混合编排 Specify Git repo Development CI/CD Ops Code Version Control Image Registry Build Test/Verify Router 内部服务 K8s service Package repository Infrastructure Platform (IaaS, PaaS, VMs) Market Place 服务管理 Service Broker Production Concerns (monitoring, scaling, etc.) Build config 鉴权 Deploy config 调度 NODE Volume NODE Storage 后端服务 API 接口 Master NODE 应用混排 Service Broker 性能管理可用性探测

32 对 Open Service Broker API 的加强及时反馈连接信息在服务创建时即返回连接信息, 方便应用调试和初始化提供自定义资源申请能力在 Plan 中增加自定义选项, 满足用户个性化要求

33 ServiceCatalog 在某运营商省公司中的应用 (1) 以 Storm 的编排举例, oc new-instance storm-cluster --service=strom --plan=standalone

34 ServiceCatalog 在某运营商省公司中的应用 (2) 网管 storm 电商 storm WebHook PipeLine Git Clone mvn strom jar 业支 storm 开发 storm 测试 storm 生产 storm

35 ServiceBroker 在某大型集团云平台项目中的应用 (1)

36 ServiceBroker 在某大型集团云平台项目中的应用 (2)

37 谢谢

Kubenetes 系列列公开课 2 每周四晚 8 点档 1. Kubernetes 初探 2. 上手 Kubernetes 3. Kubernetes 的资源调度 4. Kubernetes 的运行行时 5. Kubernetes 的网络管理理 6. Kubernetes 的存储管理理 7.

Kubernetes 包管理理工具 Helm 蔺礼强 Kubenetes 系列列公开课 2 每周四晚 8 点档 1. Kubernetes 初探 2. 上手 Kubernetes 3. Kubernetes 的资源调度 4. Kubernetes 的运行行时 5. Kubernetes 的网络管理理 6. Kubernetes 的存储管理理 7. Kubernetes