CCAI 2015 中国人工智能大会活动总结

Size: px

Start display at page:

Download "CCAI 2015 中国人工智能大会活动总结"

蛙顾
5 years ago
Views:

1 玩转容器镜像 - 企业级镜像仓库的管理和运维张海宁 (Henry Zhang) VMware 中国云原生应用首席架构师

2 自我介绍 VMware 中国研发中心首席架构师 Harbor 企业级容器 Registry 开源项目创始人 Cloud Foundry 中国社区最早的技术布道师之一多年 container 领域经验区块链技术指南软件定义存储作者亨利笔记区块链技术指南

3 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

4 用户空间应用进程应用进程应用进程应用进程应用进程应用进程应用进程 Linux 容器容器容器 OS 级隔离在单独的内核子系统级隔离 ( 文件系统, 进程表等 ) 用户级进程协作这些子系统以创建容器已经存在很多年 Solaris Zones, FreeBSD Jails, OpenVZ OS 文件系统 OS 内核硬件为什么采用? 进程隔离可重用的环境大规模部署情况下更好管理 4

5 使得容器使用更加简便 ~# docker build my_app ~# docker push my_app 顺畅的部署和最大的可移植性非常适合第三平台 12 因素应用和微服务架构 DevOps 变得十分容易 5

6 什么是 Registry? 6

7 企业私有的 Registry 安全知识产权保留在企业内部效率 LAN vs WAN 墙访问控制与企业的身份认证系统 ( 如 AD/LDAP) 集成支持 RBAC( 基于角色的访问控制 ) 合规与审计 7

8 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

9 容器加速应用迭代开发测试生产 Drive Business Agility 9

10 容器镜像的内容一致性用 file 总能构建出相同的镜像吗? FROM ubuntu RUN apt-get install y python ADD app.jar /myapp/app.jar 最好的方法是用镜像 ( 二进制格式 ) 在不同阶段传递

11 镜像通过 Registry 传输 Git CI 系统镜像镜像镜像测试 Registry 开发 Registry 镜像镜像镜像准生产 (Staging) Registry 产线 Registry 11

12 镜像复制 ( 同步 ) Project Project Policy Images 初始全量复制 Images Image 复制源 Registry 增量复制 ( 包括镜像删除 ) Image 复制目标 Registry 12

13 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

14 容器镜像的访问控制不同的项目开发团队容器镜像按照项目来管理不同的成员使用镜像的需求不同测试人员 - 读权限 (pull) 开发人员 - 读写权限 (push/pull) 项目经理 - 开发人员的权限 + 成员管理

15 容器镜像的访问控制不同环境中同一人员的角色可不同例如 : 运维人员开发环境 : 一般不需要权限生产环境 : 需要有读写权限系统角色开源 Registry 缺失访问控制使用第三方工具, 如 Harbor 等

16 基于角色的访问控制 (RBAC) Project Members Images Guest: Developer: docker pull... docker pull/push... ${Project}/ubuntu:14.04 ${Project}/nginx:1.8, 1.9 ${Project}/golang:1.6.2 ${Project}/redis: Admin: 16

17 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

18 镜像的发布方式 Client push Registry Server pull host host host... host host host 的节点增多会出现什么状况?

19 大规模镜像发布 ( 复制架构 ) 主 - 从模式 Master Slave Client push 负载均衡高可用性 pull host host host host host host host

20 镜像发布场景 (2) Client push 主 - 从多级模式 Hierarchical 20

21 镜像复制 ( 同步 ) 工具 Harbor - 复制镜像监控重试等管理工具

22 镜像空间的释放日积月累, 无用镜像增多, 空间浪费缺少删除 Registry 镜像命令垃圾回收 (GC) 过程删除不再需要的 tag ( 软删除 ) 扫描所有无引用 (unreferenced) 的 tag 并删除最好停止 Registry 实例 Harbor Registry 提供上述功能

23 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

24 Registry 高可用性生产系统必备特性基本要求 : 单点故障影响方案的因素服务 SLA (Service Level Agreement) 成本

25 Registry 高可用性方案 (1) 请求 1. Session 共享 2. 粘性负载均衡 3. 共享存储 4. 较复杂和成本高 LB Registry 实例共享存储

26 Registry 高可用性方案 (2) LB 请求 1. 多实例 Registry, 多主复制 2. 不共享存储 3. 不共享 Session 4. 粘性负载均衡 5. 成本较低 Registry 实例

27 Registry 高可用性方案 (3) 企业级方案 : 利用已有的高可用平台, 例如 vsphere HA 分布式存储 VSAN Host VM Harbor vsphere Volume Plugin VMware ESXi-1 Volume Driver for vsphere VMware ESXi-2 Volume Driver for vsphere VMware ESXi-3 Volume Driver for vsphere 共享数据存储 Volume -1 Volume -2 Volume-3 Other Volume s Virtual SAN

28 Registry 高可用性方案 (3) 企业级方案 : 利用已有的高可用平台, 例如 vsphere HA 分布式存储 VSAN XHost VM Harbor vsphere Volume Plugin VMware ESXi-1 Volume Driver for vsphere Host VM Harbor vsphere Volume Plugin VMware ESXi-2 Volume Driver for vsphere VMware ESXi-3 Volume Driver for vsphere 共享数据存储 Volume -1 Volume -2 Volume-3 Other Volume s Virtual SAN

29 容器镜像概述镜像一致性镜像访问控制镜像发布方式 Registry 高可用性 Harbor 项目简介

30 Harbor 开源项目简介开源企业级容器镜像仓库管理系统 Apache 2 使用许可由 VMware 中国研发团队发起

31 用户 Harbor 用户和合作伙伴下载点赞用户数开发者社区分支代码贡献者合作伙伴 31

32 Harbor 开源项目社区发展壮大

33 主要特性基于 Web 的管理界面用户管理与访问控制 AD/LDAP 集成 RBAC, 基于角色 / 项目的权限管理镜像复制 / 同步镜像删除和空间回收审计与日志国际化 : 中文和 English 提供 RESTful API 用于集成离线安装 33

34 Harbor 项目架构 Harbor Client Basic Registry ( Distribution) Remote Harbor Browser Reverse Proxy (Nginx) Admin Server UI API Replication Service Auth Log Collector (rsyslog) DB (MySQL) AD / LDAP 34

35 Harbor 在 vsphere 上部署形式 Client Remote Harbor Browser AD / LDAP 1. OVA 形式 2. 部署配置方便 3. 高可用性 Photon OS VM 35

36 Harbor 社区欢迎使用点赞和反馈意见贡献到 Harbor 项目代码问题文档 Harbor 开源项目微信群后台回复入群申请加入 36

37 谢谢!

1 IT IT IT IT Virtual Machine, VM VM VM VM Operating Systems, OS IT

1 IT IT IT IT Virtual Machine, VM VM VM VM Operating Systems, OS IT Chapter 1 了解虛擬化技術種類硬體 / 平台 / 伺服器虛擬化 VM VM VM CPU Hypervisor VMM Virtual Machine Manager VM Host OS VM VM Guest OS Host OS CPU VM Hyper-V

CCAI 2015 中国人工智能大会 活动总结

CCAI 2015 中国人工智能大会活动总结