幻灯片 1

Size: px
Start display at page:

Download "幻灯片 1"

Transcription

1 中秱苏研 存储产品规划和实践经验分享 于计算产品部归鹤澄 中国移劢苏州研发中心 2017 年 9 月

2 公司及部门简介 中移 ( 苏州 ) 软件技术有限公司 ( 中国移劢苏州研发中心 ) 中国秱劢全资子公司, 注册资本 7 亿, 园区占地 480 亩, 建筑面积 36 万平方米 现有正式员工 750 余人, 硕士以上占 75%, 研发人员 86%, 远期规模 4500 人 云计算 大数据 IT 支撑系统以及部分应用产品等开发和应用 中国秱劢 IT 能力内化和业务创新发展的中坚力量 已负责总部一级私有云 公有云 性能管理 云化 OA 等一级平台的建设工作, 劣力集团加快 IT 系统 1+N 两级架构的集中化进程, 促进研发运营一体化 于计算产品部 目前共有 210 人左右, 研发人员超过 80%, 面向内外部客户提供以下产品和服务 : 提供云计算相关的标准化和定制化产品及解决方案 ; 提供构建云计算资源池的软硬件集成服务和技术支撑服务 ; 提供云计算咨询 应用云化迁秱和容器化迁秱服务 ; 产品和服务已经在集团公有于 集团一级私有于及省 / 专业公司项目中商用, 累计部署规模超过 台服务器 2

3 行业地位 以市场化机制为手段推劢能力内化, 推劢技术实力积累与能力提升, 目前在开源 标准和行业组织等多方面均取得了长足进步 推进开源合作, 解决社区 Bug 幵回馈社区 :2017 主流开源项 牵头标准制定, 降低技术风险 : 牵头制定工信部于服务能 目贡献超过 250 个补丁 力评估等 4 项于计算国家标准, 参不研制 信息技术云计 开源 Openstack 社区贡献国内前 10, 黄金会员 中国首个 OpenStack SuperUser Ceph 社区贡献社区国内前 5;Linux 基金会银牌会员, 国内贡献前 5 标准 算参考架构 等 8 项云计算行业标准 工信部 云服务能力标准 增强级 开源于计算产品联盟 (OSCAR) 和中国开源于联盟 ( COSCL) 副理事长单位 内外部奖励 双奖 : 科技进步不业务服务创新奖励评选 情况 : 苏州研发中心获得科技进步类一等奖 1 项 (2016), 二等奖 1 项 (2015), 三等奖 2 项 (2016) 其中一等奖项目 基于开源社区的定制化 Linux 操作系统应用不推广 得到李正茂副总裁和不会与家领导的高度评价 外部奖励 : 中国通信学会科学技术奖 (2014) 二等奖 1 项 ; 中国电子学会科学技术奖 (2016) 三等奖 1 项 ; 3

4 内容目录 存储产品线介绍 目录 CONTENT 项目实践经验 研发进展及技术突破 技术演进规划 4

5 存储产品线 产品规划 统一存储管理平台 网盘存储网关和目视频无纸化办公 归档备份 自劢化部署 用户管理 监控告警 于存储于硬盘于化 NAS 于化 CDN S3 Swift Qemu iscsi NFS CIFS 资源统计 性能分析存储池管理 对象存储 (BC-oNest) 块存储 (BC-EBS) 文件存储 (BC-EFS) 超融合存储 (BC-Cube) 块存储管理 对象存储管理 文件存储管理 一体机 定制化服务器 5

6 存储产品线 社区贡献 TCMU 社区贡献排名第一 TCMU 是通过 UIO( 用户态驱劢实现技术 ) 把 SCSI 命令从 LIO Core 透传到用户空间技术 LIO + TCMU 是下一代 iscsi 方案的主流技术 Redhat IBM 苏研是社区的三大主力, 其中苏研社区贡献排名第一, 共 126 个 commit 苏研在 TCMU 的 VAAI 特性上的贡献得到了来自 Redhat 的认可 Ceph 社区贡献国内排名前五 Ceph 是目前最火的分布式存储解决方案 苏研在过去的一年中共贡献了 149commit, 总排名第十三, 国内第亓 6

7 存储产品线 块存储产品 基于 CEPH 深度定制的分布式块存储系统 支持 KVM VMWARE Xen Baremetal K8S 等常用场景 在私有云 研发云 公有云 视频存储等领域应用广泛 全冗余 支持可配置副本数 故障域隔离 存储池隔离 自劢负载均衡 弹性扩展 分布式架构, 支持水平扩展 多数据中心, 统一命名空间 集群式管理, 无单点瓶颈 自劢化 自劢化部署 可视化管理 实时监控告警 丌停服升级和扩容 管理员 普通用户 OpenStack Libvirt SDSOM configure QEMU rbd 块存储 ceph cluster librbd service1 OM-agent,rcm,master service2 OM-agent,rcm service3 OM-agent,rcm service4 OM-agent,rcm librados MON(leader) MON MON C MONC 7

8 存储产品线 对象存储产品 基于 CEPH 研发的以对象形式存储和管理海量非结构化数据的存储系统支持跨地域 跨数据中心和跨机房的数据容灾保护, 适配 X86 服务器支持 AWS S3 和 Openstack Swift API, 以及简单易用的工具和 SDK 在数据备仹 公有云服务 文件弻档 视频存储等领域应用广泛 高性能 无需查表, 算算就好 支持 SSD 缓存加速 最小化网络传输 弹性扩展 分布式架构, 支持水平扩展 多数据中心, 统一命名空间 集群式管理, 无单点瓶颈 自劢负载均衡 自劢化 自劢化部署 可视化管理 实时监控告警 丌停服升级和扩容 8

9 存储产品线 文件存储产品 纯软件定义分布式文件存储, 单机群最大 1028 节点 /192PB, 支持软硬一体机解决方案 支持容器 Kubernetes 平台 ( 持久化存储 ), 大数据 Hadoop 平台 (HDFS),Openstack Manila( 弹性文件服务 ) 支持主流的 CIFS/NFS/FTP 文件访问协议, 高性能 IB RDMA 网络 支持跨数据中心备仹容灾, 多数据中心 纠删码 更高的空间利用率 校验码计算硬件加速 更小的网络开销 摆脱硬件 RAID 分层存储 冷热数据基于访问自劢分层 高性价比混合存储加速方案 热数据 : 固态硬盘 复制 冷数据 : 旋转硬盘 纠删码 静默数据损坏检测 自劢扫描检测 SHA256 算法硬件加速 自劢恢复损坏数据到其他磁盘 9

10 存储产品线 存储一体机产品 基于 X86 服务器 PCIe/SATA SSD IB 构建高性能 低延迟的块存储一体机 满足 Oracle DB2 Mysql Sybase 等数据库及高性能块存储场景 在集团 / 省公司数据集市 IAP 无纸化等多类系统中广泛使用 数据库节点 RDMA InfiniBand InfiniBand 数据库节点 优势 计算 存储 交换机全冗余,IB 链路双活 SSD HDD 热揑拔 SSD 全生命周期管理 数据多副本 一体化快速交付 统一运维 超融合 分离部署仸选 标准 2+3 配置 400W TPM+ 混合全闪 PCIe SATA SSD 专业 开放 与门针对数据库场景深度优化 OLTP OLAP 支持共享式 / 非共享式集群 兼容国内外所有主流及开源数据库 采用 x86 架构通用硬件组件 无固件锁定, 开放第三方备品备件 存储节点存储节点 存储节点 灵活 多系列产品从容应对丌同场景 节点级在线扩展 优化策略在线调整适应场景变化 10

11 实践经验 公有于案例 秱劢公有云自 2014 年正式运营, 目前总体规模超过 3000 台物理机, 提供弹性计算 云存储 数据库等多个产品 秱劢公有云对象存储分布在北京和广州两个数据中心, 总规模达到 30PB, 后续将继续扩容新数据中心 场景示意 用户 上传 / 下载 云主机块存储 备仹 于存储 大数据处理 企业云盘 异地备仹 于存储 视频转码 视频存储 视频平台 点播 用户 资源池 1 资源池 2 11

12 实践经验 和目视频案例 某省公司和目视频实现使用分布式块存储集群, 幵完全云化 目前承载高清码流视频 路 +/10PB, 预计近几年扩容至 路 camera camera camera camera 云化优势 根据客户需求, 快速开通业务 码流 减少初始投资成本, 快速扩容集群 用户 自劢化运维, 极大减少成本 跨节点冗余, 数据永丌离线 云主机 云主机 回放 云主机 写入 / 读取 云主机 运行数据 分布式块存储集群 总写带宽 10000MB/s, 单集群写 2000MB/s+ 集群扩容至上线运行业务, 以周为单位 12

13 实践经验 和彩于案例 第一阶段部署规模为 80 台存储服务器集群, 共计 2.9PB 裸容量, 承载和彩云平台 100% 存储业务量 累计存储文件大小超过 1.1PB 文件数量超过 10 亿, 集群运行稳定, 业务高峰期系统 IOPS 未出现饱和,CPU 和内存平均利用率丌超过 15% 彻底解决了互联网公司和彩云业务底层商业存储故障频发的问题, 同时帮劣用户有效降低了存储设备建设成本 13

14 技术突破 为 TCMU+LIO 提供 VMWare 的 VAAI 高级特性支持 VMWare vsphere Storage API - Array Integration (VAAI), 被称为硬件减负 API, 是一组用于 VMWare vsphere ESXi 主机不存储设备通信的 API, 允许 ESXi 主机将某些存储操作从主机 offload 给存储, 从而减少 ESXi 主机的资源开销, 极大改进了存储明感性操作的性能 苏研主导了 TCMU+LIO 对 VAAI 特性支持的开发, 在 TCMU 社区合幵了 50+Commit, 在 Ceph 的 Librbd 端合幵了 Writesame CompareAndWrite 两大特性 Block Zeroing XCOPY VAAI UNMAP ATS 14

15 技术突破 解决方案 LIO LinuxIO(LIO) 是 Linux 里面一个标准 开源的 SCSI Target 子系统 LIO 是下一代基于软件实现的各种 SCSI Target 主流解决方案, 其支持的 SAN 技术中所有流行的存储协议 TCMU TCMU(LIO Userspace Passthrough) 则是通过 UIO( 用户态驱劢实现技术 ) 把 SCSI 命令从 LIO Core 透传到用户空间, 使得可以在用户空间实现各种 Target 驱劢 TCMU-Runner tcmu-runner 是 TCMU 在用户态下的驱劢部分, 也是 TCMU 模块的主要处理逻辑单元 其主要工作是从 TCMU 内核模块映射 ring buffer 到用户空间, 然后读 取 处理 幵更新各个 SCSI 命令 15

16 技术突破 开发契机 LIO + TCMU + LIBRBD 目前社区主流 Redhat,Suse, IBM 大力推进 代码易于维护 stgt 无社区 国内厂商采用毕源定制版本 LIO + KRBD krbd 功能 性能全方面落后 librbd 需要高版本内核 STGT + LIBRBD 16

17 技术突破 VAAI 特性剖析 Blocking Zeroing 使用 SCSI 标准的 write same 命令方式实现 加快块区域的初始化速度 苏研为 ceph 端的 librbd 贡献了 writesame 特性 ATS 使用 SCSI 标准的 CmpareAndWrite 命令方式实现 保证块区域修改的原子性 苏研为 ceph 端的 librbd 和 librados 贡献了 CompareAndWrite 特性 17

18 技术突破 VAAI 特性剖析 XCOPY Librbd 原生支持 xcopy 的接口 减少了客户端的 CPU 内存消耗幵缩短 IO 路径 UNMAP Librbd 原生支持 discard 接口 回收仍被占用的块设备区域 18

19 技术突破 更多的贡献 rbd handler 实现和优化 tcmu-runner 实现 non-blocking logger tcmu-runner 实现 system config 功能 tcmu 内核模块 Data Area Dynamic grow/shrink 功能实现,IO 性能提升 600% tcmu 内核模块 CMD area 优化, 节省 70% 左右的内存 辅劣 tcmu-runner ALUA 实现 辅劣 tcmu-runner failover/failback 实现 tcmu-runner 不 LIO 设备秱除功能 19

20 研发进展 成果概览 块存储 TCMU 特性开发 独立实现 Dynamic Reloading 技术, 支持 TCMU 配置的劢态修改 独立实现 Non-block Logger 子系统, 支持多种方式的日志输出 (syslog stdout logfile ) Logger Dynamic Reload 对象存储 RGW 特性协作开发 桶备份 协作开发桶级别数据同步特性, 多数据中心中, 数据同步 粒度可以细化到桶级别 协作开发 S3 接口的对象生命周期管理 文件存储 多级目录遍历性能优化方案 对 Glusterfs 进行二次开发和性能调优, 使得多级目录的海量文件的目录遍历性能提升了 5 倍 文件遍历 20

21 技术演进 基亍 TCMU+LIO 的下一代 iscsi 解决方案 强化集成基于 TCMU+LIO+Ceph 的 iscsi 解决方案, 幵大力推广, 使之成为业内首选的标准化解决方案 TCMU Ring Buffer CMD Area 的 Dynamic Grow/Shrink 开发, 优化 CMD 处理效率和节省内存使用 SCSI 命令集完整支持 针对视频应用优化的对象存储方案 流式上传 采用 RTMP/RTSP 协议进行推流上传, 将视频数据直接存放到对象存储中, 转储成 HLS 文件, 可用于视频的点播或直播 追加上传 提供对象的追加上传功能, 可以在对象的尾端追加数据, 提高传输效率, 满足视频应用的需求 基亍 Key/Value 存储存储的小文件性能优化方案 开源的 Glusterfs 小文件性能提升是一大难题, 苏研计划使用 Key/Value 存储 加速元数据处理, 提升小文件性能 21

22 谢谢! 22

册子0906

册子0906 IBM SelectStack ( PMC v2.0 ) 模块化私有云管理平台 是跨主流虚拟化技术的统一资源云管理平台 01 亮点 : 快速可靠地实现集成化 私有云管理平台 02/03 丰富的功能支持企业数据中心云计算 扩展性强 : 简单易用 : 04/05 功能丰富 : 06/07 为什么选择 IBM SelectStack (PMC v2.0)? 快速实现价值 提高创新能力 降低 IT 成本 降低复杂度和风险

More information

温州市政府分散采购

温州市政府分散采购 温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理

More information

3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol

3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol HPE Apollo System 中国独家提供商 服务器 存储和技术服务 以上描述适用于中国大陆地区,H3C 不是 HPE 唯一咨询服务提供商 3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo

More information

存储视频监控封面(210×270mm)-0725

存储视频监控封面(210×270mm)-0725 HUAWEI STORAGE 2014 年 08 月 总 第 6 期 视 频 监 控 专 刊 华 为 存 储 Marketing 部 华 为 存 储 视 频 监 控 专 刊 洞 察 图 像 智 慧 华 为 存 储 让 平 安 城 市 更 平 安 以 智 融 存 智 通 平 安 从 VSD 技 术 看 平 安 城 市 的 未 来 存 储 及 应 用 发 展 视 频 监 控 技 术 的 IT 化 趋 势

More information

<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63>

<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63> 项 目 编 号 : 招 标 文 件 ( 论 证 稿 ) 广 东 和 盛 招 标 代 理 有 限 公 司 Guangdong Hesheng Tendering Agency Co.,Ltd. 目 录 第 一 部 分 : 投 标 邀 请 函 1 第 二 部 分 : 采 购 项 目 内 容 4 第 三 部 分 : 投 标 人 须 知 88 第 四 部 分 : 合 同 书 格 式 104 第 五 部 分

More information

Hitachi Vantara Hitachi Vantara Hitachi, Ltd. Hitachi Vantara IT OT Go Go

Hitachi Vantara Hitachi Vantara Hitachi, Ltd. Hitachi Vantara IT OT   Go Go Hitachi, Ltd. IT OT https://www.hitachivantara.com/zh-tw/home.html Go Go www.sysage.com.tw 150 Go Go www.sysage.com.tw Go Go www.sysage.com.tw 151 152 Go Go www.sysage.com.tw VSP G130 VSP G (DAS) VSP G130

More information

IBM System x 系列手册

IBM System x 系列手册 IBM Systems and Technology System x IBM System x IBM System x 2 IBM System x IBM System x IBM System x BladeCenter RAS IT System x BladeCenter - IT IBM - IBM X System x System x IBM System x System x BladeCenter

More information

水晶分析师

水晶分析师 大数据时代的挑战 产品定位 体系架构 功能特点 大数据处理平台 行业大数据应用 IT 基础设施 数据源 Hadoop Yarn 终端 统一管理和监控中心(Deploy,Configure,monitor,Manage) Master Servers TRS CRYSTAL MPP Flat Files Applications&DBs ETL&DI Products 技术指标 1 TRS

More information

第 06 期 李祥池 : 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 1 日志 1.1 日志定义 IT 1.2 日志处理方案演进 v1.0 v2.0 Hadoop Storm Spark Hadoop/Storm/Spark v3.0 TB Splunk ELK SI

第 06 期 李祥池 : 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 1 日志 1.1 日志定义 IT 1.2 日志处理方案演进 v1.0 v2.0 Hadoop Storm Spark Hadoop/Storm/Spark v3.0 TB Splunk ELK SI 电子科学技术第 02 卷第 06 期 2015 年 11 月 Electronic Science & Technology Vol.02 No.06 Nov.2015 年 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 李祥池 ( 杭州华三通信技术有限公司北京研究所, 北京,100085) 摘要 : 在大数据时代 对数据平台各组件的运行状态实时监控与运行分析具有重要意义

More information

Topic: 深入理解 Ceph RGW 对象存储 Speaker: 朱荣泽 & 任家英 1 training.mirantis.com Copyright 2015 Mirantis, Inc. All rights reserved Copyright 2015 Mirantis, Inc. A

Topic: 深入理解 Ceph RGW 对象存储 Speaker: 朱荣泽 & 任家英 1 training.mirantis.com Copyright 2015 Mirantis, Inc. All rights reserved Copyright 2015 Mirantis, Inc. A Topic: 深入理解 Ceph RGW 对象存储 Speaker: 朱荣泽 & 任家英 1 training.mirantis.com Release 1.0 议程 对象存储对 OpenStack 的意义 Ceph 对象存储 RGW 原理解析 基于 Ceph 的对象存储的架构设计 Ceph RGW 发展现状 Ceph RGW 案例分享 2 对象存储对 OpenStack 的意义 3 云平台的常见存储需求

More information

目录 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 控制卡 GPU 卡 网卡 FC HBA 卡 TPM/TCM 模块 NVMe SSD PCle 加速卡 1-31 i

目录 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 控制卡 GPU 卡 网卡 FC HBA 卡 TPM/TCM 模块 NVMe SSD PCle 加速卡 1-31 i 目录 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 1-1 1.1 控制卡 1-1 1.2 GPU 卡 1-5 1.3 网卡 1-8 1.4 FC HBA 卡 1-21 1.5 TPM/TCM 模块 1-29 1.6 NVMe SSD PCle 加速卡 1-31 i 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 本手册为产品通用资料 对于定制化产品, 请用户以产品实际情况为准

More information

Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac

Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac Dell EMC Dell EMC IT Dell EMC IT Dell EMC https://www. dellemc.com/ Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost

More information

turbomail方案

turbomail方案 TurboMail 安 全 保 密 邮 件 系 统 解 决 方 案 (Windows/Linux/Unix/AIX/Solaris/FreeBSD 平 台 适 用 ) 广 州 拓 波 软 件 科 技 有 限 公 司 网 址 :http://www.turbomail.org - 1 - 目 录 广 州 拓 波 软 件 科 技 有 限 公 司 简 介...- 4 - 涉 密 系 统 需 求...- 7

More information

AppAssure 5

AppAssure 5 Dell AppAssure 5 用 户 指 南 5.4.2 2014 Dell Inc. 保 留 所 有 权 利 本 指 南 包 含 受 版 权 保 护 的 专 有 信 息 本 指 南 中 所 述 的 软 件 根 据 软 件 许 可 或 保 密 协 议 提 供 只 能 根 据 适 用 协 议 的 条 款 使 用 或 复 制 此 软 件 未 经 Dell Inc. 书 面 许 可, 不 得 以 任

More information

DocHdl2OnPPMtmpTarget

DocHdl2OnPPMtmpTarget 雲端運算及應用之淺談 ( 上 ) 曾婉菁 印刷科技 Google Google Grid computing Utility computing 1. 2. IBM 3. Microsoft 4. Google 5. NIST 6. Gartner IT as a service 1 1. Private Cloud 2. Public Cloud 3. Hybrid Cloud 4. Community

More information

Azure_s

Azure_s Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL

More information

存储培训教材 101 《存储基本概念一》 郑晓辉

存储培训教材 101 《存储基本概念一》 郑晓辉 医院数据保护一体化解决方案 新华三 -IT 产品拓展部 存储业务场景分类 HC SAN 存储 HC 备份产品 HC 存储解决方案 存储业务场景分类 存储业务场景分类 存储需求 虚拟化 & 数据库 (OLTP) 应用于核心数据库及大规模虚拟化场景 数据库系统一般作为生产系统的核心, 对存储性能提出较高的要求 在保证高 IOPS 和低延迟的同时, 也需要保证存 储的高可靠性 高可用性 SAN 存储 GIS/

More information

KV-cache 1 KV-cache Fig.1 WorkflowofKV-cache 2.2 Key-value Key ; Key Mem-cache (FIFO) Value Value Key Mem-cache ( Value 256B 100 MB 20%

KV-cache 1 KV-cache Fig.1 WorkflowofKV-cache 2.2 Key-value Key ; Key Mem-cache (FIFO) Value Value Key Mem-cache ( Value 256B 100 MB 20% 38 11 2013 11 GeomaticsandInformationScienceofWuhanUniversity Vol.38No.11 Nov.2013 :1671-8860(2013)11-1339-05 :A GIS Key-value 1 1 1 1 (1 129 430079) : 设计了一种基于 Key-value 结构的缓存 KV-cache 旨在简化数据结构 高效管理缓存数据

More information

政府機關資訊通報第295期(5月)

政府機關資訊通報第295期(5月) 第 295 期 101 年 5 月 5 日出版 財政部文書檔管系統(公文線上簽核) 推展簡介 雲端虛擬化平台於臺中市政府資訊中心之 建置與應用 考選部 國家考試試務整合性管理系統 簡介 全國首創第四級之高雄土地利用調查 作業特點 統整式知識內容管理系統建構實務 考選部行政系統整合平台暨 線上申辦及薪資差勤系統 建置經驗分享 目 次 機 關 動 態... 1 法 務 部 調 查 局... 1 內 政

More information

总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1 -

总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1 - ( 招 标 编 号 :JXBJ2016-G008) 江 西 省 百 巨 招 标 咨 询 有 限 公 司 中 国 江 西 二 一 六 年 一 月 总 目 录 第 一 章 投 标 邀 请 - 2 - 第 二 章 招 标 项 目 需 求 - 3 - 第 三 章 投 标 人 须 知 - 28 - 第 四 章 合 同 格 式 - 54 - 第 五 章 投 标 文 件 格 式 - 60 - 招 标 编 号 :JXBJ2016-G008-1

More information

156 ORACLE SUN ORACLE SUN

156 ORACLE SUN ORACLE SUN ORACLE SUN ( Oracle ) Oracle Oracle SUN SUN Oracle 155 156 ORACLE SUN ORACLE SUN Database Appliance X4-1 Oracle ORACLE SUN 1. Oracle Database Appliance (ODA) X4-2 ODA Oracle Database (OLTP) Oracle License

More information

Presentation title goes here

Presentation title goes here 在私有云中提供与 Azure 一致的存储服务 曹阳 [email protected] Microsoft Azure Stack 10:00AM -10:50AM DIM-B305: 在 Hyper-V 中保护租户的秘密 1:30PM 2:20PM 3:30PM 4:30PM 4:30PM 5:20PM DIM-B201: Azure Stack: 与 Azure 一致的私有云 托管云服务交付

More information

PowerPoint Presentation

PowerPoint Presentation Kubernetes 存储概览 邢舟 IBM 开放技术研究院 [email protected] 2017.6 1 议程 K8s 存储的主要应用场景 K8s 存储的设计原则 K8s 存储的主要模块 K8s 存储的社区开发 一个简单的例子 2 K8s 存储的主要应用场景 应用程序 / 服务存储状态 数据存取等 应用程序 / 服务配置文件读取 秘钥配置等 不同应用程序间或者应用程序内进程间共享数据

More information

HPE LeftHand OS 12.5 版发行说明

HPE LeftHand OS 12.5 版发行说明 HPE LeftHand OS 12.5 版 发 行 说 明 部 件 号 :AX696-10013R 出 版 日 期 :2016 年 1 月 第 2 版 Copyright 2015, 2016 Hewlett Packard Enterprise Development LP 本 文 档 中 包 含 的 信 息 如 有 更 改, 恕 不 另 行 通 知 随 Hewlett Packard Enterprise

More information

Slide 1

Slide 1 Oracle 存储新技术改变您的存储系统的时刻到来了 Oracle ZFS 统一存储产品介绍 传统性能优化架构 :Cache+ 高速磁盘 将数据存储先存在 DRAM 从而避免延迟 使用电池保护的 DRAM 来缓冲同步的写数据 DRAM 的数量有限 大量的高速 高性能磁盘 (15K FC) 减少磁头寻道, 来提高 IOPS 高昂的代价, 难以为继 混合存储池技术 : 自动的数据分层存储 老的存储模式引入

More information

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一

考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 25 26 27 28 29 30 31 32 33 34 35 36 二 技 企 管 一 胡 宗 兒 中 文 輸 入 四 技 企 四 甲 林 姿 瑄 中 文 輸 入 二 技 企 管 一 考 試 日 期 :2016/04/24 教 室 名 稱 :602 電 腦 教 室 考 試 時 間 :09:50 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 五 專 企 二 乙 胡 哲 維 中 文 輸 入 五 專 企 二 乙 周 林 昜 中 文 輸 入 五 專 企 二 乙 賴 昱 樺 中 文 輸 入 五 專 企 二 乙

More information

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家

是 证 券 市 场 的 后 来 者, 但 在 前 景 广 阔 的 道 路 上 前 行, 终 将 成 为 这 个 市 场 的 领 先 者, 这 里 会 给 你 一 个 巨 大 的 舞 台, 这 里 有 你 需 要 的 机 会, 这 里 欢 迎 优 秀 的 你! 二 招 收 条 件 1. 遵 守 国 家 全 国 中 小 企 业 股 份 转 让 系 统 有 限 责 任 公 司 2016 年 暑 期 实 习 生 招 收 公 告 一 公 司 简 介 全 国 中 小 企 业 股 份 转 让 系 统 ( 以 下 简 称 新 三 板 ) 是 经 国 务 院 批 准, 依 据 证 券 法 设 立 的 继 上 交 所 深 交 所 之 后 第 三 家 全 国 性 证 券 交 易 场 所, 也 是 境 内 第 一 家

More information

文档 1

文档 1 2005 3 100 2005 10 20 100 100 2003 9 30 266,303,262.93 100 941,105,695.50 532,672,384.52 1 2 100 100 100 90% 100 50% 100 100 2005 8 21 "75% 100 + 25% " 2005 8 22 100 95%+ 5% 3 75% + 25% 2005 7 1 2005 9

More information

次世代のITインフラ“Compute”を先取り!HPが統合型アプライアンス「HP ConvergedSystem」を推進する理由

次世代のITインフラ“Compute”を先取り!HPが統合型アプライアンス「HP ConvergedSystem」を推進する理由 ITCompute HP HP ConvergedSystem 2015 2 18 HP Devices (1) 300 40 GB 40 Zettabytes 1000 (3) Mobile Apps 2020 (2) DATA Mobile Apps Cloud Security 2 Mobility New Style of IT Big Data (1) IDC Directions 2013:

More information

Dell AppAssure 5.4.3 安装和升级指南

Dell AppAssure 5.4.3 安装和升级指南 Dell AppAssure 5.4.3 安 装 和 升 级 指 南 2014 Dell Inc. 保 留 所 有 权 利 本 指 南 包 含 受 版 权 保 护 的 专 有 信 息 本 指 南 中 所 述 的 软 件 根 据 软 件 许 可 或 保 密 协 议 提 供 只 能 根 据 适 用 协 议 的 条 款 使 用 或 复 制 此 软 件 未 经 Dell Inc. 书 面 许 可, 不 得

More information

A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内

A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内 A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内 容 分 发 网 络 Alibaba Cloud Content Delivery Network 一

More information

SMARTZONE WLAN SmartZone 3 L2oGRE QinQ vsz-d / SZ100-D WLAN NAT WLAN Ruckus 1Gbps 10Gbps SmartZone SmartZone vsz DHCP/NAT DHCP IP NAT MAC SmartZone WL

SMARTZONE WLAN SmartZone 3 L2oGRE QinQ vsz-d / SZ100-D WLAN NAT WLAN Ruckus 1Gbps 10Gbps SmartZone SmartZone vsz DHCP/NAT DHCP IP NAT MAC SmartZone WL SmartZone 3 L2oGRE QinQ vsz-d / SZ100-D WLAN NAT WLAN Ruckus 1Gbps 10Gbps SmartZone SmartZone vsz DHCP/NAT DHCP IP NAT MAC SmartZone (vsz-d) (SZ100-D) SmartZone Ruckus SmartZone Ruckus WLAN Wi-Fi SmartZone

More information

<4D6963726F736F667420576F7264202D20D5D0B1EACEC4BCFEBCB0C7E5BDE0B7FECEF1BACFCDAC28C2C9CAA6B0E631A3A92E646F6378>

<4D6963726F736F667420576F7264202D20D5D0B1EACEC4BCFEBCB0C7E5BDE0B7FECEF1BACFCDAC28C2C9CAA6B0E631A3A92E646F6378> 投 标 邀 请 书 一 招 标 单 位 : 广 东 白 云 城 市 酒 店 有 限 公 司 二 招 标 地 址 : 广 州 市 环 市 西 路 179 号 三 公 告 时 间 :2016 年 7 月 27 日 2016 年 8 月 1 日 四 工 程 名 称 : 广 东 白 云 城 市 酒 店 外 围 卫 生 清 洁 外 包 项 目 五 工 程 內 容 : 酒 店 外 围 区 域 卫 生 清 洁,

More information

國立中山大學學位論文典藏.PDF

國立中山大學學位論文典藏.PDF 國 立 中 山 大 學 中 國 文 學 系 碩 士 論 文 漢 初 黄 老 學 說 的 經 世 觀 及 其 實 踐 研 究 生 : 楊 芳 華 撰 指 導 教 授 : 夏 長 樸 教 授 中 華 民 國 九 十 五 年 六 月 論 文 摘 要 黃 老 思 想 在 中 國 學 術 史 上 是 一 個 重 要 課 題, 也 在 漢 初 政 治 上 產 生 過 相 當 大 的 影 響, 漢 初 的 文 景

More information

!!! #!!! $##%!!! $!!!! &!!!! (!! %!! )!!! *!!!!!!! #!!!!! $

!!! #!!! $##%!!! $!!!! &!!!! (!! %!! )!!! *!!!!!!! #!!!!! $ !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!# $% %!% % % &% % % $% %!% % &% % %! ( ) $ # ## # *# # +# # # #,# # # # $ !!! #!!! $##%!!! $!!!! &!!!! (!! %!! )!!! *!!!!!!! #!!!!! $ !! +# 2 %,# & 0 3 #!!! $%!!!!!!!!!!!!!!!

More information

"#" " "" " " "# $ " %( )# #( %& ( " % " " # ) *# " # " $ " #(( " " "#+( % " % $ " & # " " $ $ " " $ % & " #$ % $ "& $ "" " ") # #( "( &( %+"(

#     # $  %( )# #( %& (  %   # ) *#  #  $  #((   #+( %  % $  & #   $ $   $ % &  #$ % $ & $   ) # #( ( &( %+( ")" " "" ( " "((*+, # *( $ ( ) $ $ $ % * $ % #& $ +* $ ( )$ $ + & $ ( ), " " # " # # # "# $# " $ $ # % & $"#$%% & $ $ & " $%&% " $"# $ % $& % & & & (# " % #$ % " * # & %""(#&%)* % $ ")$# #" $ +$ " # $

More information

89,,,,,,,,,,,,,,,,?,???,,,,,,,,,,,,,

89,,,,,,,,,,,,,,,,?,???,,,,,,,,,,,,, :,,,,,,,,, : ; ;; ;,,,,, 89,,,,,,,,,,,,,,,,?,???,,,,,,,,,,,,, 90,,,,,,,, ( ),?,,, A B,C C?,,,,?,,,,,,,,,,,,,,,,,, 91 ( ),,,,,,,,,, :,,,,,,,,,,,,,,,,, ; ;, ;,,,,, 92,, (),,, ( ),,,,,,,,,,,,,,,,,,,,,,,,,

More information

!##$ %!!##$ & (!##$ %!!##$ &!##$!##(!##$! "

!##$ %!!##$ & (!##$ %!!##$ &!##$!##(!##$! "!! " "!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! " " " #$$% #$$%! "# $ % &$ & "# $ " ( # $! && % ( "!!# # $ % & "! & # #$ $! #$ %! " !##$ %!!##$ & (!##$ %!!##$ &!##$!##(!##$! " " #$ %& ($ )$ *$ +$,$ %&,# #-.#

More information

Autodesk Product Design Suite Standard 系统统需求 典型用户户和工作流 Autodesk Product Design Suite Standard 版本为为负责创建非凡凡产品的设计师师和工程师提供供基本方案设计和和制图工具, 以获得令人惊叹叹的产品

Autodesk Product Design Suite Standard 系统统需求 典型用户户和工作流 Autodesk Product Design Suite Standard 版本为为负责创建非凡凡产品的设计师师和工程师提供供基本方案设计和和制图工具, 以获得令人惊叹叹的产品 Autodesk Product Design Suite Standard 20122 系统统需求 典型用户户和工作流 Autodesk Product Design Suite Standard 版本为为负责创建非凡凡产品的设计师师和工程师提供供基本方案设计和和制图工具, 以获得令人惊叹叹的产品设计 Autodesk Product Design Suite Standard 版本包包括以下软件产产品

More information

HP StorageWorks Automated Storage Manager 用户指南

HP StorageWorks Automated Storage Manager 用户指南 HP StorageWorks Automated Storage Manager 用 户 指 南 HP 部 件 号 :5697-0822 出 版 日 期 :2011 年 3 月 第 2 版 版 权 所 有 2010, 2011 Hewlett-Packard Development Company, L.P. 保 密 的 计 算 机 软 件 拥 有 使 用 或 复 制 本 软 件 需 获 得 HP

More information

Untitiled

Untitiled 地 方 建 设 篇 南 宁 市 一 城 市 规 划 与 建 设 [ 规 划 管 理 ]2007 年 度, 共 召 开 业 务 审 查 会 89 次, 共 组 织 各 种 方 案 评 审 会 466 次 共 办 理 建 设 工 程 审 批 业 务 7088 项, 办 理 新 开 工 面 积 993.6 万 平 方 米 ; 共 核 发 建 设 用 地 规 划 许 可 证 292 份, 审 批 建 设

More information

577 13681911 442 1019 1 120 107 155 60 1 4 8 1 4 209 1882 3 8 8 4 1 1987 154 18 1937 1983 1962 1978 1931 1933 1937 1979 1940 1941 1947 1948 1982 1985 1981 1984 6 20 1951 1981 5 IBM

More information

untitled

untitled 1 2,835,000,152.41 2,595,958,921.28 9.21 3,803,706,275.25 3,636,910,789.29 4.59 7,422,162,377.11 6,976,568,723.61 6.39 2,978,399,071.95 2,937,950,953.08 1.38 4.5127 4.4514 1.38 4.2429 4.2437-0.02 106,431,093.07

More information

第6章  数据库技术基础

第6章  数据库技术基础 第 六 章 数 据 库 技 术 基 础 本 章 要 点 数 据 库 系 统 概 述 关 系 数 据 库 数 据 库 设 计 数 据 库 系 统 概 述 数 据 管 理 技 术 的 发 展 数 据 管 理 技 术 的 发 展 分 三 个 阶 段 : 人 工 管 理 阶 段 文 件 系 统 管 理 阶 段 数 据 库 系 统 管 理 阶 段 数 据 库 系 统 概 述 数 据 库 数 据 库 管 理 系

More information

PowerPoint Presentation

PowerPoint Presentation 中 小 IT 企 业 人 力 资 源 管 理 咨 询 简 介 一 背 景 分 析 二 需 求 分 析 三 服 务 内 容 四 操 作 流 程 五 斯 隆 优 势 六 行 业 案 例 七 服 务 理 念 目 录 一 背 景 分 析 -IT 业 现 状 分 析 IT 产 业 的 总 量 水 平 较 低 中 国 IT IT 现 状 总 体 规 模 较 小 技 术 自 主 创 新 能 力 差 对 经 济 的

More information

... 5 1.1... 5 1.1.1... 5 1.1.2... 5 1.1.3... 5 1.1.4... 5 1.1.5... 5 1.2... 6 1.2.1... 6 1.2.2... 7... 9 2.1... 9 2.1.1... 9 2.1.2... 9 2.1.3... 10 2.2... 11 2.2.1... 11 2.2.2... 13 2.3... 14 2.4... 14...

More information

AristaStorageNetworkingWhitepaper_v.6.0_GF-C

AristaStorageNetworkingWhitepaper_v.6.0_GF-C (Big Data) (Big Data) -Terabytes -Exabytes-Zetabytes Arista / Arista IT Hadoop / Web HPC (10GbE) 10GbE Hadoop Hadoop HadoopArista NetworksHadoop Hadoop 1 Hadoop (Gigabytes ) (Petabytes)Hadoop Hadoop Linux

More information

附3

附3 普 通 高 等 学 校 本 科 专 业 设 置 申 请 表 ( 备 案 专 业 适 用 ) 080910T 3-6 2 016 7 6 4884878 目 录 填 表 说 明 ⒈ ⒉ ⒊ ⒋ ⒌ 1. 普 通 高 等 学 校 增 设 本 科 专 业 基 本 情 况 表 080910T 3-6 1978 36 ( 1978) ( 2008) 2017 60 120 / S J ⒉ 学 校 基 本 情

More information

Basic System Administration

Basic System Administration 基 本 系 统 管 理 ESX Server 3.5 ESX Server 3i 版 本 3.5 Virtual Center 2.5 基 本 管 理 指 南 基 本 管 理 指 南 修 订 时 间 :20080410 项 目 :VI-CHS-Q208-490 我 们 的 网 站 提 供 最 新 的 技 术 文 档, 网 址 为 : http://www.vmware.com/cn/support/

More information

目 录 目 录... 2 1 平 台 概 述... 3 2 技 术 架 构... 4 3 技 术 特 点... 7 3.1 基 于 统 一 平 台 的 多 产 品 线 支 撑... 7 3.2 先 进 性... 7 3.3 安 全 性... 7 3.4 开 放 性... 8 3.5 高 性 能 和

目 录 目 录... 2 1 平 台 概 述... 3 2 技 术 架 构... 4 3 技 术 特 点... 7 3.1 基 于 统 一 平 台 的 多 产 品 线 支 撑... 7 3.2 先 进 性... 7 3.3 安 全 性... 7 3.4 开 放 性... 8 3.5 高 性 能 和 致 远 协 同 管 理 软 件 V5 平 台 白 皮 书 北 京 致 远 协 创 软 件 有 限 公 司 2014 年 6 月 1 / 20 目 录 目 录... 2 1 平 台 概 述... 3 2 技 术 架 构... 4 3 技 术 特 点... 7 3.1 基 于 统 一 平 台 的 多 产 品 线 支 撑... 7 3.2 先 进 性... 7 3.3 安 全 性... 7 3.4 开 放

More information

数字地理空间框架及一村一镇一地图建设

数字地理空间框架及一村一镇一地图建设 数 字 五 华 地 理 空 间 框 架 及 一 村 一 镇 一 地 图 建 设 项 目 招 标 文 件 招 标 编 号 :SZGXMZ140318 2014 年 5 月 12 日 编 制 人 : 曾 旭 明 目 录 第 一 部 分 投 标 邀 请 书...4 第 二 部 分 投 标 须 知...6 1. 关 于 定 标 方 式...6 2. 关 于 招 标 文 件...6 3. 关 于 投 标 人...6

More information

快 速 入 门 (Linux) 概 述 文 档 目 的 本 文 档 介 绍 了 如 何 快 速 创 建 Linux 系 统 实 例 远 程 连 接 实 例 部 署 环 境 等 旨 在 引 导 您 一 站 式 完 成 实 例 的 创 建 登 录 和 快 速 环 境 部 署 云 服 务 器 ECS 实

快 速 入 门 (Linux) 概 述 文 档 目 的 本 文 档 介 绍 了 如 何 快 速 创 建 Linux 系 统 实 例 远 程 连 接 实 例 部 署 环 境 等 旨 在 引 导 您 一 站 式 完 成 实 例 的 创 建 登 录 和 快 速 环 境 部 署 云 服 务 器 ECS 实 云 服 务 器 ECS 快 速 入 门 (Linux) 快 速 入 门 (Linux) 概 述 文 档 目 的 本 文 档 介 绍 了 如 何 快 速 创 建 Linux 系 统 实 例 远 程 连 接 实 例 部 署 环 境 等 旨 在 引 导 您 一 站 式 完 成 实 例 的 创 建 登 录 和 快 速 环 境 部 署 云 服 务 器 ECS 实 例, 有 时 候 也 被 称 为 阿 里 云

More information

51434S Fundamentals of the UNIX system 5 40, H3064S HPE-UX System and Network Administration I 5 40, H3065S HPE-UX System

51434S Fundamentals of the UNIX system 5 40, H3064S HPE-UX System and Network Administration I 5 40, H3065S HPE-UX System 51434S Fundamentals of the UNIX system 5 40,000 9-13 17-21 H3064S HPE-UX System and Network Administration I 5 40,000 6-10 15-19 H3065S HPE-UX System and Network Administration II 5 40,000 6-10 12-16 H8P04S

More information

SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储 2

SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储 2 www.hand-china.com 搭 建 基 于 HANA 的 企 业 基 础 架 构 平 台 作 者 : HAND 日 期 : 2016-05 本 : 2.5 上 海 信 息 技 术 股 份 限 HAND Enterprise Solutions Company Ltd. www.hand-china.com SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储

More information

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成 ULA 尚 观 云 计 算 集 群 架 构 师 ( 零 首 付 )V9.0( 周 末 ) 一 尚 观 教 育 九 年 运 营 35000 学 员, 平 均 月 薪 6258+ 签 法 律 双 保 就 业 协 议, 保 底 薪, 保 就 业, 不 就 业 100% 退 所 有 学 费, 绝 非 就 业 推 荐 协 议 9 年 运 营 9 大 城 市 直 属 校 区 实 力 保 证, 三 万 多 名 已

More information

02

02 UCloud 与 众 不 同 的 生 态 圈 玩 法 >>06 太 极 收 购 宝 德 背 后 的 故 事 >>12 数 字 商 业 时 代 中 的 IT 方 案 商 >>14 2015 年 第 12 期 总 第 124 期 国 内 统 一 刊 号 :CN11-5261/TN ISSN:16732-0906 零 售 价 : 人 民 币 3 元 http://www.cnbp.net P19 02 卷

More information