Extreme Performance Data Warehousing

Similar documents
Extreme Performance Data Warehousing

Extreme Performance Data Warehousing

PowerPoint Presentation

Database Machine V2

水晶分析师

<4D F736F F F696E74202D20332ECAFDBEDDBFE2D4C6D2BBCCE5BBFAD4DABDF0C8DA20B1A3CFD5D0D0D2B5B5C4CAB9D3C3B0B8C0FDBCB0D7EEBCD1CAB5BCF9B7D6CFED2E >

R D B M S O R D B M S R D B M S / O R D B M S R D B M S O R D B M S 4 O R D B M S R D B M 3. ORACLE Server O R A C L E U N I X Windows NT w w

Exadata新技术特性及其应用

Dell EMC Data Domain DDOS 5.5 Data Domain Data Domain Data Domain : Data Domain Boost (DDBoost) Dell EMC DDBoost Data Domain DDBoost Source De-Dup Bac

Big Data - Are You Ready


Hitachi Vantara Hitachi Vantara Hitachi, Ltd. Hitachi Vantara IT OT Go Go

Slide 1

概述

SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储 2

1 o o o CPU o o o o o SQL Server 2005 o CPU o o o o o SQL Server o Microsoft SQL Server 2005

Slide 1

Microsoft Word - 临政办发31.doc

Database Machine V2

F4

第五篇 電子化實務範例

ebook 132-2

<4D F736F F D20BBAACCA9C1AABACFD6A4C8AFD3D0CFDED4F0C8CEB9ABCBBEB9D8D3DAC9EEDBDACAD0D0CBC9ADBFECBDDDB5E7C2B7BFC6BCBCB9C9B7DDD3D0CFDEB9ABCBBE C4EAB6C8C4DAB2BFBFD8D6C6D7D4CED2C6C0BCDBB1A8B8E6B5C4BACBB2E9D2E2BCFB2E646

致理技術學院資訊管理學系專題企劃書格式建議書

册子0906

156 ORACLE SUN ORACLE SUN

温州市政府分散采购

Oracle 4

数据分析技术介绍

BPR JIT

Slide 1

Systems Webcast - John Fowler

Exadata技术建议

( )

<4D F736F F D20312D3120B9ABBFAAD7AAC8C3CBB5C3F7CAE9A3A8C9EAB1A8B8E5A3A92E646F63>

Azure_s

Extreme Performance Data Warehousing

国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对

政府行业云计算成功案例—单页

声 明 本 公 司 及 全 体 董 事 监 事 高 级 管 理 人 员 承 诺 不 存 在 虚 假 记 载 误 导 性 陈 述 或 重 大 遗 漏, 并 对 其 真 实 性 准 确 性 完 整 性 承 担 个 别 和 连 带 的 法 律 责 任 本 公 司 负 责 人 和 主 管 会 计 工 作 的

IBM System x 系列手册

Exadata技术建议

IT Data-intensive application,iscsi Middl

CA Nimsoft Monitor Snap 快速入门指南

<5C5C D2D CB1BEB5D8B4C5C5CC CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63>

untitled

Microsoft Word htm

背 景 概 述 企 业 需 要 一 种 灵 活 的 平 台 来 快 速 构 建 测 试 和 扩 展 新 的 应 用 程 序 服 务 并 对 市 场 中 发 生 的 数 字 化 变 革 作 出 反 应 数 字 化 变 革 正 在 加 快 步 伐, 因 为 流 程 和 信 息 的 日 益 融 合 带 来

ERP ERP ERP SAP ERP ERP ERP CCID % ERP 45% 2


Extreme Performance Data Warehousing

支付宝2011年 IT资产与费用预算

untitled

BYOD IP+Optical (IP NGN) API 4. End-to-End (Service Aware) 5. IP NGN (IP Next Generation Network) ( ) Prime Carrier Management Access Edge Co

Slide 1

Sun StorEdge 3000 系列安装、操作和维护手册 (3310)

Building and Managing a Private Oracle Java and Middleware Cloud

目錄

(Quad-Core Intel Xeon 2.0GHz) ()(SAS) (Quad-Core Intel Xeon 2.0GHz) (Windows )(Serial ATA) (Quad-Core Intel Xeon 2.0GHz) (Linux)(Serial ATA)

1-12

ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示

在 Hitachi AMS 2000 系列上应用 VMware VAAI 的优势

Oracle Cloud Computing Solution

相 关 知 识 1 计 算 机 工 作 原 理 1946 年 2 月, 世 界 上 第 一 台 电 子 计 算 机 ENIAC (Electronic Numerical Integrator And Computer, 电 子 数 字 积 分 计 算 机 ) 诞 生 于 美 国 宾 夕 法 尼 亚

<4D F736F F D20C9CFBAA3C0B4D2C1B7DDB9C9B7DDD3D0CFDEB9ABCBBECAD7B4CEB9ABBFAAB7A2D0D0B9C9C6B1D5D0B9C9CBB5C3F7CAE9A3A8C9EAB1A8B8E C4EA36D4C23330C8D5B1A8CBCDA3A92E646F63>

Magic Desktop

Slide 1

公 司 年 度 大 事 记 年 4 月 30 日, 公 司 员 工 持 股 平 台 北 京 天 睿 聚 合 投 资 管 理 中 心 ( 有 限 合 伙 ) 正 式 成 立 2014 年 8 月 28 日, 公 司 改 制 工 作 顺 利 完 成, 西 安 美 林 数 据 技 术 股

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式]

Sun Storage Common Array Manager 阵列管理指南,版本 6.9.0

1 Par t IBM 7 Par t 2 I BM IBM Par t Q & A



PowerPoint Presentation

學 科 100% ( 為 單 複 選 題, 每 題 2.5 分, 共 100 分 ) 1. 請 參 閱 附 圖 作 答 : (A) 選 項 A (B) 選 項 B (C) 選 項 C (D) 選 項 D Ans:D 2. 下 列 對 於 資 料 庫 正 規 化 (Normalization) 的 敘

次世代のITインフラ“Compute”を先取り!HPが統合型アプライアンス「HP ConvergedSystem」を推進する理由

Microsoft Word - View存储注意事项.doc

幻灯片 1

天津天狮学院关于修订2014级本科培养方案的指导意见

展 的 关 键 2015 年 国 内 资 本 市 场 持 续 活 跃, 市 场 交 易 规 模 大 幅 增 长, 带 动 投 资 者 规 模 快 速 增 长 (2) 大 资 管 时 代 到 来, 资 产 管 理 业 务 将 井 喷 式 增 长 自 2012 年 起, 监 管 政 策 放 开, 证 券

PowerPoint 演示文稿

幻灯片 1

V8_BI.PPT [只读]

6112 http / /mops.tse.com.tw http / /

Slide 1

DB2 (join) SQL DB2 11 SQL DB2 SQL 9.1 DB2 DB2 ( ) SQL ( ) DB2 SQL DB2 DB2 SQL DB2 DB2 SQL DB2 ( DB2 ) DB2 DB2 DB2 SQL DB2 (1) SQL (2) S

02 责任编辑 张晋芬 2 16:06:31

Slide 1

DocHdl2OnPPMtmpTarget

附件2

A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内

<4D F736F F D20B1B1BEA9B0D9BBAAD4C3B0EEBFC6BCBCB9C9B7DDD3D0CFDEB9ABCBBECAD7B4CEB9ABBFAAB7A2D0D0B9C9C6B1B2A2D4DAB4B4D2B5B0E5C9CFCAD0D5D0B9C9CBB5C3F7CAE9A3A8C9EAB1A8B8E C4EA37D4C236C8D5B1A8CBCDA3A92E646F63>

Extreme Performance Data Warehousing

投影片 1


<4D F736F F D20D6C7BBDBB5D8C7F22D2DB6AFCCACBCDCB9B9D6AED2B5CEF1B5AFD0D4B7BDB0B8BDA8D2E9CAE92E646F63>

Microsoft Word - 3D_仿單_領證版

% ~ AAA

Slide 1

目 录 第 一 章 概 述 总 体 框 架 临 床 信 息 系 统 建 设 医 院 管 理 信 息 系 统 信 息 平 台 建 设 需 求... 5 第 二 章 基 于 电 子 病 历 的 临 床 信 息 系 统 建 设 需 求...

Transcription:

<Insert Picture Here> 高性能数据库一体机 -- Oracle Exadata X2-2 戴飞飞甲骨文 ( 中国 ) 软件系统有限公司

Agenda 企业信息化面临的问题 传统的解决方案 高性能 & 高智能的理想架构 Oracle 为企业信息化提供的解决之道 Q&A

企业信息化面临的问题和关注点

企业信息化面临的问题昂贵的 低效的 信息孤岛导致资源浪费 每个系统都是最高性能配置 性能仍然不能满足要求 很难进行扩展 数据平台不能统一

企业信息化的关注点.. 战略规划 技术整合

传统的解决方案

FREE IBM Server & OS Infrastructure 传统 SMP 一体机架构组成 EMC Storage RAC DB1 硬件架构 CPU Memory Disk Array RAC DB2 SAP 软件架构 OS Database (DW OLTP) Application

传统 SMP 一体机部署维护硬件架构 服务器配置 存储配置 服务器配置 操作系统配置 存储配置 服务器配置 Oracle 配置 操作系统配置 存储配置 服务器配置 RAC Partition OEM.

传统数据中心硬件架构 如何优化配置资源? --- 安装配置 --- 维护管理 --- 性能优化 --- 监控管理 --- 服务器扩展

传统 SMP 一体机架构软件架构 -DW 系统 性能 增长 TB 性能 IO-bandwidth intensive workloads Random-IO intensive workloads

传统 SMP 一体机架构软件架构 -OLTP 系统 Memory CPU 是否还是 100%, 查询仍然很慢 CPU

混合系统如何优化 分配资源? 软件架构 - Application 系统 ERP CRM HR Warehouse Data Mart 系统之间资源不能充分利用 单一硬件成本在不断增长 系统的响应时间 性能在下降 异构系统之间的数据访问压力在增加

高智能 & 高性能的理想架构

构建高性能 IT 基础平台的理想架构 保障系统中没有单点故障 (SPOF-Single Point of Failure), 支持业务连续性 在系统中消除性能瓶颈 (Performance Bottle-Neck), 构建一个平衡的系统 能有效地进行系统的扩展, 满足不断增长的数据和用户需求 智能管理, 提高整体的业务性能和业务管理 统一数据, 更实时 有效地整合数据资源

Oracle 为企业信息化提供的解决之道

Exadata X2-2 高性能体系架构 智能数据库一体机 最快的数据仓库 最快的 OLTP 最强的混合系统

Exadata X2-2 不是软硬件的堆叠

Exadata X2-2 完整的, 预配置的, 严格测试的超级性能系统 数据库服务器 Exadata 存储服务器 InfiniBand 交换机 Ethernet 交换机 出厂完成线缆连接 Keyboard, Video, Mouse (KVM) hardware Power Distribution Units (PDUs) 随付即用 插电 联网 启动数据库

Exadata X2-2 特点 完全为 Oracle 数据库库优化的服务器 & 存储平台 : 用来解决传统 多用途 服务器的限制 利用通用组件, 提供更低的总拥有成本 通过预装和配置, 提供 开箱即用 的极限性能 自动的存储和运行管理, 降低营运成本并能始终提供优化的性能 RAC Database Server Grid 8 高性能 低成本运算服务器 2 Intel 6-core Xeons ( 每台机器 ) InfiniBand Network 40 Gb/sec 容错 统一的服务器和存储网络 Exadata Storage Server Grid 14 高性能 低成本服务器 100 TB raw SAS 高性能磁盘存储 或 336 TB raw SAS 高容量磁盘存储 5TB+ 闪存存储!

Exadata X2-2 系统架构存储 网络 数据库整体优化架构 单实例数据库 RAC 集群数据库 数据库处理层最新 11g 12 核 96G 12 核 96G 超高速 并发网络层 880Gb/s/ 机架 InfiniBand Switch/Network 智能存储层 1.5M IOPS/ 机架 Exadata Cell 384GB 闪存 12 x 600GB 40G IB 12 核 24G Exadata Cell Exadata Cell N x 1.8GB/s N x 5.4GB/s

智能存储层 (Disk Array) Exadata Smart Scan 处理技术 Compute Intensive Processing Database Server 计算和内存密集型的数据处理在数据库服务器执行 完全并行和聚集 Bandwidth Intensive Searches Exadata Storage Server IO-bandwidth 密集型搜索在存储服务器上执行 Exadata Smart Scans and Exadata Storage Indexes 可以直接在存储层过滤数据 数据库服务器和 Exadata 存储互相协调执行 SQL Exadata cell 是智能存储, 不是一个完整的数据库节点

智能存储层 (Disk Array) Exadata Hybrid Columnar 压缩技术 数据以字段形式存储并压缩 Only on Exadata 查询模式 针对 data warehousing 最优的速度 典型的可达到 10X 的压缩率 按压缩比率改进扫描 Archival Mode 针对频繁的数据访问 减少空间 典型的可达到 15X 的压缩率 有些可达到 50X Up To 50X

智能存储层 (Disk Array) Exadata Storage Index 透明地降低 I/O Exadata Storage Indexes 在内存中维护表数据的汇总信息 存储条件列的 MIN and MAX values 磁盘每 MB 都有索引项 如果 MIN 和 MAX 从来不匹配查询语句中的 Where 条件, 那么会消除 Disk I/O 完全地自动和透明 Order_date Ship_date Cust _ID Prod _ID Amount 03-SEP-2009 19-SEP-2009 10075 32932 10,000.00 03-SEP-2009 05-SEP-2009 20098 20098 20,000.00 03-SEP-2009 07-OCT-2009 10089 20010 15,000.00 03-SEP-2009 01-OCT-2009 20100 10000 35,000.00 03-SEP-2009 19-OCT-2009 80300 30000 10,000.00 03-SEP-2009 03-NOV-2009 10000 2030 40,000.00 MIN ship_date = 19-SEP-2009 MAX ship_date = 07-OCT-2009 MIN ship_date = 01-OCT-2009 MAX ship_date = 03-NOV-2009 Select * from orders where ship_date <= 30-SEP-2009 仅第一个结果集匹配

智能存储层 (Disk Array) Exadata Flash 解决 RANDOM I/O 瓶颈 New Exadata 有 5+ TB 的闪存存储 Exadata Smart Cache 技术缓存热点访问的数据 可以根据业务表规则进行优化 5X More I/Os than 1000 Disk Enterprise Storage Array 极大地降低成本 同样的 I/O 能力, 超过 10x 倍的磁盘节省 低能耗 Oracle 是第一个闪存优化的数据库系统

Exadata X2-2 智能存储带来性能增倍 10 TB 的用户数据需要 10 TB 的 IO 1 TB ( 压缩 ) 100 GB ( 分区修剪 ) 20 GB ( 存储索引 ) 内存或闪存上的 5 GB 智能扫描 在 Database Machine 上实现亚秒级 数据减少 10 倍, 扫描加快 2000 倍

Exadata X2-2 性能 60 Query Throughput Query Throughput with Flash 50 50 为什么 Oracle 更快? 数据在存储层处理 更高的压缩率 (10x) Smart Flash Cache Faster Interconnect (40Gb/sec) 40 30 20 10 11.4 7.5 10 21 更多的磁盘 更快的磁盘 (15K RPM) 0 HITACHI USP V TERADATA 2550 NETEZZA TwinFin 12 SUN ORACLE Database Machine 26

Exadata 用户性能相同 SQL 并行测试结果 相同 SQL 并行吞吐量 相同 SQL 并行 CPU 利用率 BCC 系统 Exadata 系统 BCC 系统 Exadata 系统 800 100 吞吐量 (SQL 数量 / 秒 ) 600 400 200 0 q1-u32 q2-u32 q3-u32 q4-u32 q5-u32 q6-u32 q7-u32 CPU 利用率 ( 均值 ) 80 60 40 20 0 q1-u32 q2-u32 q3-u32 q4-u32 q5-u32 q6-u32 q7-u32 查询语句 查询语句 Exadata 系统的 SQL 吞吐量高于 BCC 测试系统, 达到 5 到 6 倍 SQL02 和 SQL03 保持了大量的 IO 操作 Smart SCAN, Query Offload 特性将极小的数据集返回给数据库节点的 CPU 进行操作, 使得 CPU 不必在大数据量的筛选处理中浪费 CPU 资源, 这也是为什么 SQL02 和 SQL03 的 CPU 负载并不高的原因

Exadata 用户性能混合 SQL 并行测试结果 吞吐量 (SQL 数量 / 分钟 ) 400 350 300 250 200 150 混合 SQL 并行吞吐量比较 BCC 系统 Exadata 系统 SQL02 和 SQL03 的差距更加明显, 分别是 132 倍和 42 倍左右, 大大高于相同 SQL 并行时的改进倍数, 这说明 Exadata 系统在复杂的 SQL 混合情况下, 如果对于大表的查询操作,Exadata 的性能优势提升更加明显 100 50 0 q01 q02 q03 q04 q05 q06 q07 查询语句 混合并行 CPU 利用率比较 CPU 利用率 97.6 100 62.55 50 0 BCC 系统 Exadata 系统 28

Exadata X2-2 灵活扩展 扩展性 单个机器可以扩展至 8 RACK 更多的扩展通过 InfiniBand switches 实现 可以扩展成千上万个存储服务器 Multi-petabyte databases 四分之一配 半配 满配

Exadata X2-2 高性能数据整合平台 EDW 供应链及自开发的生产 销售系统 (SybaseIQ) 实时数据迁移 ERP Peoplespft 人事系统 生产 销售 MDM 系统采用 (Oracle) SAP 财务 供应链 数据仓库 (BW) 现有的 Oracle SOA 数据集成 & 交换平台 CRM Warehouse Data Mart HR Exadata 整合的数据库网格, 动态按业务需要可扩展架构 2009 Oracle Corporation

Exadata X2-2 高性能数据整合优势 存储服务器完全共享 ERP CRM Warehouse Data Mart HR 存储性能最大化 不存在信息孤岛 数据集中整合 可以调控整体性能 控制资源分配 灵活扩展

Exadata X2-2 更节省成本与传统 SMP 对比 Exadata High End SMP High End Storage Array 更好地性能 6x Less Cost 3x Less Power 5x Less Space 32

Exadata X2-2 更节省成本与传统 SMP 对比 项目 Exadata 传统 SMP 系统 体系结构云架构传统 SMP 结构 初始投资可以少量节点, 投资少大架子, 少内涵, 投资高 扩容投资按需扩容, 以 PC 节点为单位, 廉价 按专用的 CPU 板 IO 板扩容, 困难, 昂贵 管理高度一致的管理众多的 SMP 型号, 不一致 资源共享方式 智能存储 云化服务器池的方式, 资源动态调度 大量的 CPU 在存储层, 提供计算能力如 EHCC, 存储索引可提高效率 10 倍 机房空间 2 架 4+8 架 有限程度共享, 不同系统难以共存 非智能存储, 智能垂直切割共享 总体成本 <50% 1( 美国的公开报价在 14.7M$ 左右, 中国报价?)

Exadata X2-2 总结提供全面解决方案的高性能一体机 适用于数据仓库应用的最好的数据库服务器 (Best for Data Warehousing) 基于 10x 压缩表的 Smart scan 基于内存数据的并行查询 整体上比 11.1 版本快 5 倍 适用于 OLTP 系统的最好的数据库服务器 (Best for OLTP) 唯一基于网格技术扩展的数据库 Smart flash cache 可达到 20x 快的 IOPS, 或者节省 20x 的磁盘 对于归档数据可达到 50x 的压缩率 安全, 容错 适用于混合负载的最好的数据库服务器 (Best for Consolidation) 唯一的支持所有负载类型的 database machine 多个数据库, 多个应用, 多个用户环境都能提供可预测的响应时间 34

Exadata 成功案例

问答

37

38