Slide 1

Size: px

Start display at page:

Download "Slide 1"

承戌毛
5 years ago
Views:

1 < 在此处插入图片 > Oracle DB 软件技术交流

2 < 在此处插入图片 > MAA 架构的产品技术实现和成功案例

3 最大可用性架构 (MAA) 一组集成的高可用最佳实践技术本身不是足够的 MAA 是达到高可用的一个蓝图关联 Oracle 的高可用能力和客户的需求把所有技术集成在一起操作最佳实践预防容错和恢复经测试的验证的和文档化数据库中间件应用存储集群网络 35 个人年的工作成果最大可用性 = 坚固的架构 + 最佳实践

4 Oracle 数据库最高可用性体系结构 Oracle 企业管理器真正应用集群 (RAC) Active Data Guard Data Recovery Advisor 自动存储管理 (ASM) 滚动升级 RMAN 和 Oracle 安全备份闪回技术和全面撤销

5 自动存储管理 (ASM) 低成本的存储故障防范措施存储池条带和镜像联机添加 / 删除自动修复自动负载均衡没有附加成本

6 整合数据库到 ASM 存储池中 Local Area Network RAC ASM ERPFIN ASM CRM ERP Database HR Database CRM Database FIN Database ASM HR 共享存储可供多个数据库使用 RAC 集群和单实例数据库好处 : 简化并集中管理快速的性能 ASM Disk Group

7 RMAN 快速恢复区自动磁盘到磁盘备份和恢复数据分层次存储备份策略 RMAN 内置功能 : 数据校验块修复压缩加密和恢复向导 (11g) 数据库区常规增量备份快速恢复区 (Flash_Recovery_Area) 归档到磁带

8 Oracle Secure Backup 安全备份基于磁带的综合备份和恢复 Oracle 数据库与 RMAN 集成 UNIX 文件系统数据 Windows Oracle 安全备份集中的磁带备份管理 Linux NAS 保护整个环境 Oracle 数据库文件应用程序文件内置 Oracle 集成最快的 Oracle 备份比同类产品快 25-40% 低成本备份方案磁带

9 Oracle 安全备份云模块云中的异地备份数据库文件本地磁盘备份 RMAN Oracle 安全备份云模块压缩加密 Amazon S3 Amazon S3 Oracle Secure Backup Cloud 接口 : 用于将数据库备份移到 Amazon 云支持 Oracle 9iR2 及更高版本比磁带更可靠, 恢复更快消除磁带备份和异地磁带管理开销为云备份而优化

10 RAC 和高可用性消除服务器单点故障 Oracle 的最高可用性体系结构不可或缺的一部分订单录入备用服务器供应链使应用程序可以屏蔽基础架构中的组件故障服务器故障

11 RAC 自动负载管理将服务故障切换到幸存节点订单录入供应链为订单录入重新分配备用服务器

12 WebLogic/RAC 快速连接故障切换支持多个连接缓存每个映射到服务的缓存的数据源跟踪每个连接的服务和实例当出现故障时清除连接跨可用实例分配新的工作请求 WebLogic RAC 缓存服务 1 实例 X 服务 2 实例 Y 服务 3 实例 Z JDBC ODP.NET OCI

13 RAC 最佳实践 1. 定义服务水平目标 2. 设置现实的期望值 3. 客户应用案例 4. 尽量简单化 5. 使用集群验证工具 6. 正确地配置集群互联 7. 镜像 OCR/Voting disk 8. 使用虚拟 IP 地址 9. 使用自动存储管理 (ASM) 10. 实施工作负载管理不仅仅是负载均衡 11. 测试测试测试 12. 实施变更控制 13. 定义支持流程 14. 性能监控 15. 软件维护 16. 避免错误的驱逐节点

14 1. 定义服务水平的目标没有目标就无所谓成功现实的和可度量的目标由业务目标驱动与业务目标相关联现有的服务水平通常作为基线高可用性服务水平最大的计划内 / 计划外停机时间 (RTO) 业务恢复点目标 RPO 性能 / 处理能力服务水平用户数响应时间某时间段完成的工作量 / 交易量等 Speed-up ( 响应时间 ) vs scale-up ( 吞吐量 ) 整合, 降低成本

15 2. 客户应用案例 RAC 在多节点上的扩展性超过 30 家可考察的客户运行 6 节点以上的 RAC 集群数据库 Amazon, J2 Global 16 节点 Mercado Libre 10 节点 Overstock 9 节点 Gas Natural, Thomson 8 节点大量的 4 节点以上的用户 RAC 的广泛适用性关键业务系统事务交易型 OLTP DW 型及混合型 TPC-H 基准测试 1, 3, 10TB 级别 :RAC 集群结果始终保持前 2 名数据量超过 1TB 的 DW 用户, 有超过 20 家可证明的用户使用 RAC 另外还有 20 家混合型业务系统使用 RAC 其中 8 家数据量 > 10TB

16 3. 使用集群验证工具 CVU (Cluster Verification Utility) -pre dbinst -pre dbcfg 配置 RAC 数据库安装 RAC -pre crsinst -pre cfs 安装 CRS -post crsinst 安装 OCFS ( OPT ) -post cfs 安装硬件网络和存储 -post hwos

17 4. 正确地配置集群互联 (Interconnect) 使用千兆以太网和 UDP 协议避免私有的低延迟协议在 OS 级绑定多块网卡作为虚拟集群互联故障切换和均衡负载设置最大支持的 UDP 协议的发送 / 接受缓冲区与平台相关通常 256K 使用交换机不支持直连电缆消除传输的问题错包 / 丢包可能导致严重的损耗使用集群互连来实现集群和 RAC 的通讯

18 5. 镜像 OCR/Voting disk Voting disk( 表决盘 ): 记录节点成员信息, 如包含哪些节点成员节点的添加删除信息记录, 主要是实现各节点的负载均衡 OCR( 注册盘 ): 记录节点成员的配置信息, 如 database ASM instance listener VIP 等 CRS 资源的配置信息, 可存储于裸设备或者群集文件系统上建议至少 3 重镜像 votingdisk split brain 问题需要通过磁盘少数服从多数的方式允许来确定继续对外服务的子集群备份 OCR/Vothingdisk OCR 自动备份 : 每 4 小时每天结束时每周结束时 OCR 手工备份 :ocrconfig Votingdisk: dd

19 6. 使用虚拟 IP 地址 (VIP) 用来减少客户连接时 TCP/IP 超时所造成的延误只需要选择公共服务用的网卡 (VIPCA) VIP 地址必须在 DNS 域名服务器中注册并被识别 VIP 用于 tnsnames 连接监听程序监听 VIP 用于客户端连接在多数平台上可以使用 ifconfig 命令来确认是否配置了 VIP 你应该看到一个新的 VIP 网卡, 例如 : eth0:1 如果把集群迁移到一个新的数据中心 ( 或子网络 ), 需要变更 IP 地址而 VIP 信息存储在 OCR 文件中, 修改和变更 VIP 需要额外的管理工作详细信息请参考 Metalink Note:

20 连接到服务服务 : ERP 首选 : 1,2 可用 : 3,4 服务 : GL 首选 : 1,2,3,4 服务 : CRM, 首选 : 3,4 可用 : 1,2 实例 : FINPROD1 实例 : FINPROD2 实例 : FINPROD3 实例 : FINPROD4 数据库服务 : FINPROD

21 Taobao 12-Nodes Linux DW System Architecture:

22 Taobao 12-Nodes Linux DW System Configuration: Database Servers: 12 database servers, HP DL580 G5. Each server has: RedHat Enterprise Linux 4 Update bit. 4 quad-core CPUs 32GB RAM Shared Storage: EMC Clarion CX3-80 Total 58TB RAID-5 EMC PowerPath for multipathing Fibre connected

23 Taobao 12-Nodes Linux DW System Configuration: ASM: The database files are stored on ASM. 64-bit. ASM version ASM home is combined with RDBMS home. ASM home per node. 2 diskgroups: dwdata - 29TB external redundancy dwdata1 29TB external redundancy Database: Oracle 10g Release 2 Real Applications Clusters, bit. Oracle Home per node, not shared.

24 Active Data Guard 11g 为提高服务质量而进行的投资实时查询实时查询持续的 redo 传输和应用快速增量备份生产数据库物理备用数据库快照测试将只读查询转移至物理备用数据库在物理备用数据库上执行快速增量备份可转换为 : 用于测试报告的快照备用数据库主数据始终受到保护

25 Oracle Data Guard 长距离上零数据损失 Data Guard 传输 redo, 减少网络消息传递 Data Guard: 同步重做传送同步磁盘镜像 Data Guard DR 平衡点 150 公里 300 公里 500+ 公里需足够远以避免区域性灾难需足够近以实现零数据损失

26 数据库闪回特性进行快速业务级恢复内置于数据库中的持续数据保护 (CDP) Select * from orders AS OF Midnight 31-Dec-2007 Flashback Query Flashback Tables Flashback Database Flashback Data Archive and Transaction 将纠正时间从几小时减少为几分钟易于使用适用于所有类型的用户错误

27 在线重定义表和索引可以在线完成所有索引更改 Online Create index, Rebuild index, Coalesce index 可以在线重新定义和组织表更改位置表类型分区列列类型可以在复制过程中对内容进行转换源表结果表复制表持续的查询和更新转换更新更新跟踪

28 在线重新配置按需扩展真正应用集群 (RAC) 在线添加和删除 RAC 服务器节点不需要转移数据自动存储管理 (ASM) 在线添加和移除 ASM 磁盘或阵列在更改后自动重新平衡存储在线升级 ASM 集群件在线升级 Oracle 集群件

29 MAA 成功案例 : Oracle RAC, DataGuard, RMAN, ASM, OEM

30 Minutes 成功案例 :United Parcel Service (UPS) 使因升级而导致的停机时间减少 93% 总应用程序停机时间 to to UPS 的任务关键航班操作和日程安排应用程序 : 世界上第 9 大航空公司为全球 800 个机场提供服务计划停机时间 SLA 低于 15 分钟 Oracle 数据库 11g 升级测试显示 : 传统的升级方法无法满足 UPS SLA Data Guard 滚动升级总应用程序停机时间低于 4 分钟升级备用数据库, 进行切换, 然后升级原始主数据库应用程序在切换期间之外的所有时间内均可用 Traditional Upgrade Rolling Upgrade Data Guard( 主数据库和备用数据库相距 800 英里 ) RMAN 闪回数据库 Streams # 23

31 总结 : 最高可用性体系结构 (MAA) 降低您的停机时间成本下一代体系结构基于行业标准的低成本模块化组件高效率地使用所有组件, 进行扩展以满足业务增长要求最佳数据保护和可用性透明容许大多数中断计划中和意外的防止数据因物理和逻辑故障而受损更易于实施和管理完全集成到 Oracle 产品中通过 Oracle 网格控制统一管理

32 OTN: MAA 最佳实践

33 < 在此处插入图片 > 11g New Feature

34 Oracle Database 11g 发布美国纽约时间 ,Oracle 宣布推出 Oracle Database 11g 相对于 3 年前发布的 10g,11g 新增了 400 多项功能开发工作量达到了 3.6 万人 / 月相当于 1000 名员工连续研发 3 年 Oracle Database 11gR2 于 2009 年 9 月发布 Oracle Database 12c 于 2013 年 7 月 OOW 发布

35 30 年技术持续更新 Oracle Built in Java VM Partitioning Support Built in Messaging Object Relational Support Multimedia Support Data Warehousing Optimizations Parallel Operations Distributed SQL & Transaction Support Cluster and MPP Support Multi-version Read Consistency Client/Server Support Platform Portability Commercial SQL Implementation Oracle 5 Oracle 6 Oracle 7 Oracle 8 Oracle 8i Exadata Storage Real Application Testing Advanced Compression Database Valut Automatic Storage Management Transparent Data Encryption Self Managing Database XML Database Oracle Data Guard Oracle 11g Real Application Clusters Flashback Query Virtual Private Database Oracle 9i Oracle 10g

36 Oracle 11g 价值取向最易于管理最高的服务质量最高的性能和扩展能力, 容错保护, 最大范围安全能力, 最好的信息管理最低化改变风险

37 Agenda Oracle Database 11g 新特性信息管理高可用性集群和存储技术数据库性能讨论和问答

38 Oracle 11g 信息管理 <Insert Picture Here>

39 Storage Backup Memory Apps/SQL Schema RAC Recovery Replication Testing 自动化和自我管理 R2 自适应自动调优综合建议顾问低消耗工具

40 11g 自动内存管理 O/S Memory SGA PGA O/S Memory SGA PGA 一个动态参数 MEMORY_TARGET 根据负载自动调整适用于 : Linux Windows Solaris HPUX AIX

41 Oracle Partitioning 10 年技术革新 Core functionality Oracle8 Oracle8i Oracle9i Oracle9i R2 Oracle 10g Oracle 10g R2 Range partitions, global range index Hash and composite range-hash partitioning List partitioning Composite range-list partitioning Global hash indexes 1M partitions per table Partitioning by reference Virtual column partitioning Automatic interval partitioning New composite partitioning: range-range, list-range, list-list, list-hash

42 ADDM for RAC 确定集群性能问题定位问题 : 全局资源,e.g. IO, global locks 高负载 SQL 语句, 热块等 Global cache interconnect traffic 网络延时实例响应时间不均衡 Database ADDM Self-diagnostic Engine Instance ADDM AWR Inst1 Instn

43 Data Recovery Advisor 减少宕机时间自动诊断数据故障, 提供修复选项, 由用户决定执行自动根据症状判断是何种故障 E.g. open failed 是因为 datafiles f045.dbf 和 f003.dbf 无法访问故障信息记录在 automatic diagnostic repository (ADR) 自动运行健康检查, 在用户发现之前就报告问题自动决定恢复策略归类故障类型显示可行的恢复选项显示每种选项可能的数据丢失用户可以选择自动执行何种恢复

44 Data Recovery Advisor OEM 界面

45 真实应用测试仅在 Oracle 数据库 11g 企业版提供的新的数据库选件包含两个新特性数据库重放 (DB Replay) SQL 性能分析器 (SPA) SQL 调优集 (STS) 功能是与真实应用测试选件和 EM 优化包共享的需要额外的包来提供高级功能 Diagnostic Pack for DB Replay Tuning Pack for SPA

46 真实应用测试价值降低测试成本提高测试质量商业利益更快的技术采用更低的风险 Test Change Remediate Deploy 实现敏捷商务的解决方案

47 DB REPLAY 数据库重放在测试环境中重建真实的生产数据库工作负载在将改变应用到生产系统之前, 鉴别分析和修复潜在的不稳定因数捕获生产周期中的工作负载捕获全部生产环境的工作负载 ( 真实负荷和并发信息 ) 把捕获的工作负载移到测试系统在测试环境中重放工作负载在测试系统中做你需要的改变使用生产的负荷和并发来重放工作负载尊重提交顺序分析和报表错误数据分歧性能分歧分析和报表

48 Real Application Testing Database Replay 在测试环境中重新创建实际生产数据库负载可以按照生产系统的时间环境在测试系统中重现工作负载在投入生产系统之前分析和解决问题 Client Client Client Production Test Middle Tier Replay DB Workload Oracle DB Capture DB Workload Test migration to RAC Storage Capture Process Replay Analysis & Reporting

49 Real Application Testing SQL Performance Analyzer (SPA) Production (10.2) Clients Mid-Tier Test (11.1) Storage Storage STS Capture SQL Transport SQL Execute SQL Pre-change Execute SQL Post-change Compare Perf

50 Oracle 11g 高可用性 <Insert Picture Here>

51 高可用性 Flashback Archive Data Guard ASM Streams RAC

52 Flashback data Archive - 数据历史和保留数据的保留和变化控制需要持续性增长遵守规范和法规遵从 Sarbanes-Oxley, HIPAA, Basel-II, Internal Audit 业务需要抽取某个临时参考角度的数据通过了解过去的行为, 有效管理客户关系维护和保留历史数据是非常困难的和昂贵的法律上的风险丢失信誉当前管理历史数据的方法效率通常很低

53 数据历史和保留 - 需求历史数据需要安全的管理和校对未授权的用户不应该访问历史数据历史数据只读现有的应用应易于访问无缝的访问应该不需要特殊接口或修改应用最小的性能开销最佳的存储方法历史数据卷易于增长可以到数百 TB 易于创建捕获历史数据和保留的策略

54 管理数据历史现有的方法应用或中间件级业务逻辑和归档策略相结合增加复杂性不能集中管理如果下面的数据被直接更新会造成数据完整性问题数据库级可以使用触发器 (Trigger) 良好的性能和维护开销外部或第三方挖掘 redo logs 历史存放在单独的数据库不能无缝查询 OLTP 和历史数据上面的方法都不能满足用户所有的需求用户因此被迫妥协

55 Flashback 修复人为错误操作就像在数据库中加入时间维度 Select * from orders AS OF Midnight 31-Dec-2004 Flashback Query Flashback Tables Flashback Database Flashback Data Archive and Transaction Total Recall

56 Flashback Data Archive 如何工作? 历史数据的主要来源是 undo data 历史数据存放在 archive 内自动生成的历史表事务和它的 undo records 被标记 undo records 不会被回收直至历史数据被归档新的后台进程 (fbda) 异步捕获历史数据缺省捕获间隔是 5 minutes 捕获间隔可以基于系统情况自我调整进程尽可能从 buffer cache 中读取 undo data, 以达到更好的性能 INSERTs 不产生历史记录

57 创建闪回数据归档和实现历史追踪 1. 创建表空间 ( 自动段空间管理是必须的 ) 2. 创建一个 flashback data archive 设置保留期 CREATE FLASHBACK ARCHIVE fda1 TABLESPACE tbs1 RETENTION 5 YEAR; # 保留 5 年 3. 在希望维护的表上实现归档 ALTER TABLE EMPLOYEES FLASHBACK ARCHIVE fda1;

58 管理闪回数据归档 SYS_FBA_HIST_* - 内部历史表被跟踪的表的复本额外增加了 timestamp 字段为更快的性能使用分区技术不允许在内部分区做修改压缩操作减少对磁盘空间的需求没有预建索引以后的版本中会支持从被跟踪的表复制过来的主键索引 (TBD) 应用不需要直接访问内部表使用 AS OF 无缝的查询历史记录当闪回数据归档达到容量的 90%, 产生报警信息超过指定的保留期后自动清除历史数据支持管理员随时清除 ( 特权操作 )

59 Active Data Guard Real-time 实时查询 / 报表 Queries 持续传输和应用 Redo Primary Database Physical Standby Database physical standby 在 redo apply 同时, 支持只读查询 primary / standby 均支持 RAC 查询结果在 transaction 级别一致对广大 physical standby 用户立即可以带来好处 DR + 实时查询业界独一无二的技术无闲置资源支持所有的数据类型支持多达 30 个 Active Standby 数据库 (11gR2)

60 Data Guard 性能改善更快的 Failover Fast-Start Failover, 秒级更快的 Redo 传输最大性能模式下优化的 async 传输 redo 压缩传输 : log_archive_dest_n 新增 compression 参数更快的 Redo Apply 并行 media recovery 更快的 SQL Apply 内部优化更快的 physical standby 增量备份支持 block change tracking

61 Oracle 数据库 11gR2 Data Guard 增强 Active Data Guard 服务质量可在 0 到 n 秒内配置备用查询 SLA 在备用数据库上设置最大允许数据延迟如果超过最大值, 则数据库向应用程序返回错误应用程序可以将查询重定向到主数据库自动块修复使用备用数据库中的完好版本检测和修复受损块 Data Guard 网络利用率针对带宽有限的 WAN 传输 redo 压缩内容不仅仅用于在传播中断之后 resolving redo gaps.

62 Oracle 11gR2 集群和存储管理 <Insert Picture Here>

63 客户数 RAC 是主流 Gartner Group 15,000 12,000 9,000 6,000 3,000 0 FY02 FY03 FY04 FY05 FY06 FY07 FY08 FY09 (Q2)

64 RAC 新特性 Single node RAC ( 单节点 RAC) 1 自动监测失效的实例并且自动 Restart 2 SRVCTL 管理升级, 可以管理单节点 RAC, 监听程序, ASM 实例 3 集群时间同步服务 4 即插即用的网格服务, 提供 scan IP 服务, 无需添加节点的时候从新修改 /etc/hosts 5 自动存储管理配置助手 (ASMCA) 用于管理 ASM 磁盘组和 ASM 实例

65 Oracle Grid Infrastructure Oracle Grid Infrastructure (OGI) 包括 : Oracle Clusterware Oracle Automatic Storage Management (ASM) Oracle ASM Cluster File System (ACFS) OGI 提供的架构软件 ( 如存储管理集群软件 ), 通常由系统管理员来管理

66 Oracle Clusterware 11gR2 Oracle Clusterware 是 Oracle Grid Infrastructure (OGI) 的一个主要部分 Oracle Clusterware 可以用来保护 RAC 数据库和其他应用它提供了 Oracle ACFS ( 可选 ) 的基础所有数据可以由 ASM 来管理你不再需要任何其他第三方的集群软件 Node 1 Node 2 Node 3 Node 4 Oracle RAC Protected App A Oracle ASM / ACFS Oracle Clusterware Protected App B Consolidated Pool of Storage with Automatic Storage Management (ASM)

67 ASM Cluster File System Oracle 数据库 11gR2 ASM 支持所有文件类型 SOA IMDB OC4J APACHE Siebel Web DW ODS PSFT EBS 文件系统二进制文件 OCR 和表决文件 ASM 现在支持所有类型的文件数据库文件共享集群件文件 (OCR/VotingDisk) 文件系统文件 ASM 集群文件系统 (ACFS) 第三方文件系统 RAC One 数据库数据文件

68 ASM Cluster File System Oracle 数据库 11gR2 ASM 集群文件系统 (ACFS) SOA IMDB OC4J APACHE Siebel Web DW ODS PSFT EBS RAC One 文件系统二进制文件 OCR 和表决文件数据库数据文件通常目的的可扩展文件系统单节点和集群支持多 OS 平台 ( 初始版本在 Linux and Windows 发布 ) 数据存储在 ASM 中继承所有 ASM 可管理性优势优化的磁盘布局联机添加 / 删除 / 重新平衡磁盘集成的镜像只读快照

69 Oracle 数据库 11gR2 其他 ASM 增强改善的管理 ASM 安装和配置助手 (ASMCA) 功能完备的 ASMCMD ASM 文件访问控制 ASM 磁盘组重命名数据文件到磁盘映射可调优的性能智能数据放置经常访问的数据不经常访问的数据

70 快速 Rebalance 受限模式的磁盘组加载 (mount) 磁盘组能够仅能被单实例加载数据库客户端或其他 ASM 实例不能访问 Rebalance 操作执行, 没有锁的开销

71 Streams Overview 源数据库目标数据库传播 Redo Logs 捕获应用 1 所有的数据库都是活动的和可更新的自动的冲突检测和可选的解决方案支持数据转换灵活的配置 n-way, hub & spoke, 数据库平台 / 发布 / 方案结构可能不同在应用更新冲突的地方提供 HA, 能够避免或管理应用 2 Transparent Gateway Non-Oracle Database

72 Oracle 数据库 11g 中 Streams 的增强额外的数据类型支持同步捕获管理性和诊断能力提高性能提高 Streams AQ 增强

73 Oracle 数据库性能 <Insert Picture Here>

74 Advanced Compression Oracle Database 11g 提供综合压缩能力结构化 / 关系型数据压缩非结构化数据压缩备份数据压缩网络传输压缩支持大批量数据装载和 DML (INSERT,UPDATE,DELETE) 典型压缩比 2x to 3x 减少资源需求和成本存储网络带宽内存使用 Redo logs Standby Backups

75 OLTP 表压缩 Oracle Database 11g 将压缩扩展到 OLTP 支持 DML 操作 (INSERT, UPDATE, DELETE) 新算法大大降低写操作的性能损耗批量压缩, 对大多数 OLTP 交易无影响不影响读操作甚至性能可能改善 : 节约 IO, 提高内存效率

76 使用 OLTP 表压缩 database compatibility 至少 11.1 扩展 COMPRESS 语法 COMPRESS [FOR {ALL DIRECT_LOAD} OPERATIONS] DIRECT_LOAD (DEFAULT) 指 10g 及以下版本的 Bulk load 操作 ALL OLTP + Direct loads 新建表时制定压缩 CREATE TABLE t1 COMPRESS FOR ALL OPERATIONS 现有表只针对 direct load 打开压缩 ALTER TABLE t2 COMPRESS 只压缩新数据, 不影响原有数据

77 Columnar Compression 列 (column) 数据相似性比行数据高, 按列压缩获得更高压缩比 (10X~15X, 类似 Sybase IQ) CPU 越来越便宜, 我们倾向于用 CPU 省 I/O 省 I/O 是主要的, 省空间是次要的, 因为存储越来越便宜对应用透明 IT 趋势不支持普通 Insert, Update, 适合保存长期不变数据 Table Compression Method Compression Ratio CPU Overhead Applications Basic table compression High Minimal DSS OLTP table compression High Minimal OLTP, DSS Hybrid Columnar Compression for query Higher Higher DSS Hybrid Columnar Compression for archive Highest Highest Archiving

78 服务器端查询结果高速缓存 Result Cache 把复杂查询的结果缓存到 cache 中复杂查询对服务器压力非常大把复杂查询的结果缓存到 cache 中, 类似查询不需要重复查询操作大大提高常用复杂查询的效率, 并降低对服务器的压力 T1 join join GBY Q2: Q1: Use build it query transparently cache GBY cache join join T4 join T2 T3 T5 T6

79 查询结果高速缓存的使用 Result Cache 设置 RESULT_CACHE_MODEL 参数 MANUAL: 使用 result_cache 的 hint FORCE: 强制使用

80 In-Memory Database Cache 选件 Enables the Real-Time Enterprise 缓存 Oracle 中的部分数据 Replication 标准的 SQL 访问, 快速的反应时间 Application In-Memory Database Cache Application In-Memory Database Cache Application In-Memory Database Cache TimesTen 和 Oracle 之间数据的自动同步高可用性确保在任何情况下无事务丢失纵向和横向的扩展

81 Response Time in Microseconds 有效提升反应时间 Database Cache 对应用的加速 Oracle 12,000 10,000 Oracle + In-Memory Database Cache ,000 6, ,000 2,000 0 Delete Call Fwd Select Access Data Select Base Data Select New Dest Insert Call Fwd Update Subscriber Update Location

82 Other New Features In-Memory Parallel Query 利用 RAC 所有节点的 cache, 尽量在内存中完成并行操作, 减少 I/O Cluster Time Service 同步 RAC node 之间时间, 代替 NTP 以前版本 RAC 安装手册中没有提到 NTP, 造成很多 RAC node 因为时间不同步而不停重启 OUI, DBCA, DBUA, NETCA Support for Removing Oracle RAC Installations. 以前卸载 RAC 需要很多命令行操作 Grid Plug and Play (GPnP) 可以做到 node 开机即可自动加入 RAC, 关机自动退出 RAC, 减少手工误操作 Oracle Restart 按顺序自动启动 DB, ASM, Listener 等组件, 一旦发现这些组件关闭而且不是由 SRVCTL 或 SQL*Plus 关闭的, 就立即重启这些组件

83 Other New Features File Watcher 当文件到达本机或远程机器时触发 job, 适用于自动上传数据等场合替代原来的轮询方法 External tables can be preprocessed by user-supplied preprocessor programs 用例, 向 external table 自动加载压缩的文件之前, 先自动调用 unzip ( 即 preprocessor programs) 解压缩 Data Pump Legacy Mode Data Pump 兼容 exp/imp 命令格式, exp/imp 即将退出历史舞台 Streams XStream API (Java & OCI) XStream 是 Streams 和非 Oracle DB 交换数据的新方法, 以前的方法有 1)Oracle DB Gateway, 2)JMS, 3) 直接向 Oracle queue 插入消息

84 Other New Features password: 大小写敏感 / 集成的密码复杂性校验, 有效的登陆次数, 过期时间等 ( 默认 enable profile) default audit: 缺省启用对系统的权限的审计可以导出, 归档等 dbca 建库的时候, 会选择是否保留以前的特性还是用新特性 TDE: 支持对表空间透明数据加密 Encryption for lob columns

85 Other New Features IPv6 Support 以 JDBC 举例 (HOST=[FEDC:BA98:7654:3210:FEDC:BA98:7654:3210]) (PORT=5521)) CONNECT_DATA=(SERVICE_NAME=boston.us.oracle.com))) Segment Creation on Demand Table 和 index 没有插入数据之前不分配空间主要便于 ISV 在他们的产品中打包 Oracle DB DICOM 医疗影像数据支持进一步增强

86 一些升级需要考虑的事项 <Insert Picture Here>

87 11g 中部分新的后台进程进程名 DBRM 描述负责数据库资源计划以及其他资源管理工作 DIA0 DIAG 负责诊断的转储文件维护以及 Oradebug 命令负责数据库 hang 机以及死锁问题的处理 PSP0 负责 Oracle 进程的产生. SMC0 负责空间管理协调 VKTM change support wall-clock time for per second update, 类似计时器

89 Oracle 数据库 11g v1 升级路径支持直接升级到 11g 的版本 : 或更高, 或更高, 或更高. 如果你不是上述版本, 你需要进行至少两次升级例如 : > > > >11.1

90 11gR2 升级路径

91 选择升级方法数据库升级助手 (DBUA) 自动化的图形界面工具在升级过程和配置数据库过程中提供交互式步骤, 让用户升级到数据库 11g 手动升级用 SQL*Plus 完成必要的准备工作, 运行升级脚本并分析升级结果 Export-Import 利用 Data Pump 或传统的 Export/Import CREATE TABLE AS SQL 语句

92 Oracle 数据库 11g 安装的改变新增加的产品安装 SQL Developer 将 APEX 从 CD 移到主 CD Warehouse Builder ( 服务器端的部分 ) Oracle Configuration Management (OCM) 新的透明网关 (Transparent Gateways) 去掉的部分产品和特性 : OEM Java Console Oracle Data Mining Scoring Engine Oracle Workflow isql*plus

93 日志文件的变化 Automatic Diagnostic Repository $ORACLE_BASE/diag alert.log xml format $ORACLE_BASE/diag/rdbms/orcl/orcl/alert/log.xml adrci> show alert -tail

94 内存参数变化新的内存参数 MEMORY_MAX_TARGE,MEMORY_TARGET MEMORY_TARGET 是数据库动态使用的内存数, 包括 SGA 以及 PGA 的总和 MEMORY_MAX_TARGE 是 SGA 和 PGA 最大值

用户数据管理问题 Real World Solutions 现代企业网格 Real Application Clusters Management packs TimesTen In-Memory Database 信息生命周期管理 Partitioning Advanced Compression

95 用户数据管理问题 Real World Solutions 现代企业网格 Real Application Clusters Management packs TimesTen In-Memory Database 信息生命周期管理 Partitioning Advanced Compression 数据仓库 Oracle Information Appliances OLAP, Mining, Warehouse Builder 数据管理, 风险控制和合规管理 Security Options Total Recall 降低变革所带来的时间和成本风险 Real Application Testing

96 < 在此处插入图片 > 12C New Feature

97 12C New Features 1. Even better PL/SQL from SQL 直接在 SQL 中嵌入 PL/SQL 对象并运行, 猜测可能优化了 SQL engine 和 PL/SQL engine 2 种的代码引擎之间的交互, 以获得比之前传统的 SQL 调用函数更少的上下文切换利用 RAC 所有节点的 cache, 尽量在内存中完成并行操作, 减少 I/O

98 2. Improved Defaults 增强了 DEFAULT, default 目前可以直接指代 sequence 了, 同时增强了 default 充当 identity 的能力 Default to a sequence Default when null inserted Identity Type Metadata-only Defaults for NULL columns 3. Increased Size Limit for VARCHAR2, NVARCHAR2, and RAW Data Types Varchar2, NVarchar2 and Raw 这些数据类型的大小上限可以扩展到 32k, 和其在 PL/SQL 中的变量类型一样了, 当然过长可能导致像 LOB 那样 OUT OF LINE 存放

99 4. Easy Top-N and pagination queries, 更易用的 Top-N 和页码查询提供了类似 MySQL 中 limit 的语法,Row Limiting Clause FETCH FIRST 5 ROWS ONLY; == 仅 fetch 前 5 行 FETCH NEXT 0.01 PERCENT ROWS ONLY; 仅 fetch 0.0.1% 的行数 5. Partitioning Improvements 分区特性增强, 包括异步维护全局索引的 drop 和 truncate 分区操作, 以及 Interval + Reference 分区方式 6. Adaptive Execution Plans 自适应执行计划, 该特性可以谈得上神奇, 最终的执行计划将基于执行中获得的行, 列倾斜造成的问题将被克服

100 7. Enhanced Statistics 统计信息增强, 加入了第 11 级的动态采样, 对于并行查询自动打开 11 级的动态采样, 混合直方图 8. Temporary UNDO 临时 UNDO 撤销, 临时表的 UNDO 数据可以放到 TEMP 中, 有助于减少 UNDO 表空间中的 undo 数据, 进一步减少 redo 的产生, 从而使得 Active Data Guard 中的临时表允许做 DML 设置方法为 :ALTER SYSTEM/SESSION SET TEMP_UNDO_ENABLED=true false 9. Data Optimization 数据优化包括自动压缩和分层

101 10.Application Continuity 应用持续性增强, 事务卫士 (Transaction Guard) 保证了解事务结果 11.Pluggable Databases 可插入数据库 : 一个容器数据库 (container database) 中可以存放多个 Pluggable Databases 对于外部应用程序和开发者来说 Pluggable Databases 看上去就是一个普通的版本 12.1 之前的数据库用户连接到 Pluggable Databases 时看到的是一个单一数据库和从前一样新的管理模式数据库管理员 DBA 可以连接到 Pluggable Database 并仅仅管理该数据库超级 DBA 可以连接到容器数据库并如同管理单系统镜像那样管理 RAC 中的每一个实例均打开容器数据库并可以选择打开哪些 Pluggable Database

102 内建的多分租 (Multi-tenancy) 每个 Pluggable Database 均独立于其他 Pluggable Database Resource Manager 特性被扩展到 Pluggable Database 中 Pluggable Databases 特性可以带来的好处 : 加速重新部署现有的数据库到新的平台的速度加速现有数据库打补丁和升级的速度从原有的 DBA 的职责中分离部分责任到应用管理员集中式管理多个数据库提升 RAC 的扩展性和故障隔离与 Oracle SQL Developer 和 Oracle Enterprise Manager 高度融合

103 Q U E S T I O N S A N S W E R S

104

Slide 1

Oracle Database 11g 新特性 (11gR1 & 11gR2) 杨红梅 Oracle Sales Consultant Oracle Database 11g 发布美国纽约时间 2007.7.11,Oracle 宣布推出 Oracle Database 11g 相对于 3 年前发布的 10g,11g 新增了 400 多项功能开发工作量达到了