目录 1 不断开发工具以管理大数据 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 大数据技术的行业生态系统 在关键组件中实现平衡 计算资源的进步 存储技术的进步 网络连接的进步...
|
|
|
- 盐彼 锺
- 5 years ago
- Views:
Transcription
1 白皮书英特尔 固态硬盘英特尔 以太网融合网络适配器英特尔 Hadoop* 发行版软件 应用大数据技术获得近实时分析巨大成效 1 平衡的基础设施使工作负载完成时间从 4 小时缩短为 7 如今, 基于广泛可用的计算 存储和网络组件的改进, 商业 学术和政府组织有效处理大数据的能力正快速提高 英特尔利用一个优化且平衡的 Hadoop* 集群, 展示了可以得到的显著成效 这一集群由最新的 本地固态硬盘存储和万兆位英特尔 以太网融合网络适配器组成 事实上, 在英特尔所开展的多项测试中, 通过升级这些组件和使用英特尔 Hadoop* 发行版软件 ( 英特尔 Hadoop 发行版 ), 可将使用 TeraSort 基准工作负载排序 1 TB 数据所需的时间从约四小时缩短至约七 1,2 这些结果预示着我们向近实时数据分析的宏伟目标又迈近了一大步, 而且所需的成本大幅低于此前使用专有硬件和软件实施的成本 大幅的成本节省和效率提升对于发挥出大数据技术的全部潜力至关重要 本白皮书介绍了这些结果的实现方法, 以作为 IT 决策者和其他人员在考虑投资方向时的指导, 进而从 Hadoop* 环境中获得最佳成效 同时文章还介绍了经过预先优化的交钥匙型英特尔 Hadoop 发行版软件具备的部分优势 各组织可通过使用此处所列的指导原则, 在满足其预算要求的前提下, 实现特定工作负载和环境的最佳性能 通过平衡 Hadoop* 集群内的计算 存储和网络资源, 组织将可以发挥出最新英特尔 处理器 固态硬盘 万兆位英特尔 以太网融合网络适配器和英特尔 Hadoop* 发行版软件的全部优势 通过利用这些组件构建一个平衡的基础设施, 英特尔将完成 TeraSort 基准测试工作负载所需的时间从约四个小时缩短至约七, 降幅约为 97% 1 大数据技术可实现的此类结果为低成本 近实时的数据分析铺平了道路, 将能够帮助企业近乎实时地响应瞬息万变的市场需求, 并从其资产中获得更多价值 1
2 目录 1 不断开发工具以管理大数据 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 大数据技术的行业生态系统 在关键组件中实现平衡 计算资源的进步 存储技术的进步 网络连接的进步 业经优化的英特尔 Hadoop 发行版 万兆位以太网和其他因素在加速 Hadoop 工作流中所扮演的角色 优化导入阶段 优化处理阶段 : 从四小时缩短到七的历程 优化导出阶段 研究环境简述 调试和优化注意事项 网络连接 操作系统和驱动程序优化 Hadoop 配置参数 进一步的增强 结论 不断开发工具以管理大数据当前, 无论是何种类型和规模的企业, 都无一例外地拥有着庞大的数据库 处理 转换 并从数据中 ( 通常为非结构化数据 ) 获取优势的能力正快速成为一种标准要求, 同时能够进行此类工作的工具和技术也日益普遍 诸如 Hadoop 等框架的广泛应用, 而且越来越多的 IT 部门开始逐渐构建其自有的计算环境来处理大数据 1.1 Hadoop* 简介 : 支持从大数据中获得出色价值的可靠框架 Hadoop 是一个使用 Java* 编写 基于谷歌的 MapReduce* 和分布式文件系统工作的开源软件框架 它用于支持分布式应用程序, 能够使用服务器集群分析超大型数据, 然后将其转换为更易于这些应用程序使用的形式 Hadoop 用于部署在常见的通用型基础设施之中 该框架擅长处理的任务包括对大型数据集进行索引和排序 数据挖掘 日志分析和图像处理等 Hadoop 框架的关键组件包括 : Hadoop 分布式文件系统 (HDFS*) 能够通过将数据分解为数据块, 并将数据块散布于大量工作节点中, 实现容错和高性能 Hadoop 的 MapReduce 引擎 能够从应用程序接收作业, 并将这些作业分解成多项任务, 以分配给多个工作节点 1.2 大数据技术的行业生态系统一个大型解决方案生态系统 (Hadoop 仅是其中一部分 ) 的设计旨在最大限度地挖掘大数据的价值 该生态系统的另一关键组件是 NoSQL( 不仅仅是 SQL ) 数据库 NoSQL 是更为常见的 基于表格的关系型数据库管理系统 (RDBMS) 的一种替代 ( 或补充 ) 技术 与 RDBMS 不同,NoSQL 数据库并不主要以表格为基础 对依赖于数据元素间关系的功能而言, 这一特征尽管在某种程度上让 NoSQL 的效率低于 RDBMS, 但是 NoSQL 能够简化大量关系并非特别重要的数据的处理过程 尽管结构化数据也可存储于 NoSQL 数据库中, 但是这些系统更适于处理非结构化数据, 并能够在检索和附加大量的此类数据时实现出色的可扩展性和性能 随着大数据技术的不断发展和其在数据中心所起到的重要作用日益突显, 在商业与非商业单位共同努力的推动下, 诸如 Hadoop 等开源解决方案的重要性和开发完善程度日渐提高 Hadoop 生态系统中的高级 NoSQL 数据库包括 Cassandra* HBase* 和 MongoDB* 除了 Hadoop 以外, 其他的大数据技术还包括简单易用的开源 Disco Project*( 开发人员使用 Python* 脚本编写作业 ), 以及针对于商业智能和相关使用模式的企业级环境 SAP HANA* 实时数据平台等 所有这些行业创新正在针对基于英特尔 至强 处理器的平台进行紧锣密鼓的开发和优化工作 由于大数据广泛存在于商业 研究和学术环境中, 并且其规模在迅速扩张, 因此本白皮书以 Hadoop 作为示例, 阐述了如何处理大数据的系统 2
3 2 在关键组件中实现平衡 尽管 Hadoop 集群通常由通用的主流组件 构建而成, 但这并未降低为获得最大优势 而选择和组合这些组件的难度 首要注意 事项便是在计算 存储和网络资源环境中 达到平衡 ( 如图 1 所示 ) 在转到有关确定集群组件组合的具体战略 之前, 首先需要考虑每个类别中常用技术 的状态 ( 如表 1 所示 ) 在确定了需要的 资源类型后, 探讨将专注于 Hadoop 集群 如何能够充分利用这些资源, 介绍万兆位 以太网 (10GbE) 连接在交付各项优势中 所扮演的角色 2.1 计算资源的进步相比上一代平台, E5 家族所采用的平台架构能够更好地利用解决方案堆栈中的资源 例如, 全新架构将每个插槽中的内核数量从六个 (12 个硬件线程 ) 增加到了八个 (16 个硬件线程 ), 更高的内核数量可支持达到更高的并行计算水平, 而后者对于数据密集型 Hadoop 工作负载有着重要意义 英特尔 数据直接 I/O 技术 ( 英特尔 DDIO) 是英特尔至强处理器 E5 家族中的一项新功能, 可支持英特尔 以太网控制器和适配器直接与处理器高速缓存通信, 而不是与主内存通信, 从而能够帮助提高带宽和降低延迟 这些优势对于处理大型数据集将大有裨益 表 1. 升级 Hadoop* 解决方案堆栈, 实现平衡的高性能基础设施 计算存储网络 优异 前几代英特尔 至强 处理器 传统旋转式硬盘 千兆位英特尔 以太网服务器适配器 出色 E5 家族 分层存储 ( 传统硬盘和固态硬盘 ) 万兆位英特尔 以太网融合网络适配器 最佳 英特尔至强处理器 E5 家族 全部为固态硬盘 万兆位英特尔以太网融合网络适配器 3
4 2.2 存储技术的进步固态硬盘 (SSD) 代表了面向主流客户端和服务器的持久性存储的一个重要转变 它消除了诸如旋转碟片和读 / 写磁头等传统机械硬盘 (HDD) 中的电子机械部件, 并因此大幅缩短了数据访问时间和延迟 本白皮书所描述的测试使用了英特尔 固态硬盘 ( 英特尔 SSD)520 系列, 该系列拥有广泛的容量选择, 具备内建的数据保护功能, 并相比传统机械硬盘实现了大幅的性能改进 3 英特尔固态硬盘 520 系列采用了英特尔 25 纳米 NAND 闪存, 可提供最高每秒 50,000 次每秒输入 / 输出操作 (IOPS) 4 的随机读取性能和多至每秒 550 兆字节 (MB/ 秒 ) 5 的顺序读取性能 作为传统机械硬盘和固态硬盘之间的过渡步骤, 各大组织正越来越多地在同一服务器上配置这两类硬盘 在本测试中, 固态硬盘作为高速数据缓存设备, 可减少从传统机械硬盘中读取数据和向其写入数据的需求, 进而提高整体性能 2.3 网络连接的进步数年来, 网络连接的线速一直都在不断提高 与此同时这一领域也涌现出了许多补充性技术, 为用户提供了更高的价值, 如更高的吞吐量 改进的成本效益和增强的灵活性等 而这一研究的主要考虑因素为从千兆位以太网 (1GbE) 向万兆位 (10GbE) 过渡 英特尔 以太网控制器和融合网络适配器 对于降低万兆位以太网网络连接的成本发 挥着至关重要的作用 反过来, 虚拟化和 带宽密集型应用程序 ( 如数据分析和视频 点播 ) 等的广泛部署, 提高了万兆位以 太网网络的采用率, 并形成了一个良性循 环, 让成本效益和主流网络采用率能够 相辅相成地提高 英特尔以太网软件驱 动程序已针对大数据实施进行了优化, 例如, 它们能够最大限度地减少 I/O 对 Hadoop 数据处理的干扰 英特尔 以太网融合网络适配器 X540 是 一款低成本 低功率的 10GBASE-T 解 决方案, 可向后兼容使用第 6 类和第 6A 类铜缆布线的现有 1000BASE-T 网络 英特尔 以太网控制器 X540 通过将 MAC 和 PHY 集成在一个单芯片解决方案中, 可同时降低初始成本和功率要求 英特尔 以太网融合网络适配器 X520 可使用铜缆 或光纤网络连接, 为万兆位以太网网络提 供 SFP+ 连接 2.4 业经优化的英特尔 Hadoop 发行版 英特尔 Hadoop 发行版可帮助简化和改善 Hadoop 在英特尔 架构基础设施上的部 署 它是唯一一个专为支持在 Hadoop 上 进行最广泛的数据分析而构建的发行版, 同时也是首个具备硬件增强的性能和安全 功能的产品 该解决方案包含 Hadoop 框架 MapReduce Hadoop 分布式文 件系统 (HDFS*) 以及可支持批量处理 和近实时分析的其他相关组件, 如 Hive* 数据仓库基础设施 Pig* 数据流语言和 HBase 数据库等 英特尔 Hadoop 发行 版中所包含的组件显示于图 2 中 4
5 英特尔 Hadoop 发行版基于实际经验, 为用户提供了调试和优化指导原则, 以及向导和其他自动化部署工具 Intel Manager for Hadoop* 软件提供了在 Hadoop 集群节点上自动安装的功能, 并通过功能强大且直观的仪表盘提供了实时管理 监控和诊断功能 ( 如图 3 所示 ) 英特尔 Hadoop 发行版还为客户提供了大量培训资源, 以及系统设计 部署 定制和调试帮助 此外, 这一发行版还享有 24x7 全天候企业支持, 可全面满足企业和用户的需求, 确保他们能够通过保持集群长时间稳定正常运行取得成功 图 3. 帮助简化安装和配置, 并缩短部署时间的仪表盘 3 万兆位以太网和其他因素在加速 Hadoop 工作流中所扮演的角色大数据管理能力的提高不断推动我们向在主流环境中实现实时分析的目标迈进 我们正通过使用常用的数据中心硬件和软件, 改善以前需要数小时, 甚至数天才能从源数据中生成价值的解决方案 在这一环境中改善结果需要考虑整个工作流, 其中包括数据进入系统的点 处理数据的机制以及与导出处理后的数据至系统相关的任务 在此基础之上,Hadoop 工作流可划分为三个阶段 : 1. 导入 使用 Hadoop 从大型数据集中生成答案的第一步, 是将应用程序的数据导入 HDFS 数据可通过流式或批处理的方式导入 2. 处理 将数据导入 HDFS 后,Hadoop 将处理该数据, 以从中获取价值 MapReduce 引擎通过其 JobTracker 节点接收来自应用程序的作业, 该节点将工作分解成多个小型任务, 然后指派给 TaskTracker 节点 典型的操作包括排序 搜索或分析 TeraSort 是一个基于数据排序工作负载的标准 Hadoop 性能指标评测程序 1 在我们的测试环境中, 我们将使用 TeraGen 来实际生成数据集 3. 导出 当处理阶段中针对数据的操作结 束后, 应用程序即可获得结果 5
6 尽管这三个阶段的相关需求因所执行工作的性质而差异较大, 但此模型仍表明了万兆位以太网在 Hadoop 工作流中的重要价值 举个简单的例子, 包含大规模数据压缩的工作负载在导入数据时的工作负载负担, 可能会大于将数据导出为压缩格式的负担 同样, 尽管各种任务处理的数据量可能相似, 但某些任务使用的计算资源将会高于其他任务 调试和优化指导原则, 以及英特尔 Hadoop 发行版的相关支持服务将能够帮助发现可满足特定需求的最佳方法 3.1 优化导入阶段 3.2 优化处理阶段 : 从四小时缩短到七的历程英特尔测试使用了 1 TB TeraSort 工作负载, 通过 1 个命名节点分布于 10 个数据节点上 为了评测升级各项资源的优势, 我们收集了各项组件在升级前后的结果, 包括从 5600 系列升级到 E 产品家族, 从传统硬盘升级至固态硬盘, 以及从千兆位以太网升级至万兆位以太网 升级前 这些硬件升级将约四个小时的处理时间缩短为约 12 实施英特尔 Hadoop 发行版进一步将处理时间缩短为约七 总体而言, 性能提高将处理阶段所需的时间减少了近 97% 测试的首个硬件变化是从英特尔 至强 处理器 X5690 升级至 E 如图 4 所示, 处理器升级将排序 1 TB 数据集所需的时间缩短了约一半, 从 250 缩短为 升级后 本模型中的导入阶段只是简单地将数据输入 HDFS 进行处理 该过程始将始终最少进行一次, 在某些情况下, 特别是将 MapReduce 作为服务出售的情况下, 可能需要进行多次导入 该阶段和 Hadoop Hadoop* 千兆位英特尔 以太网服务器适配器 Hadoop 千兆位英特尔 以太网服务器适配器 处理器升级 : 缩短约 50% 的时间 复制工作将会在网络和存储 I/O 方面, 对系统产生重大网络性能需求 传统机械硬盘 传统机械硬盘 当将数据导入系统时, 万兆位以太网网络连接对于满足这些需求极为重要 将网络从千兆位以太网迁移至万兆位以太网后, 包含并行写入的导入操作在使用传统机械硬盘时性能最多可提高 4 倍, 而使用固态硬盘时最多可提高 6 倍 1 固态硬盘性能提高程度较高的原因在于其非易失性存储器可加快对存储子系统的写入速度 5600 系列 250 E 产品家族 125 图 4. 处理器升级到 E 产品家族 : 处理阶段速度提高了约 50% 1 6
7 在处理这一庞大数据集时, 快速访问非顺序数据的能力是一个关键的性能注意事项 因此, 为了减少任意现有的存储瓶颈, 下一个测试的升级是将传统机械硬盘替换成固态硬盘, 以利用其大幅提高的随机读取次数的优势 基于之前通过处理器升级获得的性能改进, 从传统机械硬盘升级为英特尔固态硬盘 520 系列后, 完成工作负载所需的时间从约 125 缩短为约 23, 降幅接近 80%( 如图 5 所示 ) 7 Hadoop* 传统机械硬盘 升级前 英特尔 以太网千兆位服务器适配器 E 产品家族 125 Hadoop 升级后 英特尔 以太网千兆位服务器适配器 英特尔固态硬盘 520 系列 E 产品家族 升级到固态硬盘 : 时间缩短约 80% 23 针对希望在同一服务器上组合使用传统机械硬盘和固态硬盘的客户, 英特尔提供了英特尔 高速缓存加速软件 这一分层存储模型以较低的购置成本为用户提供了部分固态硬盘的性能优势, 但与仅含固态硬盘的配置相比, 除了存在性能差异外, 该方法同时也牺牲了固态硬盘中的某些可靠性优势 然而, 该存储模型为客户提供了另一选择, 可帮助他们逐步采用固态硬盘, 从而显著缩短从数据中获取重要洞察的时间 测试还表明, 当在每个任务节点上安装五块固态硬盘时,Hadoop 框架能够同时运行足够多的 Map( 映射 ) 任务, 以向每块固态硬盘生成并行 I/O, 并将处理器的利用率提升至接近 100% 8 这一状态可为 Map 任务提供最优性能 设置 io.sort. mb 和 io.sort.record.percen 标记可有效避免中间 Map 输出溢出, 过多的磁盘读取和写入 每个 Map 任务可在不到 10 秒内处理 128 MB 的数据块, 并生成 128 MB 的输出信息 并行运行 32 项 Map 任务让每个任务节点达到超过 5 Gb/ 秒的速度 8 图 5. 存储升级为固态硬盘 : 处理阶段速度提高了约 80% 7 Hadoop 工作负载的大规模 分布式特性 让网络 I/O 成为了工作流中每个阶段整体 性能的一个关键要素, 万兆位以太网提供 了一个经济高效 可扩展的解决方案, 可 帮助有效缩短数据的等待时间 高带宽的 万兆位以太网网络不仅可支持快速向集群 导入数据和从集群中导出数据, 而且还可 加速 TeraSort 工作负载的随机排列阶段 的工作 通过在 Map 和 Reduce( 化简 ) 节点间使用万兆位以太网链路,Reduce 节点可快速获取数据, 从而能够显著缩短 整体作业执行时间, 并提高集群性能 Hadoop* 升级前 英特尔 以太网千兆位服务器适配器 英特尔 固态硬盘 520 系列 基于处理器和存储升级所取得的成果, 将 集群硬件从千兆位以太网升级到万兆位以 太网后, 测试工作负载的处理时间再次缩 短 50%, 从 23 缩短为 12 ( 如 图 6 所示 ) 9 使用万兆位以太网互连和 固态硬盘可支持在包含 10 个节点的测试 集群上, 运行超过 100 个并发 Reducer 任务, 从而可实现出色的作业扩展能力和 较高的资源利用率 5 Hadoop 升级后 万兆位英特尔以太网融合网络适配器 英特尔 固态硬盘 520 系列 升级到万兆位以太网 : 时间缩短约 50% E 产品家族 23 E 产品家族 12 图 6. 网络升级到万兆位以太网 : 处理阶段速度提高了约 50% 9 7
8 除了上述硬件升级以外, 英特尔 Hadoop 发行版还提供了一个直观的界面和多项内部优化, 其中包括高级数据压缩 针对 HDFS 的动态复制副本选择, 以及 MapReduce 加速等 这一额外的设计有助于提高性能, 同时当与英特尔可靠的企业级支持组合使用时, 将能够帮助客户更快速地部署 Hadoop 环境, 并加以出色的维护 在硬件升级的基础上, 实施英特尔 Hadoop 发行版再次将工作负载的完成时间缩短了约 40%, 从约 12 缩短为 7 ( 如图 7 所示 ) 优化导出阶段与导入阶段类似, 万兆位以太网网络可大幅提升在处理后从系统提取数据的性能, 而在将传统硬盘升级为固态硬盘后, 其优势更为显著 对传统硬盘进行的初步测试表明,Hadoop 工作流导出阶段的主要瓶颈是由于随机磁盘寻道所导致 将本地存储更换为固态硬盘可消除这一弊端, 使结果与我们在导入阶段所看到的结果保持一 致 通过使用固态硬盘, 我们可在从千兆 位以太网升级到万兆位以太网后将性能提 升约 6 倍, 从而大幅缩短了整个工作流内 的整体操作所需的时间 如上所述, 使用 固态硬盘和万兆位以太网还有助于从高级 别的处理器资源中获得更大优势, 进而突 显了平衡 Hadoop 集群的资源可带来的重 要优势 Hadoop* 升级前 万兆位英特尔 以太网融合网络适配器 英特尔 固态硬盘 520 系列 E 家族 12 4 研究环境简述 生成本白皮书中所述结果的 Hadoop 测 试平台包含一个头结点 ( 命名节点,Job Tracker) 10 个工作节点 ( 数据节点, Task Tracker) 和一台思科 Nexus* Gb 交换机 测试所比较的不同基准和 升级后的工作节点组件详细列于表 2 中 2 升级后 Hadoop* 软件的英特尔 分发版 10 Gb 英特尔以太网融合网络适配器 英特尔 固态硬盘 520 系列 E 家族 图 7. 实施 Hadoop* 软件的英特尔 分发版 : 处理阶段速度提高了约 40% 10 部署 Hadoop* 软件的英特尔 分发版 : 时间缩短约 40% 7 表 2. 测试环境中所比较的工作节点组件 处理器和基准系统比较存储比较网络适配器比较软件比较 基准组件 SuperMicro SYS-1026T-URF 1U 服务器, 包含两个英特尔 至强 处理器 3.47 GHz, 48 GB 内存 700 GB 7200 RPM SATA 硬盘 英特尔 以太网服务器适配器 I350-T2 (1 Gb 以太网 ) Hadoop* 升级的组件 戴尔 PowerEdge* R720 2U 服务器, 包含两个 2.90 GHz,128 GB 内存 英特尔 固态硬盘 520 系列 英特尔 以太网融合网络适配器 X520-DA2 ( 万兆位以太网 ) 英特尔 Hadoop* 发行版软件
9 5 调试和优化注意事项除了升级网络组件和考虑使用英特尔 Hadoop 发行版以外, 致力于最大限度地从大数据技术中挖掘价值的各个组织, 还必须考虑网络堆栈中的配置和设置, 以及 Hadoop 软件环境本身 尽管确定可能的配置和设置范围存在较大挑战, 根据以往的最佳实践, 我们建议工程师格外注意本部分所列的注意事项, 以获得最大价值 5.1 网络连接 操作系统和驱动程序优化在操作系统和网络连接堆栈中, 任意时间打开的文件 打开的网络连接, 以及运行的进程的数量应根据特定工作负载的需求而进行调整 英特尔万兆位以太网 Linux* 驱动程序也应通过调整 RSS 队列的数量 ( 如本白皮书所描述的, 测试中的最优数量为两个 ) 而进行优化, 而且还应通过调整中断阈值减少上下文开关的数量 在操作系统 网络连接和 TCP/IP 堆栈中, 应特别注意以下设置 优化和实践 : 增加操作系统中可打开的文件的数量 Hadoop 会打开大量文件, 因此提高并发可打开的文件的数量限制, 将能够减少作业故障 英特尔的测试发现 32,000 个文件个数将足够 提高并发进程的数量也有助于减少作业故障 增加待处理的连接和 SYN 请求的数量 Hadoop 的 HSFS 和 MapReduce 引擎将打开众多周期较短的 TCP/IP 连接 在英特尔设置配置中, 该设置提高到了 3,240,000, 减少了 HDFS 和 MapReduce 通信的等待时间 如果不需要在 Hadoop 工作负载上进行资源共享, 可考虑加大 TCP/IP 的最大窗口大小并扩展到 16 MB 该方法将能够帮助最大限度地提高万兆位以太网投资的价值 如果有足够的系统内存可用, 可提高 TCP/IP 发送和接收缓冲大小 这一变更可提高网络吞吐量 在英特尔测试集群中, 最大值可被设为 16 MB 当带宽可用时, 禁用 TCP/IP 可选 ACK 当启用可选 ACK 时, 对客户端请求的响应可能被延迟, 并降低作业执行和完成时间 ; 禁用这些 ACK 将有助于改善整体服务器的响应时间和 Hadoop 作业性能 为存储使用 JBOD Hadoop 拥有内建的负载平衡功能, 并能够在可用的 HDFS 和 MapReduce JBOD 磁盘间使用高效的轮询功能 使用包含固态硬盘和快速存储的 RAID 可限制存储吞吐量和整体作业性能 相反, 请为 HDFS 和 MapReduce 的磁盘使用 JBOD 模式, 这是因为 HDFS 和 MapReduce 均内建有在多个 JBOD 磁盘间进行负载平衡的功能 5.2 Hadoop 配置参数 Hadoop 堆栈中拥有超过 200 个配置参数, 基于以下调试注意事项着手将能够帮助工程团队高效工作 : Java 虚拟机 (JVM) 任务的内存配置 每个 Map 和 Reduce 任务将在独立的 JVM 实例中运行 用户可分别使用配置参数 mapred.map.child.java.opts 和 mapred.reduce.child.java.opts 为 Map 和 Reduce 任务指定各个任务的内存 英特尔测试集群将 Map 任务堆栈的内存设置为 512 MB, 将 Reduce 任务堆栈的内存设置为 1.5 GB - Map 任务的内存要求将取决于每个 Map 所生成的输出数量 包含排序应用程序的 128 MB 数据块需要约 200 MB 的空间来存储中间记录, 才能防止溢出 这一内存可使用配置参数进行管理, 如 io.sort.mb =200 mb,io.sort.record.percent=.15 和 io.sort.spih.percent=1.0 - Reduce 任务的内存使用量也可进行调整 英特尔测试建议大多数参数的默认设置已是最优, 但 mapred.job. reduce.inputbuffer.percent 可变更为 0.7, 从而让 Reducer 无需在开始最终合并前清空内存 9
10 并发 Map 和 Reduce 任务的数量 在英特尔至强处理器上,Map 任务的最优数量通常为逻辑内核的数量, 而 Reducer 的数量应与物理内核的数量相同 这些设置可通过 mapred. tasktracker.map.tasks.maximum 和 mapred.tasktracker.reduce.tasks. maximum 参数进行配置 命名节点和数据节点请求处理程序数量和线程数量 如果命名节点上拥有足够的内存和计算资源, 那么命名节点中的线程处理程序数量可提高至 100 或更高, 以支持大量并发请求 提高数据节点的处理程序数量也将可以带来诸多优势, 特别是在使用固态硬盘或快速存储时, 优势将更为突出 降低节点间 IPC 通信的网络延迟 将 ipc.server.tcpnodelay 和 ipc.client. tcpnodelay 设置为 true Job Tracker 和 Task Tracker 之间的心跳频率 默认心跳频率为 3 秒 对于 Map 任务能够较快完成的小型作业, 该设置可能延迟任务完成通知和新任务的调度 设置 mapreduce.tasktracker. outofband.heartbeats 立即发送作业完成通知可提高作业性能 使用 mapreduce.tasktracker.outofband. heartbeat.damper 参数来调整心跳频率也能够提供一定的优势 推测任务执行 Hadoop 可能在多个节点上安排相同的任务, 以防止节点故障或延迟执行 这一实践若能够充分利用闲置资源, 则效果显著, 但是若集群满载运行, 其效果甚微 因此, 我们推荐在某些时候禁用推测任务执行, 特别是存在高性能处理 存储和网络资源的时候 中间 Map 输出压缩 为中间 Map 输出启用压缩功能有助于提高受到存储或网络性能限制的集群的性能 请注意, 当使用万兆位以太网和固态硬盘时, 压缩输出对于性能的改善效果有限 HDFS 数据块大小 HDFS 数据块的最优大小将根据工作负载的不同而有所差异, 但是较大的数据块大小通常不会形成较高的性能, 这是因为它们可能导致对内存产生额外的负担, 并有可能在 Map 阶段导致中间溢出 同时, 较小的数据块大小将对较小和并行程度较高的任务产生额外的开销 在英特尔测试中,128 MB 的数据块大小为 TeraSort 性能指标评测程序提供了最优的整体性能 5.3 进一步的增强正如本白皮书中所介绍的, 英特尔已通过使用最新英特尔至强处理器 固态硬盘 万兆位以太网英特尔以太网融合网络适配器和英特尔 Hadoop* 发行版软件, 实现了大量性能优势 所有这些组件的持续进步将有望在大数据的实施过程中带来更多性能优势 目前, 我们正在为 Hadoop 和其他大数据技术考虑开发大量软件增强 例如, 我们可以通过将基于 HTTP 的跨节点通信更换成其他更为优化的选项, 加速传输层性能, 在不增加物理资源的前提下提高整体吞吐量 这一增强和其他软件增强均为英特尔持续关注的一个研究领域 面向商业分析和其他大数据使用模型的虚拟化 预构建的 Hadoop 集群是另一个前景广阔的研发领域, 它们可带来众多潜在优势, 其中包括 : 降低实施 Hadoop 环境的复杂性 为虚拟化资源配置制定最佳实践, 摒弃手动调整 基于大数据技术构建多用途环境 10
11 6 结论存储和分析大量非结构化数据的能力将能够为企业 学术机构和政府组织带来众多机会 英特尔通过此研究表明, 通过使用精选的硬件组件组成平衡的基础设施, 并使用英特尔 Hadoop* 发行版软件,Hadoop 将能够实现大幅的性能提升 本白皮书中所描述的结果只是英特尔和行业其他领域所正在开展的 并不断壮大的大型研究中的一部分, 这些研究旨在发现各种最佳实践, 以支持构建和运行 Hadoop 集群与其他大数据解决方案, 同时开发和调试软件, 确保这些软件能够在此类环境中实现最优运行 这一方面的进展将能够指导计算行业朝着简化 低成本实施的目标迈进, 从而推动在今后实现实时分析能力的广泛普及 11
12 如欲了解更多信息, 请访问以下页面 : hadoop.intel.com 英特尔在 2012 年 12 月进行的 TeraSort 性能指标评测 自定义设置 :mapred.reduce.tasks=100 以及 mapred.job.reuse.jvm.num.tasks=-1 如欲了解更多信息, 请访问 : 2 集群配置 : 一个头结点 ( 命名节点,Job Tracker),10 个工作节点 ( 数据节点,Task Tracker), 思科 Nexus* Gb 交换机 基准工作节点 :SuperMicro SYS-1026T-URF1U 服务 器, 包含两个 3.47 GHz,48 GB 内存,700 GB 7200 RPM SATA 硬盘, 英特尔 以太网服务器适配器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工作节点中的升级处理器和基准系统 : 戴尔 PowerEdge* R720 2U 服务器, 包含两个 2.90 GHz,128 GB 内存 工作节点中的升级存储 : 英特尔 固态硬盘 520 系列 工作节点中的升级网络适配器 : 英特尔 以太网融合网络适配器 X520-DA2 工作节点中的升级软件 : 英特尔 Hadoop* 发行版软件 英特尔 固态硬盘 520 系列当前未针对数据中心用途进行验证 4 固态硬盘性能将由于容量的不同而有所差异 5 性能使用 lorneter*( 队列深度为 32) 测量得出 测试于 2012 年 12 月开展 6 基准工作节点 :SuperMicro SYS-1026T-URF1U 服务器, 其中包含两个 3.47 GHz,48 GB 内存,700 GB 7200 RPM SATA 硬盘, 英特尔 以太网服务器适配器 I350-T2, Hadoop* 1.0.3,Red Hat Enterprise Linux*6.3,Oracle Java* 1.7.0_05 工作节点中的升级处理器和基准系统 : 戴尔 PowerEdge* R720 2U 服务器, 包含两个 2.90 GHz,128 GB 内存,700 GB 7200 RPM SATA 硬盘 7 基准存储 :700 GB 7200 RPM SATA 硬盘, 升级存储 : 英特尔 固态硬盘 520 系列 8 资料来源 : 英特尔内部测试,2012 年 12 月 9 基准网络适配器 : 英特尔 以太网服务器适配器 I350-T2, 升级网络适配器 : 英特尔 以太网融合网络适配器 X520-DA2 10 工作节点中的升级软件 : 英特尔 Hadoop* 发行版软件 在性能检测过程中涉及的软件及其性能只有在英特尔 微处理器的架构下方能得到优化 诸如 SYSmark* 和 MobileMark* 等测试均系基于特定计算机系统 硬件 软件 操作系统及功能, 上述任 何要素的变动都有可能导致测试结果的变化 请参考其他信息及性能测试 ( 包括结合其他产品使用时的运行性能 ) 以对目标产品进行全面评估 更多信息敬请登陆 结果以英特尔内部测试为基础, 并使用了第三方基准测试数据和软件 英特尔不控制或审核本文件中所引述的网页或第三方所提供的基准数据的设计或实施情况 英特尔鼓励客户登录本文件引述的 网页或其他网页以核实相关基准数据的准确性以及其是否反映了所购买的系统的性能 英特尔编译器针对非英特尔微处理器的优化程度可能与英特尔微处理器相同 ( 或不同 ) 这些优化包括 SSE2 SSE3 和 SSSE3 指令集以及其它优化 对于在非英特尔制造的微处理器上进行的优 化, 英特尔不对相应的可用性 功能或有效性提供担保 该产品中依赖于处理器的优化仅适用于英特尔微处理器 部分非针对英特尔微体系架构的优化也为英特尔微处理器保留了下来 如欲了解更多有关本声明所涉及的特定指令集的信息, 请参阅适用产品的 用户和参考指南 声明版本 # 本文件中包含关于英特尔 产品的信息 英特尔未通过明示或暗示, 禁止翻供或其他方式许可或担保与销售和 / 或使用英特尔产品相关的内容, 其中包括不对特定目的适用性 适销性, 以及是否侵犯任何专利 版权或其他知识产权做出担保 除非经过英特尔的书面同意认可, 英特尔的产品无意被设计用于或被用于以下应用 : 即在这样的应用中可因英特尔产品的故障而导致人身伤亡 英特尔有权随时更改产品的规格和描述而毋需发出通知 设计者不应信赖任何英特产品所不具有的特性, 设计者亦不应信赖任何标有 保留权利 或 未 定义 说明或特性描述 对此, 英特尔保留将来对其进行定义的权利, 同时, 英特尔不应为因其日后更改该等说明或特性描述而产生的冲突和不相容承 担任何责任 此处提供的信息可随时改变而毋需通知 请勿根据本文件提供的信息完成一项产品设计 本文件所描述的产品可能包含使其与宣称的规格 不符的设计缺陷或失误 这些缺陷或失误已收录于勘误表中, 可索取获得 在发出订单之前, 请联系当地的英特尔营业部或分销商以获取最新的产品规 格 索取本文件中或英特尔的其他材料中提的 包含订单号的文件的复印件, 可拨打 , 或登陆 英特尔公司 2013 年版权所有 所有权保留 英特尔 Intel 标识 至强和 Xeon 是英特尔在美国和 / 或其他国家的商标 * 其他的名称和品牌可能是其他所有者的资产 0113/ME/MESH/PDF C 请注意环保 CN 12
目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡...
白 皮 书 英 特 尔 固 态 硬 盘 英 特 尔 以 太 网 融 合 网 络 英 特 尔 Hadoop* 发 行 版 软 件 应 用 大 数 据 技 术 获 得 近 实 时 分 析 巨 大 成 效 1 平 衡 的 基 础 设 施 使 工 作 负 载 完 成 时 间 从 4 小 时 缩 短 为 7 如 今, 基 于 广 泛 可 用 的 计 算 存 储 和 网 络 组 件 的 改 进, 商 业 学 术
水晶分析师
大数据时代的挑战 产品定位 体系架构 功能特点 大数据处理平台 行业大数据应用 IT 基础设施 数据源 Hadoop Yarn 终端 统一管理和监控中心(Deploy,Configure,monitor,Manage) Master Servers TRS CRYSTAL MPP Flat Files Applications&DBs ETL&DI Products 技术指标 1 TRS
Autodesk Product Design Suite Standard 系统统需求 典型用户户和工作流 Autodesk Product Design Suite Standard 版本为为负责创建非凡凡产品的设计师师和工程师提供供基本方案设计和和制图工具, 以获得令人惊叹叹的产品
Autodesk Product Design Suite Standard 20122 系统统需求 典型用户户和工作流 Autodesk Product Design Suite Standard 版本为为负责创建非凡凡产品的设计师师和工程师提供供基本方案设计和和制图工具, 以获得令人惊叹叹的产品设计 Autodesk Product Design Suite Standard 版本包包括以下软件产产品
白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项
IT@Intel 白 皮 书 英 特 尔 IT 部 门 大 数 据 和 商 业 智 能 2013 年 10 月 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 要 点 概 述 仅 在 五 周 之 内, 我 们 就 实 施 了 基 于 Apache Hadoop* 英 特 尔 分 发 版 的 低 成 本 可 完 全 实 现 的 大 数
FPGAs in Next Generation Wireless Networks WPChinese
FPGA 2010 3 Lattice Semiconductor 5555 Northeast Moore Ct. Hillsboro, Oregon 97124 USA Telephone: (503) 268-8000 www.latticesemi.com 1 FPGAs in Next Generation Wireless Networks GSM GSM-EDGE 384kbps CDMA2000
长 安 大 学 硕 士 学 位 论 文 基 于 数 据 仓 库 和 数 据 挖 掘 的 行 为 分 析 研 究 姓 名 : 杨 雅 薇 申 请 学 位 级 别 : 硕 士 专 业 : 计 算 机 软 件 与 理 论 指 导 教 师 : 张 卫 钢 20100530 长安大学硕士学位论文 ３ １ ３系统架构设计 行为分析数据仓库的应用模型由四部分组成 如图３ ３所示
目录减少处理大数据的挑战和成本 Hadoop 简介 对均衡系统的需求 实现万兆位以太网的全部优势 装配 Hadoop 集群 概念验证 Hadoop 环
白皮书英特尔 万兆位以太网融合网络适配器 Arista Networks 交换机 Hadoop* 基于万兆位以太网的 Hadoop* 集群 基于经济高效的 10GBASE-T 基础构建均衡系统的通用指南 所有行业的 IT 部门现在都需要处理 存储和分析超大型数据存储, 操作 PB 级数据正在变得越来越普遍 与此同时,IDC 最近进行的一项研究显示, 这些数据存储正在以 40% 的年复合增长率增长 1
ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示
完整的大数据解決方案 ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 Dataframe Pig YARN Spark Stand Alone HDFS Spark Stand Alone Mesos Mesos Spark Streaming Hive Hadoop
册子0906
IBM SelectStack ( PMC v2.0 ) 模块化私有云管理平台 是跨主流虚拟化技术的统一资源云管理平台 01 亮点 : 快速可靠地实现集成化 私有云管理平台 02/03 丰富的功能支持企业数据中心云计算 扩展性强 : 简单易用 : 04/05 功能丰富 : 06/07 为什么选择 IBM SelectStack (PMC v2.0)? 快速实现价值 提高创新能力 降低 IT 成本 降低复杂度和风险
目录 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 控制卡 GPU 卡 网卡 FC HBA 卡 TPM/TCM 模块 NVMe SSD PCle 加速卡 1-31 i
目录 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 1-1 1.1 控制卡 1-1 1.2 GPU 卡 1-5 1.3 网卡 1-8 1.4 FC HBA 卡 1-21 1.5 TPM/TCM 模块 1-29 1.6 NVMe SSD PCle 加速卡 1-31 i 1 H3C R4900 G2 服务器可选部件与操作系统兼容性列表 本手册为产品通用资料 对于定制化产品, 请用户以产品实际情况为准
毛玮
毛玮 wei.mao@intel.com About Us Dedicate to Big Data Ecosystem Mainly focus on *Spark! Corporate with YOU FREE! E-mail: wei.mao@intel.com * 其他的名称和品牌可能是其他所有者的资产 Overview *Storm VS Spark Streaming Ease of
PowerPoint Presentation
利用 Oracle Big Data Connectors 将 Hadoop 与 Oracle 集成 罗海雄甲骨文公司资深技术顾问 1 Copyright 2011, Oracle and/or its affiliates. All rights 以下内容旨在概述产品的总体发展方向 该内容仅供参考, 不可纳入任何合同 该内容不构成提供任何材料 代码或功能的承诺, 并且不应该作为制定购买决策的依据
培 训 机 构 介 绍 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培
Hadoop 2.0 培 训 Hadoop 2.0Training Hadoop 2.0 运 维 与 开 发 实 战 培 训 邀 请 函 培 训 机 构 介 绍 www.zkpk.org 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开
2014 年 87 月 259 日 K-HW508K / HW516K K-NL408K / NL416K 最新固件版本 :V3.200 容量 供应商 系列 型号 格式 可用性 兼容性能 备注 500G Seagate Pipeline HD2 ST CS - 可用 Seagate Pi
纠正点从 2014 年 5 月 12 日的版本开始 我们缺少的 4TB 硬盘的型号 : WJ-ND400 / 和 WJ-HD616K / WJ-716K / WJ-ND400 WJ-HD616K WJ-HD716K 4TB 红 40PURX-64GVNY0 AF OK 4TB 红 40EFRX-68WT0N0 AF OK 纠正点 1 2014 年 87 月 259 日 K-HW508K / HW516K
K-HW508K / HW516K K-NL408K / NL416K 最新固件版本 :V G Seagate Pipeline HD2 ST CS - 可用 Seagate Pipeline HD2 ST1000VM002 - 可用 1T Seagate SV35.5
注意请使用 5T 或 6T 的硬盘架 (WJ-ND400/ WJ-HDE400/WJ-HD716/WJ-HD616) 请不要在 5TB 或 6TB 硬盘底部安 2 颗螺丝 ( 下方标记 ), 因为螺丝要长于螺旋孔的深度 顶视图 底视图 1 K-HW508K / HW516K K-NL408K / NL416K 最新固件版本 :V3.200 500G Seagate Pipeline HD2 ST3500312CS
TD
*TD-000212-05* 20- 应用实例 4 本例显示的是使用两个亚低 音扬声器和多个顶箱的双声 道 立体声 设置 除了各声道都增加了一个顶 箱外 也可以增加更多的顶 箱 本例和例 3 的情况一 致 声道 2 或 右声道 声道 1 或 左声道 要接到更多的顶箱 将最后 一个顶箱的全幅线路输出接 头处的线缆接到下一个顶箱 的全幅线路输入接头 在不 降低信号质量的情况下 最
恒生银行 ( 中国 ) 银行结构性投资产品表现报告 步步稳 系列部分保本投资产品 产品编号 起始日 到期日 当前观察期是否发生下档触发事件 挂钩标的 最初价格 * 最新价格 累积回报 OTZR 年 5 月 5 日 2018 年 5 月 7 日 3 否 728 HK Equity 3.7
恒生银行 ( 中国 ) 银行结构性投资产品表现报告 步步稳 系列部分保本投资产品 产品编号 起始日 到期日 当前观察期是否发生下档触发事件 挂钩标的 最初价格 * 最新价格 累积回报 OTZR89 2017 年 5 月 5 日 2018 年 5 月 7 日 3 否 728 HK Equity 3.77 3.45 不适用 941 HK Equity 82.85 73.40 902 HK Equity
3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo 4200 Gen9 13 HPE Apol
HPE Apollo System 中国独家提供商 服务器 存储和技术服务 以上描述适用于中国大陆地区,H3C 不是 HPE 唯一咨询服务提供商 3 3 4 Apollo System 5 HPE Apollo System 6 HPE Apollo 2000 System 7 HPE Apollo 2000 System 8 HPE Apollo 4000 System 10 HPE Apollo
01
Zebra Technologies 白皮书 移动打印给仓储运营带来显著优势 综述 RFID RFID (RF) RFID RFID / ROI LAN 采用移动打印机, 享受显而易见的业务成效 - 49.74 28.11 Zebra 2 Zebra Technologies 移动打印机成本效益分析 示例数据固定式打印机移动打印机每年节省资金 10 10 8 8 48 48 3840 3840 15
01
ZEBRA 技术白皮书 条码编码 101 相关知识介绍 引言 20 70 数据 80 20 90 (JIT) AIAG EIA HIBCC HAZMAT 条码的优势提高数据准确性 99% 85% / / 提升效率 / 2 Zebra Technologies 保持一致性 ID 改进库存和资产管理 成本 / 效益分析 ID ID ID (ERP) RFID Zebra Technologies 3 ID
温州市政府分散采购
温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理
白皮书 SanDisk DAS Cache:OLTP 性能 951 SanDisk Drive, Milpitas, CA SanDIsk Corporation. 保留所有权利
白皮书 951 SanDisk Drive, Milpitas, CA 95035 2014 SanDIsk Corporation. 保留所有权利 www.sandisk.com 简介 本文介绍了 SanDisk DAS Cache 的性能表现, 该结果使用基于 TPC-C 基准测试的典型 OLTP 工作负载在 Microsoft SQL Server 上测得 在本测试中, 采用 SanDisk
KV-cache 1 KV-cache Fig.1 WorkflowofKV-cache 2.2 Key-value Key ; Key Mem-cache (FIFO) Value Value Key Mem-cache ( Value 256B 100 MB 20%
38 11 2013 11 GeomaticsandInformationScienceofWuhanUniversity Vol.38No.11 Nov.2013 :1671-8860(2013)11-1339-05 :A GIS Key-value 1 1 1 1 (1 129 430079) : 设计了一种基于 Key-value 结构的缓存 KV-cache 旨在简化数据结构 高效管理缓存数据
PowerPoint 簡報
储存设备信息 1. MSI 建议您在升级前先向当地服务中心索取经测试的存储设备列表, 以避免可能遇到的硬件兼容性问题 2. 为达到最高的 SSD 效能,MSI 建议使用经 MSI 认证过的 SSD 并参考栏位内标注的 Stripe Size 设定 3. 2.5 寸 vs. msata vs. M.2 SSD 我需要哪一种 M.2 SSD Drive? 1. 插槽 & 卡榫 : 请根据您的笔记本来准备正确的
ChinaBI企业会员服务- BI企业
商业智能 (BI) 开源工具 Pentaho BisDemo 介绍及操作说明 联系人 : 杜号权苏州百咨信息技术有限公司电话 : 0512-62861389 手机 :18616571230 QQ:37971343 E-mail:du.haoquan@bizintelsolutions.com 权限控制管理 : 权限控制管理包括 : 浏览权限和数据权限 ( 权限部分两个角色 :ceo,usa; 两个用户
2011_中国私人财富报告_PDF版
211 l l l l l l l l l l 1 l l l l l 2 3 4 5 6 8 6 52 62 72 CAGR ( 8-9) 39% 16% 16% 9% 13% 16% CAGR (9-1) 19% 49% 44% 17% 26% 17% CAGR ( 1-11E ) 16% 28% 27% 26% 2% 18% 4 38 63% 21% 7% 2 19% 16% 16% 28 29
untitled
1 2 3 4 5 6 / / 7 8 9 10 11 ES Elevator Shuttle EC Elevator Cross carriage 12 13 14 ES Elevator Shuttle EC Elevator Cross carriage 15 16 17 2. 55X16 600 19 80.000m³ 31 42.160 m³ 36 17 19 Istanbul / Sisli,
模量 100, 通用型 气相法硅橡胶 ( 续 ) RBB-70 系列 RBB-2100 系列 RBB 硅橡胶 RBB 硅橡胶 RBB 硅橡胶 RBB 硅橡胶 RBB 硅橡胶 RBB 硅橡胶 RBB 硅橡胶 R
模量 100, 品牌高温硫化硅橡胶 (HCR) 基胶 - 亚洲 ( 日本除外 ) 选择指南 高温硫化硅橡胶 (HCR) 基胶 通用型 气相法硅橡胶 RBB-00/ RBB-01 系列 RBB-02 系列 RBB-03 系列 RBB-04 系列 RBB-00-35 硅橡胶 RBB-01-65 硅橡胶 RBB-02-30 硅橡胶 RBB-02-45 硅橡胶 RBB-02-50 硅橡胶 RBB-02-70
Reducing Client Incidents through Big Data Predictive Analytics
IT@lntel 白 皮 书 英 特 尔 IT 部 门 IT 最 佳 实 践 大 数 据 预 测 分 析 2013 年 12 月 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 总 体 概 述 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 容 易 主 动 找 出 客 户 端 问 题, 并 及 时 将 其 修 复 以 免 问 题 扩 大, 从 而 为 企 业 节 约
<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63>
关 于 举 办 Hadoop 大 数 据 及 海 量 数 据 挖 掘 应 用 工 程 师 培 训 班 的 通 知 随 着 云 时 代 的 来 临, 大 数 据 技 术 将 具 有 越 来 越 重 要 的 战 略 意 义 大 数 据 分 析 与 挖 掘 技 术 已 经 渗 透 到 每 一 个 行 业 和 业 务 职 能 领 域, 逐 渐 成 为 重 要 的 生 产 要 素, 人 们 对 于 海 量 数
US_cs.indd
技术简介 智能性能 为您的业务环境量身打造的出色性能 英特尔 至强 5500 系列处理器可智能调节性能和能源使用 应用性能对于日常业务运营 创建全新产品与服务 提高竞争力和赢得新客户而言至关重要 过去十年来,IT 业一直在迅速增添低成本硬件以适应业务增长, 以至目前许多数据中心在功耗 散热和占地空间方面已达到了极限 通过借助性能更高 适应性更强且更加节能的服务器来更新数据中心基础设施, 您可以在相同的能源和空间范围内提供更多的功能和可扩充性,
论文,,, ( &, ), 1 ( -, : - ), ; (, ), ; ;, ( &, ),,,,,, (, ),,,, (, ) (, ),,, :. : ( ), ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ), ( ),,,, 1 原译作 修补者, 但在英译版本中, 被译作
* 夏传玲 : 本文简要回顾了国内外定性研究在最近 多年的发展概况, 总结 了定性研究的六个发展趋势和分析策略上的三种流派 在上述两种背景下, 本文探讨了计算机辅助的定性分析给定性研究带来的机遇和挑战, 特别是它和手工操作对比时的优势和劣势, 以及应用这种定性分析技术所可能面临的困难 : 定性研究定性分析 文化差异,, (, ),,,, ( - ) ( - ) ( - ) ( - ) ( - ) (
RS Pro 以实惠的价格 提供您所需的品质与性能 细节决定成败 正确的选择可以提高整个组织的效率和生产力 每个决策 每个环节都很重要 因此 RS Pro 为您提供了约 40,000 种产品供您选择 这些产品均经过产品质量测试 专为严苛的制造和工业环境而设计 并在不断推陈出新 RS Pro 深知每个
china.rs-online.com Every part matters china.rs-online.com/rspro RS Pro 以实惠的价格 提供您所需的品质与性能 细节决定成败 正确的选择可以提高整个组织的效率和生产力 每个决策 每个环节都很重要 因此 RS Pro 为您提供了约 40,000 种产品供您选择 这些产品均经过产品质量测试 专为严苛的制造和工业环境而设计 并在不断推陈出新
CHCN_8-14_K.indd
是德科技 三个理由让您选择深存储快响应示波器 应用指南 介绍 1. 更长的波形捕获时间 = / 1 1 Mpts 10 GSa/s 1 2 100 Mpts 10 1. = / 1 Mpts 10 GSa/s 1 ms 2. = / 100 Mpts 10 GSa/s 10 ms 3 12.5 Mpts 3 300 Kpts 3 3. 3 12.5 Mpts 3 300 Kpts? Agilent
第 06 期 李祥池 : 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 1 日志 1.1 日志定义 IT 1.2 日志处理方案演进 v1.0 v2.0 Hadoop Storm Spark Hadoop/Storm/Spark v3.0 TB Splunk ELK SI
电子科学技术第 02 卷第 06 期 2015 年 11 月 Electronic Science & Technology Vol.02 No.06 Nov.2015 年 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 李祥池 ( 杭州华三通信技术有限公司北京研究所, 北京,100085) 摘要 : 在大数据时代 对数据平台各组件的运行状态实时监控与运行分析具有重要意义
, ( ) :,, :,, ( )., ( ) ' ( ),, :,,, :,, ;,,,,,, :,,,, :( ) ;( ) ;( ),,.,,,,,, ( ), %,. %,, ( ),,. %;,
:?? * 张军高远傅勇张弘 : 本文在中国的政治经济体制的框架内解释了改革以来, 尤其是上世纪 年代以来中国在建设和改善物质基础设施上所取得的显著成就 文章依据现有的文献和 省级面板数据, 不仅度量了改革以来中国的基础设施的存量变化和地区差距, 而且运用 方法检验了可解释基础设施投资支出变动模式的重要变量 本文发现, 在控制了经 济发展水平 金融深化改革以及其他因素之后, 地方政府之间在 招商引资
手册 doc
1. 2. 3. 3.1 3.2 3.3 SD 3.4 3.5 SD 3.6 3.7 4. 4.1 4.2 4.3 SD 4.4 5. 5.1 5.2 5.3 SD 6. 1. 1~3 ( ) 320x240~704x288 66 (2G SD 320x2401FPS ) 32M~2G SD SD SD SD 24V DC 3W( ) -10~70 10~90% 154x44x144mm 2. DVR106
OTZR 年 12 月 13 日 2017 年 12 月 13 日 2 否 中国电信 不适用 中国移动 华能国际 EFZR 年 2 月 13 日 2018 年 2 月 13 日 1 否 盈富基金
恒生银行 ( 中国 ) 银行结构性投资产品表现报告 步步稳 系列部分保本投资产品 产品编号 起始日 到期日 当前观察期 是否发生下档触发事件 挂钩标的 最初价格 * 最新价格 累积回报 EFZR36 2016 年 9 月 13 日 2017 年 9 月 13 日 3 否 盈富基金 24.85 26.00 不适用 H 股指数上市基金 102.40 106.90 OTZR95 2016 年 9 月 14
02 责任编辑 张晋芬 2 16:06:31
责任编辑 2015 年 9 月 7 日 第 229 期 总第 7629 期 国内统一刊号 CN51-0078 1 星期一 B 1 34 16:06:26 02 责任编辑 张晋芬 2 16:06:31 目录 Contents 责任编辑 朱华樑 03 SMB 视点 总经理兼主编 王海峰 编辑 / 记者 张金祥 朱华樑 张晋芬 李珍珍 客户总监 宫建强 詹 恒 数据总监 赵 倩 制作部 张凤林 张 琳 市场部
<5C5C444144492D2D3230313331303237565CB1BEB5D8B4C5C5CC202864295CBACDCAA25CBBD45CBDF8D0D0D6D05CD5FEB2C95CCAFDD7D65CC2DBD6A4BBE15C28323031342E31322E3234C2DBD6A4B8E529C3B7D6DDCAD0CAFDD7D6BBAFB3C7CAD0D7DBBACF2E2E2E2E646F63>
项 目 编 号 : 招 标 文 件 ( 论 证 稿 ) 广 东 和 盛 招 标 代 理 有 限 公 司 Guangdong Hesheng Tendering Agency Co.,Ltd. 目 录 第 一 部 分 : 投 标 邀 请 函 1 第 二 部 分 : 采 购 项 目 内 容 4 第 三 部 分 : 投 标 人 须 知 88 第 四 部 分 : 合 同 书 格 式 104 第 五 部 分
HD ( ) 18 HD ( ) 18 PC 19 PC 19 PC 20 Leica MC170 HD Leica MC190 HD 22 Leica MC170 HD Leica MC190 HD Leica MC170 HD
Leica MC170 HD Leica MC190 HD 5 6 7 8 11 12 13 14 16 HD ( ) 18 HD ( ) 18 PC 19 PC 19 PC 20 Leica MC170 HD Leica MC190 HD 22 Leica MC170 HD Leica MC190 HD 22 23 24 26 Leica MC170 HD Leica MC190 HD ( ) 28
六域链联盟 SDChain-Matrix 节点搭建指南 2018/07/26 Version : 1.0.0
SDChain-Matrix 节点搭建指南 目录 1 环境要求... 3 2 软件下载... 4 3 安装部署... 4 3.1 部署可执行程序目录... 4 3.2 部署配置文件目录... 4 3.3 部署数据库文件目录... 4 3.4 部署日志文件目录... 4 3.5 部署依赖库文件目录... 4 4 配置参数... 5 5 启动运行... 7 5.1 普通模式启动... 7 5.2 加载启动模式...
华夏沪深三百 EFZR 年 9 月 14 日 2018 年 9 月 14 日 1 否 H 股指数上市基金 不适用 华夏沪深三百 EFZR 年 9 月 14 日 2018 年 9 月 14 日 1
恒生银行 ( 中国 ) 银行结构性投资产品表现报告 步步稳 系列部分保本投资产品 产品编号 起始日 到期日 当前观察期发生下档触发 挂钩标的 最初价格 * 最新价格 累积回报 OTZR89 2017 年 5 月 5 日 2018 年 5 月 7 日 2 否 中国电信 3.77 3.79 不适用 中国移动 82.85 79.25 华能国际 5.35 5.00 OTZR88 2017 年 6 月 21
国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对
重点文化工程 中华古籍保护计划 数字图书馆推广工程 民国时期文献保护计划 年度掠影 国 家 图 书 馆 年 鉴 0 重 点 文 化 工 程 一 中 华 古 籍 保 护 计 划 0 年, 国 家 图 书 馆 ( 国 家 古 籍 保 护 中 心 ) 根 据 文 化 部 要 求, 围 绕 习 近 平 总 书 记 关 于 弘 扬 中 华 优 秀 传 统 文 化 系 列 讲 话 精 神, 对 中 华 古 籍
卖给玩家和爱好者的作战卡
将多任务处理 提升到极致水平 在不影响系统性能的情况, 同时编辑 4K 视频 处理 3D 图像效果, 并合成音轨 使用 Adobe* Premiere* Pro CC 进行 4K 视频编辑速度提升最高可达 使用 Handbrake* 进行视频转码速度提升最高可达 Blender* 性能提升最高可达 2.4 倍 ¹ 2.3 倍 ² 3 倍 ³ ¹ Adobe Premiere Pro CC 工作负载
Brochure_DC-Device-Matrix-CM_SC_ _v1
数据中心 SSD 和 HDD 产品 用于部署数据中心的全系列固态硬盘 SSD 和机械硬盘 HDD 其中许多产品采用以下关键技术 : Guardian Technology 平台 该平台是企业级特性和耐久性增强技术专有套件, 旨在让最经济高效的 NAND 闪存可用于企业环境 Guardian Technology 平台和 SanDisk 品牌 NAND 可以无缝地相互配合工作, 充分利用平台提供的更高耐久性
PowerPoint Presentation
MATLAB 与 Spark/Hadoop 相集成 : 实现大数据的处理和价值挖 马文辉 2015 The MathWorks, Inc. 1 内容 大数据及其带来的挑战 MATLAB 大数据处理 tall 数组 并行与分布式计算 MATLAB 与 Spark/Hadoop 集成 MATLAB 访问 HDFS(Hadoop 分布式文件系统 ) 在 Spark/Hadoop 集群上运行 MATLAB
个人介绍 思考数据分析系统的基本指标 Hadoop 史前和史后的数据仓库流程 Hadoop 史前和史后的数据分析流程 思考 Hadoop 解决了什么样的根本问题 演讲大纲 Python 如何在构建数据仓库系统的作用 1. 使用 Python 快速构建数据分析模块 ComETL 2. 基于 Pytho
Python&Hadoop 构建数据仓库从开源中来, 到开源中去 EasyHadoop 童小军 tongxiaojun@gmail.com 2012 年 10 年 20 日 个人介绍 思考数据分析系统的基本指标 Hadoop 史前和史后的数据仓库流程 Hadoop 史前和史后的数据分析流程 思考 Hadoop 解决了什么样的根本问题 演讲大纲 Python 如何在构建数据仓库系统的作用 1. 使用
Azure_s
Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL
IT Modernization: The Engine of Business Transformation
IT 智能化 推动产业变革 凌琦英特尔中国公司行业合作与解决方案部 2 2013 年中国 IT 市场增长分析 推动国内 IT 市场增长的关键因素 IT 技术的不断创新以及国家的持续建设投入 IT 技术创新 终端设备物联网大数据云计算安全 国家建设投资 战略新兴产业 2011~2020 投资 :4+ 万亿 节能环保产业 2010~2015 投资 :2.36 万亿 水利建设 2011~2020 投资 :4
欧盟符合性声明 根据 ATEX 指令 2014/34/ 欧盟用于点燃保护类型 d 或 de 的交流电机用于区域 1, 或 t 用于区域 21 B 版本 : 06/2018 文件 : KonfErkl_ATEX_d_t_B320_1300_05_CN Bauer Gear Mo
根据 ATEX 指令 2014/34/ 欧盟用于点燃保护类型 d 或 de 的交流电机用于区域 1, 或 t 用于区域 21 B 320.1300-05 版本 : 06/2018 文件 : KonfErkl_ATEX_d_t_B320_1300_05_CN Eberhard-Bauer 街 37 号 Eberhard-Bauer 街 37 号, 三相鼠笼式电机系列 DNFXD06.., DNFXD07..,
基于 SQL-on-Hadoop 的 网络日志分析
1896 1920 1987 2006 基于 SQL-on-Hadoop 的 网络日志分析 章思宇, 姜开达, 韦建文, 罗萱, 王海洋 上海交通大学网络信息中心 2014 年 11 月 事后追查 校园网安全日志分析 已经发生, 已被发现的入侵 攻击检测 已经发生, 尚不知晓的攻击 正在进行的攻击 (APT) 漏洞挖掘 发现尚未被利用的漏洞 镜像流量抓包分析 网络流量日志采集 Internet 缓存加速系统
Microsoft Word - View存储注意事项.doc
VMware View .......................................................................... 3 Windows I/O.....................................................3...............................................................
计算机网络实验说明
计算机网络实验说明 龚旭东 电三楼 420 lzgxd@mailustceducn 2011 年 11 月 1 日 龚旭东 (TA) 计算机网络实验说明 2011 年 11 月 1 日 1 / 20 Outline 1 实验系统介绍 实验环境实验流程 2 实验内容编程实验交互实验观察实验 3 一些控制台命令 4 实验报告说明 龚旭东 (TA) 计算机网络实验说明 2011 年 11 月 1 日 2
大16开产品画册排版.cdr
北京圣莱特商贸有限公司 中国 北京 新型产品 XYZ 20A 颜色 黑色 尺寸 210*180*130mm 功能参数 1 使用高转换效率单晶硅片 太阳能转换效率高达16%以上 2 太阳能电池板规格 10W 3 充电器内置高容量可充电电池 20AH 4 输出电压 220V 5 用交流适配器给充电器内置电池充电时间 5小时 (6) 太阳能给充电器内置电池充电时间 20小时
业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1
Business & Operation 业 务 与 运 营 大 数 据 技 术 在 精 准 营 销 中 的 应 用 王 小 鹏 北 京 东 方 国 信 科 技 股 份 有 限 公 司 北 京 100102 摘 要 简 要 介 绍 主 流 的 大 数 据 技 术 架 构 和 大 数 据 挖 掘 技 术 ; 阐 述 大 数 据 技 术 在 精 准 营 销 与 维 系 系 统 建 设 中 的 应 用,
Chapter #
第三章 TCP/IP 协议栈 本章目标 通过本章的学习, 您应该掌握以下内容 : 掌握 TCP/IP 分层模型 掌握 IP 协议原理 理解 OSI 和 TCP/IP 模型的区别和联系 TCP/IP 介绍 主机 主机 Internet TCP/IP 早期的协议族 全球范围 TCP/IP 协议栈 7 6 5 4 3 应用层表示层会话层传输层网络层 应用层 主机到主机层 Internet 层 2 1 数据链路层
IBM System x 系列手册
IBM Systems and Technology System x IBM System x IBM System x 2 IBM System x IBM System x IBM System x BladeCenter RAS IT System x BladeCenter - IT IBM - IBM X System x System x IBM System x System x BladeCenter
SDK 概要 使用 Maven 的用户可以从 Maven 库中搜索 "odps-sdk" 获取不同版本的 Java SDK: 包名 odps-sdk-core odps-sdk-commons odps-sdk-udf odps-sdk-mapred odps-sdk-graph 描述 ODPS 基
开放数据处理服务 ODPS SDK SDK 概要 使用 Maven 的用户可以从 Maven 库中搜索 "odps-sdk" 获取不同版本的 Java SDK: 包名 odps-sdk-core odps-sdk-commons odps-sdk-udf odps-sdk-mapred odps-sdk-graph 描述 ODPS 基础功能的主体接口, 搜索关键词 "odpssdk-core" 一些
PowerPoint 演示文稿
基于 SQL Server 的大数据解决方案设计及实现 孙巍 高级项目经理 Customer Advisory Team 微软亚太研发集团云创新中心 About CAT CAT is Customer Advisory Team from R&D to connect customer and product group 议程 Agenda 大数据时代 你真的需要大数据吗? 关于大数据的一些事 微软有大数据方案吗?
雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO
CHAPTER 使用 Hadoop 打造自己的雲 8 8.3 測試 Hadoop 雲端系統 4 Nodes Hadoop Map Reduce Hadoop WordCount 4 Nodes Hadoop Map/Reduce $HADOOP_HOME /home/ hadoop/hadoop-0.20.2 wordcount echo $ mkdir wordcount $ cd wordcount
深空防篡改系统
深空防篡改系统 - 产品性能测试报告 ( 基于 18071801 版本 ) 深空防篡改系统 产品性能测试报告 ( 基于 18071801 版本 ) 更新日期 :2018-07 最新信息 :http://www.sky-deep.com 版权所有 2018 福建深空 信息技术有限公司 1 深空防篡改系统 - 产品性能测试报告 ( 基于 18071801 版本 ) 目录 1. 前言... 8 2. 测试场景...
Bluemix 从概念到应用CN改
IBM Bluemix 从概念到应用 平台即服务 1. 2. 3. 3.1. 3.2. 4. 4.1. 4.1.1. 4.1.2. 4.2. 5. 6. 7. 7.1. 7.2. 7.3. 8. 引言 开发者面临的挑战和障碍 Bluemix 在云格局中的定位 3.1. 云计算的各种模式 3.2. 以开发者为中心的 PaaS IBM Bluemix 简介 4.1. IBM Bluemix 架构 4.1.1.
目录 1 简介 1 2 配置前提 1 3 配置环境 服务器 软件 1 4 配置指导 组网拓扑 操作步骤 Red Hat Enterprise Linux Server Red Hat Enterprise Lin
Red Hat Enterprise Linux Server 7.x CAStools 安装操作指导书 Copyright 2015 杭州华三通信技术有限公司版权所有, 保留一切权利 非经本公司书面许可, 任何单位和个人不得擅自摘抄 复制本文档内容的部分或全部, 并不得以任何形式传播 本文档中的信息可能变动, 恕不另行通知 目录 1 简介 1 2 配置前提 1 3 配置环境 1 3.1 服务器 1
Slide 1
IBM 大数据解决方案 Enterprise DataNode Using X3690X5 and EXP2512 Smarter Systems for a Smarter Planet 2011 IBM Corporation Reasons for using X3690X5 Data Node IBM System and Technology Group Advantage Description
SR-650 SR-652 SR-650HA/ 650/651 : 305 mm EtherNet/IP+PoE SR-650
SR-650 SR-652 SR-650H/ 650/651 : 305 mm EtherNet/IP+PoE SR-650 305 mm SR-652 305 mm 305 mm SR-650H/650/651 SR-652 2 可联网 可通过以太网进行联网 也支持 EtherNet/IP 和 PoE 通过网络连接可远程集中管理多个读取器 联网还为您提供了另一大优势 即可实时查看已扫描的图像 同时
(Quad-Core Intel Xeon 2.0GHz) ()(SAS) (Quad-Core Intel Xeon 2.0GHz) (Windows )(Serial ATA) (Quad-Core Intel Xeon 2.0GHz) (Linux)(Serial ATA)
LP5-970060 HP (EDA) HP (GIS) HP OEM HP z400 z600/xw6000 z800 xw9000 CPU 8 intel base 6SATA channel SAS Hard Disk PCI-X 192GB Memory CAE D H D SDHD CPU APRAM CPU, AMD Dual core Model 3D 64GB Memory SCI
ZoneFlex AP SKU ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * A
ZoneFlex AP SKU 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * AP AP ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex
Microsoft Word - 《Hadoop大数据技术与应用》教学大纲.doc
Hadoop 大数据技术原理与应用 课程教学大纲 ( 课程英文名称 ) 课程编号 :201800522062 学分 :5 学分学时 :63 学时 ( 其中 : 讲课学时 51 上机学时 :12) 先修课程 : 后续课程 :Spark 适用专业 : 大数据应用技术开课部门 : 一 课程的性质与目标 Hadoop 大数据技术原理与应用 是互联网 + 创业教育学院软件工程 ( 大数据 人工智能 ) 专业的一门校定必修专业课
电子－12页
创建信息市场 实现智能城市价值挖掘 伸手触摸未来 中国车联网 发展现状与前瞻 序言 2 车联网掀开未来汽车新篇章 2013 2000 7% 2014 17.5 2016 2019 56 12,221 73.4% 76.8% 67.2% 48.3% 201 WeChat 39% 4.68 中国驾车者更加推崇个性化的联网服务 1 2 1. 2014 17.5 2014 1 21 2. 2014 06 04
合集
Ver 1.0 版 本 目 录 第 一 章 当 大 数 据 遇 上 SSD 01 第 二 章 广 东 移 动 运 用 Hadoop 创 新 应 用 04 第 三 章 第 四 章 第 五 章 第 六 章 第 七 章 第 八 章 第 九 章 第 十 章 如 何 利 用 大 数 据 分 析 提 升 垃 圾 短 信 过 滤 效 果 广 东 电 信 用 大 数 据 重 构 室 内 网 优 大 数 据 提 升
* 4 6 R P r p . 1 2 3 4 7 89bk 6 5 1 2 3 4 5 6 7 8 9 0 bk r bl bm bn^ bo bl br bq bpbo bn bm [ ] [ ] [ ] bp 8 2 4 6 bq p [ ] [SET] br clckbt bs bs bt ck cl. 1 2 1 2+- 3 3 . 1 2 3 4 5 6 7 8 9 bk bl bm
白皮书 英特尔 IT IT 最佳实践 数据中心解决方案 2012 年 5 月 使用融合网络适配器整合以太网光纤通道 (FCoE) 网络 总体概述 使用双端口的英特尔 以太网 X520 服务器适配器切换到 FCoE 部署可以将每个服务器机架的总网络成本降低 50% 以上 为了整合局域
IT@lntel 白皮书 英特尔 IT IT 最佳实践 数据中心解决方案 212 年 5 月 总体概述 使用双端口的英特尔 以太网 X52 服务器适配器切换到 FCoE 部署可以将每个服务器机架的总网络成本降低 5% 以上 为了整合局域网和存储区域网基础设施以实现统一网络架构, 英特尔 IT 评估了使用融合网络适配器 (Converged Network Adapter, 简称 CNA) 切换到以太网光纤通道
第 期 曹 源 等 形式化方法在列车运行控制系统中的应用
第 卷 第 期 年 月 交通运输工程学报 曹 源 唐 涛 徐田华 穆建成 为了确保列车运行控制系统设计和开发的正确性 比较了仿真 测试和形式化 种能够验证 系统设计正确性的方式 根据列车运行控制系统对安全的苛求性 提出了 个与系统安全相关的重要特性 即实时性 混成性 分布 并发 性 反应性 并分析了与这些特性相关的具体形式化方法 通 过对每种形式化方法的数学基础和应用范围的分析和归类 给出了各种方法的优势和不足
帝国CMS下在PHP文件中调用数据库类执行SQL语句实例
帝国 CMS 下在 PHP 文件中调用数据库类执行 SQL 语句实例 这篇文章主要介绍了帝国 CMS 下在 PHP 文件中调用数据库类执行 SQL 语句实例, 本文还详细介绍了帝国 CMS 数据库类中的一些常用方法, 需要的朋友可以参考下 例 1: 连接 MYSQL 数据库例子 (a.php)
* r p . 4 6 12 3 5 7 8 9bk bm btbsbrbqbp bo bn bl [ ] [ ] [ ] [ ] [SET] 1 2 3 4 5 6 7. cmcl ck 8 9 0 bk bl bm bn bo 1 2 1 2+ - bp bq 8 2 4 6 br r bs p bt ck cl cm 3 3 . 1 2 3 4 5 6 7 8 9 bk bl bm
G1-0406国务院教学设备
广 西 科 联 招 标 中 心 公 开 招 标 采 购 文 件 项 目 名 称 : 教 学 设 备 采 购 项 目 编 号 :GXZC2016-G1-0406-KLZB 采 购 人 : 广 西 国 际 商 务 职 业 技 术 学 院 采 购 代 理 机 构 : 广 西 科 联 招 标 中 心 2016 年 5 月 目 录 第 一 章 公 开 招 标 公 告... 2 第 二 章 招 标 项 目 采
白皮书在固态硬盘高速缓存中采用差异化存储服务技术 目录 要点概述...1 背景...2 使用差异化存储服务技术来划分 I/O 优先级...3 评估在高速缓存中使用差异化存储服务技术...4 测试方法和系统配置...4 性能分析结果...5 财务分析结果...6 结论...8 相关阅
IT@lntel 白皮书 英特尔 IT 部门 IT 最佳实践存储和固态硬盘 2012 年 7 月 在固态硬盘高速缓存中采用差异化存储服务技术 要点概述 我们的测试结果表明, 差异化存储服务器能够显著提高应用吞吐量, 从而降低存储成本 Christian Black 英特尔 IT 部门企业架构师 Michael Mesnier 英特尔研究院研究科学家 Terry Yoshii 英特尔 IT 部门企业架构师
Presentation title goes here
ACP- 如何在微软 Azure HDInsight 优化 Hadoop 董乃文 Nevin Dong 资深技术顾问开发工具及平台事业部 (DX) 微软公司 朱晓勇 Xiaoyong Zhu 产品经理云计算与企业事业部 (C&E) 微软公司 Hadoop, HDInsight 及关键能力 HDInsight 性能及调优 典型应用场景 HDInsight 概述及关键能力 Hadoop as a Service,
Control Manager 6.0 Service Pack 3 System Requirements
趋势科技 ( 中国 ) 有限公司保留对本文档以及此处所述产品进行更改而丌通知的权利 在安装幵使用本软件之前, 请阅读自述文件 发布说明和最新版本的适 用用户文档, 这些文档可以通过趋势科技的以下 Web 站点获得 : http://docs.trendmicro.com/zh-cn/enterprise/control-manager.aspx 趋势科技 Trend Micro t 球徽标和控制管理中心都是趋势科技
白皮书 英特尔 IT Apache Hadoop* 英特尔分发版软件的最佳实践 目录 业务挑战 要点概述... 1 业务挑战... 2 Hadoop* 分发版注意事项... 3 Hadoop* 基础架构注意事项... 4 数据集成注意事项... 4 解决方案... 4 选择 Had
IT@Intel 白皮书 英特尔 IT 大数据和商业智能 2013 年 10 月 英特尔 IT 部署 Apache Hadoop* 英特尔分发版软件的最佳实践 要点概述 仅在五周之内, 我们就部署了基于 Apache Hadoop* 英特尔 分发版的低成本 可完全实现的大数据平台, 这为英特尔带来了价值数百万美元的 BI 成果 Ajay Chandramouly 英特尔 IT 大数据领域负责人 Sonja
产品资料
产品资料 光速 坚固 令人惊叹 Nytro 3000 SAS 固态硬盘 Seagate Nytro 3000 SAS 固态硬盘系列包含下一代高容量 高性能 SAS 固态硬盘, 设计中包含了多个专为需求型企业应用和改善总体拥有成本而优化的耐用性产品 行业领业领先的性能, 最高可达 2100MB/ 秒 Nytro 3000 固态硬盘系列可提供超快速 一致且可轻松扩展的性能, 让双 12Gb/ 秒 SAS
NX Nastran: 适于产品创新的新一代 CAE 系统 eds.com/products/plm/ds NX Nastran 优化工程最佳实践, 并与 NX 的世界级数字化原型开发和仿真能力结合起来, 以帮助企业降低产品全生命周期的成本, 获得竞争优势 NX PLM Solutions
NX Nastran: 适于产品创新的新一代 CAE 系统 eds.com/products/plm/ds NX Nastran 优化工程最佳实践, 并与 NX 的世界级数字化原型开发和仿真能力结合起来, 以帮助企业降低产品全生命周期的成本, 获得竞争优势 NX PLM Solutions bap!"#$%&' bap=mij=pçäìíáçåë!"#!"#!"#$%&!"#!"#$%&!"#bap!"#$%!"#$%&'()*+,!"#$%&'()*+,!"#$%&'()
CTY--0 BASE- 工业交换机 0 Primary Power LED Redundant Power LED Alarm LED port Mbps LED portlnk//act LED -0 0/ -port 0/ Industrial Switch CTY--0 工业交换机具有 个
0 CTY--0 BASE- 工业交换机 Primary Power LED Redundant Power LED Alarm LED port Mbps LED port LED ports () -0 -port 0/ Industrial Switch CTY--0 工业交换机具有 个 0/Base- Ethernet 交换机 该交换机外壳设计有槽纹 冗余供电电源 继电器功能监控, 这使得它具有广泛的应用范围
PowerPoint 演示文稿
大数据分析工具介绍 主讲 : 王建明 手机 :13940975206 QQ:564250480( 微信 ) 2/39 大数据的基本特征 特征 Volume 数据体量巨大 PB 级 -> EB 级 -> ZB 级 速度要求快数据输入输出的速度 Velocity Big Data Varity 数据类型多样文本 图像 视频 音频 Veracity 价值密度低商业价值高 Hadoop 生态系统介绍 ( 离线
九江职业大学2015届毕业生就业质量年度报告
2015 届 毕 业 生 就 业 质 量 年 度 报 告 - 0 - 二 一 五 年 十 二 月 九 江 职 业 大 学 2015 届 毕 业 生 就 业 质 量 年 度 报 告 前 言 九 江 职 业 大 学 是 1985 年 经 教 育 部 批 准 的 公 办 全 日 制 市 属 高 等 职 业 院 校 2006 年 4 月, 经 九 江 市 委 市 政 府 研 究 决 定 并 经 省 人 民
Microsoft PowerPoint - 03 Bob Liang_CHN Aug 10.ppt
2009 英特尔中国大学峰会 软件与服务的未来 -- 携手并进, 用 芯 创新 梁兆柱博士英特尔亚太研发有限公司总经理英特尔中国软件服务总经理 Copyright 2009, Intel Corporation Legal Disclaimer INFORMATION IN THIS DOCUMENT IS PROVIDED IN CONNECTION WITH INTEL PRODUCTS. NO
Microsoft Word - 134招标文件.doc
威 海 市 政 府 采 购 招 标 文 件 采 购 编 号 :WHGP2016-134 采 购 项 目 : 网 站 建 设 采 购 方 式 : 公 开 招 标 山 东 省 鲁 成 招 标 有 限 公 司 2016 年 5 月 20 日 目 录 第 一 部 分 招 标 公 告 2 第 二 部 分 投 标 人 须 知 4 第 三 部 分 开 标 评 标 定 标 13 第 四 部 分 采 购 项 目 说
IQ
TRITON APX IQ TRITON APX TRITON APX TRITON TRITON APX TRITON AP-WEB Websense ACE Web DLP TRITON APX IT TRITON APX Web TRITON APX DLP TRITON APX DLP Web (DLP) TRITON AP-WEB TRITON AP-EMAIL DLP (OCR) TRITON
CHANGHONG ISILON S 系列 CHANGHONG Isilon S200 CHANGHONG Isilon S210 由 OneFS 操作系统提供支持的 CHANGHONG Isilon S 系列使用非常全面而简单的横向扩展存储体系结构, 可加快对海量关键数据的访问速度, 同时大幅降低
CHANGHONG ISILON S 系列 CHANGHONG Isilon S200 CHANGHONG Isilon S210 由 OneFS 操作系统提供支持的 CHANGHONG Isilon S 系列使用非常全面而简单的横向扩展存储体系结构, 可加快对海量关键数据的访问速度, 同时大幅降低成本和复杂性 Isilon S 系列包括两条产品线 :Isilon S200 和 S210 这两条产品线均为高性能
大数据技术原理与应用
大数据技术原理与应用 厦门大学计算机科学系厦门大学计算机科学系林子雨 2015 年版 ziyulin@xmu.edu.cn 大数据技术原理与应用 http://dblab.xmu.edu.cn/post/bigdata 温馨提示 : 编辑幻灯片母版, 可以修改每页 PPT 的厦大校徽和底部文字 第二章大数据处理架构 Hadoop (PPT 版本号 :2015 年 6 月第 1.0 版 ) 林子雨厦门大学计算机科学系
エスポラージュ株式会社 住所 : 東京都江東区大島 東急ドエルアルス大島 HP: ******************* * 关于 Java 测试试题 ******
******************* * 关于 Java 测试试题 ******************* 問 1 运行下面的程序, 选出一个正确的运行结果 public class Sample { public static void main(string[] args) { int[] test = { 1, 2, 3, 4, 5 ; for(int i = 1 ; i System.out.print(test[i]);
IDEO_HCD_0716
IDEO HCD Toolkit Tencent CDC ...? Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC Tencent CDC
<4D6963726F736F667420576F7264202D20B8EAB054B35DB3C6B1C4C1CAABD8C4B3AAED2D313031A67E3131A4EB31352EB8B9A7F3B7732E646F63>
一 個 人 電 腦 ( 中 信 局 ) LP5-100066 ( 契 約 起 始 日 期 :101/06/04, 終 止 日 期 :102/05/31) ( 3 年 之 到 府 人 工 及 零 件 保 固 服 務 ) 等 級 規 格 預 算 CPU RAM HDD 獨 立 顯 卡 其 他 建 議 型 號 備 註 行 政 入 門 個 人 電 腦 ( 含 19 吋 以 螢 幕 ) IntelCore i3-3.3ghz
支持的趋势科技服务器深度安全防护系统功能（按平台划分）
趋势科技服务器深度安全防护系统 9.6 平台支持的功能 趋势科技 ( 中国 ) 有限公司保留对本文档以及此处所述产品进行更改而不通知的权利 在安装及使用本软件之前, 请阅读自述文件 发布说明和最新版本的适用用户文档, 这些文档可以通过趋势科技的以下 Web 站点获得 :http://www.trendmicro.com/download/zh-cn/ Trend Micro Trend Micro
第 卷 第 期 年 月 半 导 体 学 报! " # $%&'%' $!&' #% #$1 /#1 $'! / ?/ ?/ / 3 0,?/ ) * +!!! '!,!! -. & ' $! '! 4% %&1)/1(7%&)03 (% )
第 卷 第 期 年 月!"# $%&'%' $!&'#%#$1/#1 $'! /18103 2?/03101?/18103 /3 0,?/0301.13 )*+!!! '!,!! -.&' $!'! 4%%&1)/1(7%&)03(%)%&,%*(1&0)%$-0*,%30)17*1*)0(+1(1+&1*+*),)1; &113(%44(10&.0701&0-&00*/)%;()1%-1+%&0)0*1*)%
PowerPoint 簡報
影像讯号输出信息 1. 参考表格内外接屏幕输出栏位中连接的输出接口及所支持的屏幕分辨率和屏幕刷新率 2. 影像讯号输出栏位提供各输出接口数量及版本 3. 参考表格内使用的缩写列表 5. 欲使用 3D 蓝光影片播放, 须符合下列需求 一台读取 2X 或更快速的蓝光光驱 一套支持 3D 蓝光影片播放软件 ( 例如 PowerDVD Ultra 版本或任何 3D 播放软件 ) 3. 欲了解特定输出接口与哪张显示芯片连接
Upgrading Data Center Network Architecture to 10 Gigabit Ethernet
英特尔 IT 部门 IT 最佳实践数据中心 2011 年 1 月 概要 升级网络架构有助于优化我们的数据中心基础设施, 以便更快地响应业务需求, 同时显著改进 IT 部门为整个企业提供的服务和价值 为了满足数据中心增长对英特尔网络提出的更高要求, 英特尔 IT 部门正在将我们的数据中心网络架构升级到 10 GB 以太网 现有的 和 1 GbE 连接已经无法支持英特尔的业务增长需求 我们全新的 10
第四章 １０２ 图 ４唱１６ 基于图像渲染的理论基础 三张拍摄图像以及它们投影到球面上生成的球面图像 拼图的圆心是相同的 而拼图是由球面图像上的弧线图像组成的 因此我 们称之为同心球拼图 如图 ４唱１８ 所示 这些拼图中半径最大的是圆 Ｃｋ 最小的是圆 Ｃ０ 设圆 Ｃｋ 的半径为 ｒ 虚拟相机水平视域为 θ 有 ｒ Ｒ ｓｉｎ θ ２ ４畅１１ 由此可见 构造同心球拼图的过程实际上就是对投影图像中的弧线图像
ZoneFlex ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex
ZoneFlex 902-0120-0000 ZoneFlex R720 ZoneFlex R710 ZoneFlex R700* ZoneFlex R600* ZoneFlex R610* ZoneFlex R500* ZoneFlex R510* ZoneFlex R310 * ZoneFlex R710 (1) (2) 6 902-0100-0000 ZoneFlex R700 7982 (1)