大数据和大数据平台的那些事

Size: px
Start display at page:

Download "大数据和大数据平台的那些事"

Transcription

1 苏宁云商的大数据平台架构 王志强 苏宁云商. 大数据中心. 平台开发部

2 关于我和我的小伙伴们 大数据中心. 平台开发部 团队 职责 : 提供集团各个业务所需要的存储和计算能力 保证平台的稳定 高效运行 提高平台易用性 目标 : 打造稳定 易用 高效的平台, 提高数据分析效率, 实现人人都是数据分析师 我 大数据攻城狮 5 年的大数据工作经验 2015/7/28 Copyright , 苏宁云商 2

3 内容 发展概况 总体框架 平台介绍 TO DO 2015/7/28 Copyright , 苏宁云商 3

4 发展概况 - 特点 发展快 节点,5w+ job/ 天 -- 作为苏宁基础数据平台, 在公司内广泛使用 中心或部门,200+ 开发者 开源为主, 辅以自研 -- 基础平台以开源为主 -- 部分组件自研 2015/7/28 Copyright , 苏宁云商 4

5 发展概况 - 平台 海量数据平台 HDFS/Yarn/Hive/MapReduce/Spark 流式计算平台 Storm/Libra KV 存储平台 HBase/Cassandra 数据开发平台 (CBT) 2015/7/28 Copyright , 苏宁云商 5

6 总体框架 - 架构 外部系统 数据工程师, 运营, 产品经理, 外部人员 服务对象 数据交换模块 数据开发平台数据分析平台平台服务层 监控模块调度模块权限管理数据清洗元数据优化模块 平台管理层 Zookee per Flume Hive MapReduce Spark Libra HBase Yarn Storm HDFS Cassandra 基础平台层 Web 日志 APP 日志爬虫合作数据企业经营数据 数据源 2015/7/28 Copyright , 苏宁云商 6

7 海量数据平台 包括 :Hadoop Hive Spark 海量数据存储 离线计算 内存 / 迭代计算 算法平台 2015/7/28 Copyright , 苏宁云商 7

8 海量数据平台 -Hadoop 部署架构 平台管理 监控体系 运行分析 分享 升级过程 问题及解决 2015/7/28 Copyright , 苏宁云商 8

9 海量数据平台 -Hadoop 网络部署架构 单独划分网络区域 主节点隔离 2015/7/28 Copyright , 苏宁云商 9

10 海量数据平台 -Hadoop 逻辑部署架构 HDFS HA Yarn HA 不同组件不同用户部署 客户端统一管理 2015/7/28 Copyright , 苏宁云商 10

11 海量数据平台 -Hadoop 平台管理 自动化扩容 统一配置管理 用户管理 按部门 / 业务分配 hadoop 账户 权限控制 机器接入权限 目录文件访问权限 2015/7/28 Copyright , 苏宁云商 11

12 海量数据平台 -Hadoop 监控体系 主机层监控 CPU,Memory(Free,Swap), Network(ping,usage,mode), Disk(inode, free, iowait),linux kernel(dmesg) 平台层监控 端口监控, 进程监控,JVM GC, 丢块监控, 长 job 监控, 容量监控,HA 切换监控 pending app 监控,dead 节点数, 失败原因分析 应用层监控 Hdfs 应用层监控 : put/get Yarn/MR 应用层监控 :wordcount, 单独资源池, 防止误报 Hive 应用层监控 :drop/create table 2015/7/28 Copyright , 苏宁云商 12

13 海量数据平台 -Hadoop 运行分析 HDFS 总体情况 : 总容量, 已使用容量, 剩余容量,Live Nodes,DeadNodes, 目录数, 文件数, 新增数据量, 新增目录数, 新增文件数 分用户统计 : 总数据量, 新增数据量, 平均文件大小, 空间使用率 Yarn: 总体情况 : 总资源量, 按小时统计 CPU/Memory 使用量, 资源使用率 分 pool 统计 : 资源量, 资源使用率, 每个时间点的资源使用率 2015/7/28 Copyright , 苏宁云商 13

14 海量数据平台 -Hadoop 运行分析 MapReduce 统计 统计信息包括 : 提交任务总数, 成功 / 失败任务数,map/reduce tasks 数,datalocal 比例,rack local 比例, 总处理数据量,map 平均处理数据量 / 处理时间,map 处理效率,reduce 平均处理时间等 Job 评分机制 通过分析 Job Counters, 计算 Job 的得分, 督促提交者优化 job 评判标准 : 尽量减少 overhead 和 IO 权重因子 :map overhead,map spill 数据量大小, 中间结果是否压缩, 是否长尾, reduce 数是否合理等 2015/7/28 Copyright , 苏宁云商 14

15 海量数据平台 -Hadoop Hadoop 升级过程 背景原有的 Hadoop 版本存在问题 : 可靠性差 资源利用率低 不支持多种计算架构 升级到 版本 那么, 问题来了 这么多业务, 兼容性? 升级不成功咋办?? 回滚失败咋办??? 数据丢了咋办???? 2015/7/28 Copyright , 苏宁云商 15

16 海量数据平台 -Hadoop 方案对比 Hadoop upgrade 硬升级 优点 : 简单代价最小缺点 : 风险大不可控 Upgrade 硬升级 + 数据备份 优点 : 风险较小 缺点 : 非常复杂代价大 数据迁移, 切业务 优点 : 风险小 缺点 : 复杂代价大 2015/7/28 Copyright , 苏宁云商 16

17 海量数据平台 -Hadoop 技术点 : 全量拷贝 + 增量拷贝 : 通过 hdfs audit 日志分析更改的目录或文件 DistCp 改造 : 跨集群同路径拷贝 回滚方案 实施过程 : 1. 启动 audit 定时分析 2. 数据全量拷贝 3. 数据增量拷贝 4. 集群进入 safemode 模式 5. 数据增量拷贝 6. 数据准确性校验 7. 切客户端软链接 8. 验证 2015/7/28 Copyright , 苏宁云商 17

18 海量数据平台 -Hadoop 问题及解决 HDFS HA 切换后,Missing 块? 原因 : standby namenode 回放 edits log 的操作落后于 datanode blockreport 解决 : datanode 发现 namenode 切换后, 立即触发一次全量块汇报 2015/7/28 Copyright , 苏宁云商 18

19 海量数据平台 -Hadoop HDFS HA 切换后,DN 少了, 但 DN 并没有挂? 正常启动 : 异常启动 : 解决 : 1. 启动 hdfs 时, 待 namenode 都 standby 状态后, 再启动 ZKFC 方案 2 和 3, 参考 X 2015/7/28 Copyright , 苏宁云商 19

20 海量数据平台 -Hadoop 问题及解决 数据误删问题? 屏蔽 skiptrash 命令, 删除数据必须先进入 Trash 数据量 /Job 一直在增长, 用户无成本意识, 无优化动力? Job 评分机制, 排名, 优化建议 计费 空间问题 : 自动压缩, 冷数据归档, 自动合并小文件 ResourceManager Crash 退出 Hive Client CPU 100% 的问题 2015/7/28 Copyright , 苏宁云商 20

21 海量数据平台 -Hive 内容 元数据存储 安全 权限管理 2015/7/28 Copyright , 苏宁云商 21

22 海量数据平台 -Hive 元数据存储 Mysql MHA VIP 高可靠 0 事故 2015/7/28 Copyright , 苏宁云商 22

23 海量数据平台 -Hive 安全 定时 dump 元数据并备份 javax.jdo.option.connectionpassword 配置参数加密 原始数据和结果数据用外部表中间结果数据用内部表 2015/7/28 Copyright , 苏宁云商 23

24 海量数据平台 -Hive 权限管理 采用 Hive 自带的权限控制方案 实现管理员功能, 只有管理员有赋权权限 跨用户访问数据, 必须申请权限 HiveServer2 的安全管理 为每个 Hadoop 用户启动一个 hiveserver2, 不同机器不同端口 2015/7/28 Copyright , 苏宁云商 24

25 海量数据平台 -Spark 发展情况 刚起步 生产集群 Ready 即将上线一个迭代式计算 正在对接三个中心的算法需求 定位 快速计算 迭代计算 算法平台 2015/7/28 Copyright , 苏宁云商 25

26 流式计算平台 开源 Storm 节点 12 个业务 复杂算法 数据清洗 实时推荐 数据易道等 Storm Libra 自研 50+ 节点 近 300 个 sql 简单 sql 可描述 流量分析 性能监控等 2015/7/28 Copyright , 苏宁云商 26

27 流式计算平台 -Libra 简化 Storm 应用开发, 实现 Sql on Storm 简单易 用 稳定 Libra 功能强 大 快速上 线 2015/7/28 Copyright , 苏宁云商 27

28 流式计算平台 -Libra 功能 支持的语法格式 : 时间滑动窗口 : 例如最近 5 分钟内某个 IP 的登陆次数 支持的运算窗口 : 时间批量窗口 : 例如某个会员账号每天的付款总额 长度滑动窗口 : 例如某个会员最近 5000 次登陆的平均时间 长度批量窗口 : 例如某个会员每 10 次的平均付款金额 支持的运算操作 : 2015/7/28 Copyright , 苏宁云商 28

29 流式计算平台 -Libra 功能 支持的消息 : 格式化 :JSON XML 非格式化 : 特殊字符间隔 支持的输入数据源 : Kafka MQ 支持的输出数据源 : Kafka MQ Cassandra Hbase Redis DB 支持的输出方式 : 实时输出 定时输出 2015/7/28 Copyright , 苏宁云商 29

30 流式计算平台 -Libra 技术点 Select count(distinct userid) from login group by ip ANTLR 词法分析 select distinct count from group by 语法分析 按 ip 分组 (group by), 对 userid 去重 (distinct), 输出去重后 userid 数量 (count) 抽象语法树 逻辑运算 2015/7/28 Copyright , 苏宁云商 30

31 流式计算平台 -Libra 将不同的算子映射到四种 spout/bolt 上去 Topology Bolt login Login_sql1 result result Bolt spout Login_sql2 Bolt Bolt Bolt Login_sql3 Bolt result Bolt 输入 事件分发过滤 SQL 语法解析 输出 统计计算 2015/7/28 Copyright , 苏宁云商 31

32 流式计算平台 - 问题及解决 Worker 挂了, 内存数据丢失? 使用 Cassandra 缓存中间结果 增量写入 延迟加载 Big Topology 的页面刷新慢 原因 : 可视化需要加载 zk 数据, 耗时严重 解决 : 只在点击显示可视化时, 才触发取数据的操作 2015/7/28 Copyright , 苏宁云商 32

33 流式计算平台 - 问题及解决 Jar 包太大导致 Topology 启动慢? 原因 :jar 包太大, 导致 supervisor 下载 jar 包时对 nimbus 带宽压力大, 下包时间比较长 解决 : 代码包及依赖包分离, 依赖包提前分发 Supervisor 找不到 jar 包, 导致挂掉? 原因 : 1. supervisor 两个线程不同步 2. supervisor 与 nimbus 状态不同步 解决 : 捕获异常并处理 2015/7/28 Copyright , 苏宁云商 33

34 流式计算平台 - 监控 实时计算监控报警尤其重要!! 平台监控 : 进程监控,worker 监控,zk 服务监控,worker 内存监控 业务监控 : 失败, 堆积, 数据质量监控等 Storm Monitor 2015/7/28 Copyright , 苏宁云商 34

35 流式计算平台 - 监控 2015/7/28 Copyright , 苏宁云商 35

36 KV 存储平台 包括 HBase,Cassandra HBase: 海量 KV 存储 应用场景 : 搜索 query 分析 商品分析 广告联盟 云台纵览等 目标 : 在线 KV 平台 Cassandra: 流式计算缓存中间结果数据和存储结果数据 2015/7/28 Copyright , 苏宁云商 36

37 KV 存储平台 -HBase 监控 2015/7/28 Copyright , 苏宁云商 37

38 KV 存储平台 -HBase Cluster HA Replication Monitor Failover 1 管理 2 HA 相关配置 & 手动切换 Admin HA Moniter 4 集群监控 3.Switch HA 5 集群监控 Zookeeper( 配置管理 ) Hbase Cluster A 6 Replication,snapshot Hbase Cluster B Thrift 7 数据流 Java 8 数据流 Client 9 同步集群状态 & 配置 2015/7/28 Copyright , 苏宁云商 38

39 数据开发平台 (CBT) 2015/7/28 Copyright , 苏宁云商 39

40 数据开发平台 (CBT) 定位 : 为各个计算平台提供统一的 易用的开发平台 功能模块 : 数据质量管理 交互式分析元数据管理权限管理数据交换工具任务及任务流管理调度 2015/7/28 Copyright , 苏宁云商 40

41 数据开发平台 (CBT) 特点 集群式结构 主节点 HA 高可靠 易扩展 多平台支持 总体架构 2015/7/28 Copyright , 苏宁云商 41

42 TO DO 流式计算服务化 (Storm As A Service) 公有云开放服务 完善数据开发平台, 优化用户体验 Spark 推广应用 参与社区 2015/7/28 Copyright , 苏宁云商 42

43 The End Thanks 如果你对苏宁大数据技术有兴趣, 欢迎来聊聊 ~~~~ 你懂的 O( _ )O~ 2015/7/28 Copyright , 苏宁云商 43

PowerPoint 演示文稿

PowerPoint 演示文稿 流式计算在苏宁的发展历程 苏宁云商. 大数据平台研发中心 张毅 2016/9/26 苏宁云商. 大数据平台研发中心 1 关于我和我的小伙伴们 大数据平台研发中心 团队 职责 : 提供集团各个业务所需要的存储和计算能力 保证平台的稳定 高效运行 提高平台易用性 我 目标 : 打造稳定 易用 高效的平台, 提高数据分析效率, 实现人人都是数据分析师 大数据攻城狮 6 年工作经验,3 年半的流式计算领域相关经验

More information

培 训 机 构 介 绍 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培

培 训 机 构 介 绍  中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开 展 Hadoop 云 计 算 的 培 Hadoop 2.0 培 训 Hadoop 2.0Training Hadoop 2.0 运 维 与 开 发 实 战 培 训 邀 请 函 培 训 机 构 介 绍 www.zkpk.org 中 科 普 开 是 国 内 首 家 致 力 于 IT 新 技 术 领 域 的 领 航 者, 专 注 于 云 计 算 大 数 据 物 联 网 移 动 互 联 网 技 术 的 培 训, 也 是 国 内 第 一 家 开

More information

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1

业 务 与 运 营 Business & Operation (Transform) 加 载 (Load) 至 目 的 端 的 过 程, 该 部 分 在 数 据 挖 掘 和 分 析 过 程 中 为 最 基 础 的 一 部 分 一 个 良 好 的 ETL 系 统 应 该 有 以 下 几 个 功 能 1 Business & Operation 业 务 与 运 营 大 数 据 技 术 在 精 准 营 销 中 的 应 用 王 小 鹏 北 京 东 方 国 信 科 技 股 份 有 限 公 司 北 京 100102 摘 要 简 要 介 绍 主 流 的 大 数 据 技 术 架 构 和 大 数 据 挖 掘 技 术 ; 阐 述 大 数 据 技 术 在 精 准 营 销 与 维 系 系 统 建 设 中 的 应 用,

More information

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项

白 皮 书 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 目 录 要 点 概 述...1 业 务 挑 战...2 Hadoop* 分 发 版 注 意 事 项...3 Hadoop* 基 础 架 构 注 意 事 项 IT@Intel 白 皮 书 英 特 尔 IT 部 门 大 数 据 和 商 业 智 能 2013 年 10 月 英 特 尔 IT 部 门 实 施 Apache Hadoop* 英 特 尔 分 发 版 软 件 的 最 佳 实 践 要 点 概 述 仅 在 五 周 之 内, 我 们 就 实 施 了 基 于 Apache Hadoop* 英 特 尔 分 发 版 的 低 成 本 可 完 全 实 现 的 大 数

More information

目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡...

目 录 1 不 断 开 发 工 具 以 管 理 大 数 据...2 1.1 Hadoop* 简 介 : 支 持 从 大 数 据 中 获 得 出 色 价 值 的 可 靠 框 架... 2 1.2 大 数 据 技 术 的 行 业 生 态 系 统... 2 2 在 关 键 组 件 中 实 现 平 衡... 白 皮 书 英 特 尔 固 态 硬 盘 英 特 尔 以 太 网 融 合 网 络 英 特 尔 Hadoop* 发 行 版 软 件 应 用 大 数 据 技 术 获 得 近 实 时 分 析 巨 大 成 效 1 平 衡 的 基 础 设 施 使 工 作 负 载 完 成 时 间 从 4 小 时 缩 短 为 7 如 今, 基 于 广 泛 可 用 的 计 算 存 储 和 网 络 组 件 的 改 进, 商 业 学 术

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 Apache Spark 与 多 数 据 源 的 结 合 田 毅 @ 目 录 为 什 么 会 用 到 多 个 数 据 源 Spark 的 多 数 据 源 方 案 有 哪 些 已 有 的 数 据 源 支 持 Spark 在 GrowingIO 的 实 践 分 享 为 什 么 会 用 到 多 个 数 据 源 从 数 据 本 身 来 看 大 数 据 的 特 性 之 一 :Variety 数 据 的 多 样

More information

案例分享产品文档

案例分享产品文档 消 息 队 列 案 例 分 享 产 品 文 档 版 权 声 明 2015-2016 腾 讯 云 版 权 所 有 本 文 档 著 作 权 归 腾 讯 云 单 独 所 有, 未 经 腾 讯 云 事 先 书 面 许 可, 任 何 主 体 不 得 以 任 何 形 式 复 制 修 改 抄 袭 传 播 全 部 或 部 分 本 文 档 内 容 商 标 声 明 及 其 它 腾 讯 云 服 务 相 关 的 商 标 均

More information

<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63>

<4D6963726F736F667420576F7264202D204861646F6F70B4F3CAFDBEDDBCB0BAA3C1BFCAFDBEDDCDDABEF2D3A6D3C3B9A4B3CCCAA6C5E0D1B5B0E056312E332E646F63> 关 于 举 办 Hadoop 大 数 据 及 海 量 数 据 挖 掘 应 用 工 程 师 培 训 班 的 通 知 随 着 云 时 代 的 来 临, 大 数 据 技 术 将 具 有 越 来 越 重 要 的 战 略 意 义 大 数 据 分 析 与 挖 掘 技 术 已 经 渗 透 到 每 一 个 行 业 和 业 务 职 能 领 域, 逐 渐 成 为 重 要 的 生 产 要 素, 人 们 对 于 海 量 数

More information

第 06 期 李祥池 : 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 1 日志 1.1 日志定义 IT 1.2 日志处理方案演进 v1.0 v2.0 Hadoop Storm Spark Hadoop/Storm/Spark v3.0 TB Splunk ELK SI

第 06 期 李祥池 : 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 1 日志 1.1 日志定义 IT 1.2 日志处理方案演进 v1.0 v2.0 Hadoop Storm Spark Hadoop/Storm/Spark v3.0 TB Splunk ELK SI 电子科学技术第 02 卷第 06 期 2015 年 11 月 Electronic Science & Technology Vol.02 No.06 Nov.2015 年 基于 ELK 和 Spark Streaming 的日志分析系统设计与实现 李祥池 ( 杭州华三通信技术有限公司北京研究所, 北京,100085) 摘要 : 在大数据时代 对数据平台各组件的运行状态实时监控与运行分析具有重要意义

More information

ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示

ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 完整的大数据解決方案 ABOUT ME AGENDA 唐建法 / TJ MongoDB 高级方案架构师 MongoDB 中文社区联合发起人 Spark 介绍 Spark 和 MongoDB 案例演示 Dataframe Pig YARN Spark Stand Alone HDFS Spark Stand Alone Mesos Mesos Spark Streaming Hive Hadoop

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 Hadoop 生 态 技 术 在 阿 里 全 网 商 品 搜 索 实 战 阿 里 巴 巴 - 王 峰 自 我 介 绍 真 名 : 王 峰 淘 宝 花 名 : 莫 问 微 博 : 淘 莫 问 2006 年 硕 士 毕 业 后 加 入 阿 里 巴 巴 集 团 淘 及 搜 索 事 业 部 ( 高 级 技 术 与 家 ) 目 前 负 责 搜 索 离 线 系 统 团 队 技 术 方 向 : 分 布 式 计 算

More information

DPark MapReduce (Davies) davies@douban.com 2011/12/07 Velocity China 2011 Douban Douban 5500 Douban 5500 1000G, Douban 5500 1000G, 60+ Douban 5500 1000G, 60+ 200+ Douban 5500 1000G, 60+ 200+ > MooseFS

More information

水晶分析师

水晶分析师 大数据时代的挑战 产品定位 体系架构 功能特点 大数据处理平台 行业大数据应用 IT 基础设施 数据源 Hadoop Yarn 终端 统一管理和监控中心(Deploy,Configure,monitor,Manage) Master Servers TRS CRYSTAL MPP Flat Files Applications&DBs ETL&DI Products 技术指标 1 TRS

More information

基于 SQL-on-Hadoop 的 网络日志分析

基于 SQL-on-Hadoop 的 网络日志分析 1896 1920 1987 2006 基于 SQL-on-Hadoop 的 网络日志分析 章思宇, 姜开达, 韦建文, 罗萱, 王海洋 上海交通大学网络信息中心 2014 年 11 月 事后追查 校园网安全日志分析 已经发生, 已被发现的入侵 攻击检测 已经发生, 尚不知晓的攻击 正在进行的攻击 (APT) 漏洞挖掘 发现尚未被利用的漏洞 镜像流量抓包分析 网络流量日志采集 Internet 缓存加速系统

More information

Reducing Client Incidents through Big Data Predictive Analytics

Reducing Client Incidents through Big Data Predictive Analytics IT@lntel 白 皮 书 英 特 尔 IT 部 门 IT 最 佳 实 践 大 数 据 预 测 分 析 2013 年 12 月 通 过 大 数 据 预 测 分 析 减 少 客 户 端 事 故 总 体 概 述 相 比 过 去 的 被 动 反 应, 我 们 现 在 能 够 更 容 易 主 动 找 出 客 户 端 问 题, 并 及 时 将 其 修 复 以 免 问 题 扩 大, 从 而 为 企 业 节 约

More information

站在hadoop上看hive

站在hadoop上看hive Hive 优化以及执行原理 数据平台杨新彦 2014-01-13 1. 整体架构优化 2. MR 阶段优化 3. JOB 优化 4. SQL 作业优化 5. 平台优化 开发量大 为什么要用 hive 简单 SELECT word, count(1) FROM ( select explode(split(line, \s )) AS word FROM article ) w GROUP BY word

More information

Microsoft Word - 文化2016(2)修改.doc

Microsoft Word - 文化2016(2)修改.doc 目 录 文 化 热 点... 1 各 地 举 办 多 彩 文 化 活 动 共 庆 猴 年 新 春...1 城 市 规 划 馆 要 有 文 化 特 色...3 春 晚 : 一 桌 丰 盛 的 文 化 年 夜 饭...4 文 化 需 求 超 乎 想 象...5 首 都 百 万 民 众 走 进 博 物 馆 过 年...8 文 化 下 乡 要 服 水 土...9 习 近 平 总 书 记 在 党 的 新 闻

More information

臺銀人壽「98年九至十一職等人員甄試」

臺銀人壽「98年九至十一職等人員甄試」 桃 園 大 眾 捷 運 公 司 104 年 度 新 進 人 員 甄 試 簡 章 執 行 單 位 : 銘 傳 大 學 地 址 : 台 北 市 士 林 區 中 山 北 路 五 段 250 號 電 話 :(02)28809748 服 務 時 間 : 週 一 至 週 五 8:10~17:00 E-mail:pr@mail.mcu.edu.tw 中 華 民 國 104 年 5 年 1 日 公 告 關 於 桃

More information

合集

合集 Ver 1.0 版 本 目 录 第 一 章 当 大 数 据 遇 上 SSD 01 第 二 章 广 东 移 动 运 用 Hadoop 创 新 应 用 04 第 三 章 第 四 章 第 五 章 第 六 章 第 七 章 第 八 章 第 九 章 第 十 章 如 何 利 用 大 数 据 分 析 提 升 垃 圾 短 信 过 滤 效 果 广 东 电 信 用 大 数 据 重 构 室 内 网 优 大 数 据 提 升

More information

30.00% 25.00% 25.00% 22.50% 20.00% 15.00% 12.50% 15.00% 12.50% 10.00% 7.50% 5.00% 2.50% 2.50% 0.00% 文 学 理 学 工 学 法 学 教 育 学 管 理 学 历 史 学 艺 术 学 ( 三 ) 学 生

30.00% 25.00% 25.00% 22.50% 20.00% 15.00% 12.50% 15.00% 12.50% 10.00% 7.50% 5.00% 2.50% 2.50% 0.00% 文 学 理 学 工 学 法 学 教 育 学 管 理 学 历 史 学 艺 术 学 ( 三 ) 学 生 四 川 文 理 学 院 2014 年 本 科 教 学 质 量 报 告 2014 年 来, 在 教 育 主 管 部 门 的 关 怀 指 导 下, 在 学 校 党 政 班 子 的 正 确 领 导 下, 广 大 师 生 员 工 团 结 一 心, 按 照 国 家 中 长 期 教 育 改 革 和 发 展 规 划 纲 要 和 教 育 部 对 办 应 用 型 本 科 的 要 求, 深 入 贯 彻 落 实 学 校

More information

项目采购需求编写模板

项目采购需求编写模板 金 税 三 期 工 程 第 二 阶 段 外 部 信 息 交 换 项 目 竞 争 性 磋 商 文 件 技 术 部 分 项 目 编 号 :0706-15410008N059 采 购 人 : 国 家 税 务 总 局 采 购 代 理 机 构 : 中 国 技 术 进 出 口 总 公 司 二 〇 一 五 年 十 二 月 1 / 91 目 录 第 一 章 金 税 三 期 工 程 项 目 背 景... 5 1.1

More information

计算机网络与经济(六).doc

计算机网络与经济(六).doc ... IBM... XML WEB.................. IT AMD... 40 IT... ESA 29......... I IBM XML Web 2004 KV IT

More information

分布式数据库期中作业说明

分布式数据库期中作业说明 厦 门 大 学 林 子 雨 编 著 大 数 据 技 术 原 理 与 应 用 ( 版 本 号 :2016 年 4 月 13 日 版 本 ) ( 备 注 :2015 年 8 月 1 日 第 一 版 教 材 中 没 有 本 章, 本 章 为 2016 年 新 增 内 容, 将 被 放 入 第 二 版 教 材 中 ) ( 版 权 声 明 : 版 权 所 有, 请 勿 用 于 商 业 用 途 ) 主 讲 教

More information

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式]

Microsoft PowerPoint - Big Data rc Sharing掃盲時間.ppt [相容模式] Big Data RC Sharing 大數據掃盲 Service Planner of Enterprise Big Data 大 數 據 服 務 規 劃 師 企 業 大 數 據 課 程 規 劃 依 照 企 業 資 料 流 程 的 特 殊 性, 安 排 合 適 的 課 程 協 助 企 業 導 入 應 用 大 數 據 案 例 :Etu 資 策 會 平 安 保 險 湖 南 國 防 科 技 大 學 等

More information

Chapter #

Chapter # 第三章 TCP/IP 协议栈 本章目标 通过本章的学习, 您应该掌握以下内容 : 掌握 TCP/IP 分层模型 掌握 IP 协议原理 理解 OSI 和 TCP/IP 模型的区别和联系 TCP/IP 介绍 主机 主机 Internet TCP/IP 早期的协议族 全球范围 TCP/IP 协议栈 7 6 5 4 3 应用层表示层会话层传输层网络层 应用层 主机到主机层 Internet 层 2 1 数据链路层

More information

天津天狮学院关于修订2014级本科培养方案的指导意见

天津天狮学院关于修订2014级本科培养方案的指导意见 目 录 天 津 天 狮 院 关 于 修 订 2014 级 本 科 培 养 方 案 的 指 导 意 见...1 金 融 类 专 业...9 金 融 专 业 培 养 方 案...9 保 险 专 业 培 养 方 案...14 人 力 资 源 管 理 专 业 培 养 方 案...19 劳 动 与 社 会 保 障 专 业 培 养 方 案...24 工 商 管 理 类 专 业...29 市 场 营 销 专 业

More information

pdf

pdf i ii iii 1 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 QCon QCon InfoQ DNS StartRender Full load QPS 20% Dom html 26 URI Profile RT QPS URI profile InfoQ RT 50ms 40ms 10ms 20% RT Velocity

More information

Azure_s

Azure_s Azure ? Azure Azure Windows Server Database Server Azure Azure Azure Azure Azure Azure Azure Azure OpenSource Azure IaaS Azure VM Windows Server Linux PaaS Azure ASP.NET PHP Node.js Python MS SQL MySQL

More information

untitled

untitled ArcSDE ESRI ( ) High availability Backup & recovery Clustering Replication Mirroring Standby servers ArcSDE % 95% 99.9% 99.99% 99.999% 99.9999% 18.25 / 8.7 / 52.5 / 5.25 / 31.8 / Spatial Geodatabase

More information

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI

美國政府推行 大數據的研究與發展計畫, 希望藉著提升從大型複雜的資料中提取知識的能力, 能加快科學和工程的開發並保障國家安全 資料科學與大數據 National Institute of Standards and Technology, NIST Jim Gray NI 一般報導 大數據與 巨量資料分析 曾龍 我們需要你 資料科學家 來幫助國民建立更好的數位服務 幫助我們揭開更新的創意 幫助我們改善這個國家和全世界 美國總統歐巴馬 在 2012 年 10 月發行的 哈佛商業評 論 中 戴 文 波 特 湯 姆 斯 Thomas H. Davenport 及 帕 蒂 爾 D.J. Patil 發 表 了 一篇文章 描述 21 世紀最性感的職業 資料科學家 Data Scientist:

More information

zxj

zxj 舟 办 通 报 第 8 期 中 共 舟 山 市 委 办 公 室 2016 年 4 月 29 日 按 : 现 将 周 江 勇 同 志 在 2016 年 4 月 28 日 在 全 市 两 学 一 做 专 题 党 课 暨 学 习 教 育 部 署 会 上 的 讲 话 予 以 印 发, 请 认 真 贯 彻 落 实 学 党 章 党 规 学 系 列 讲 话, 做 合 格 党 员 学 习 教 育, 是 党 中 央

More information

<443A5CCED2B5C4D7CAC1CF5CD7C0C3E65CB9D8D3DAC3FCC3FB32303134C4EAB6C8CAA1C7E0C4EACEC4C3F7BAC5A1A2CAA1C7E0C4EACEC4C3F7BAC5B1EAB1F8BACDCAA1C7E0C4EACEC4C3F7BAC5CFC8BDF8B9A4D7F7D5DFB5C4BEF6B6A8C5C55CA3A830372E3038A3A9B9D8D3DAC3FCC3FB32303134C4EAB

<443A5CCED2B5C4D7CAC1CF5CD7C0C3E65CB9D8D3DAC3FCC3FB32303134C4EAB6C8CAA1C7E0C4EACEC4C3F7BAC5A1A2CAA1C7E0C4EACEC4C3F7BAC5B1EAB1F8BACDCAA1C7E0C4EACEC4C3F7BAC5CFC8BDF8B9A4D7F7D5DFB5C4BEF6B6A8C5C55CA3A830372E3038A3A9B9D8D3DAC3FCC3FB32303134C4EAB 皖 青 创 建 2015 3 号 关 于 命 名 2014 年 度 省 青 年 文 明 号 省 青 年 文 明 号 标 兵 和 省 青 年 文 明 号 先 进 工 作 者 的 决 定 2014 年, 全 省 各 级 团 组 织 广 大 青 年 集 体 深 入 贯 彻 落 实 党 的 十 八 届 三 中 四 中 全 会 精 神, 紧 紧 围 绕 中 心 工 作, 广 泛 开 展 青 年 文 明 号 创

More information

Microsoft Word - 11900電腦軟體設計.doc

Microsoft Word - 11900電腦軟體設計.doc 技 能 檢 定 規 範 之 一 一 九 電 腦 軟 體 行 政 院 勞 工 委 員 會 職 業 訓 練 局 編 印 軟 體 技 術 士 技 能 檢 定 規 範 目 錄 一 軟 體 技 術 士 技 能 檢 定 規 範 說 明... 1 二 丙 級 軟 體 技 術 士 技 能 檢 定 規 範... 3 三 乙 級 軟 體 技 術 士 技 能 檢 定 規 範... 5 四 甲 級 軟 體 技 術 士 技

More information

PowerPoint Presentation

PowerPoint Presentation 利用 Oracle Big Data Connectors 将 Hadoop 与 Oracle 集成 罗海雄甲骨文公司资深技术顾问 1 Copyright 2011, Oracle and/or its affiliates. All rights 以下内容旨在概述产品的总体发展方向 该内容仅供参考, 不可纳入任何合同 该内容不构成提供任何材料 代码或功能的承诺, 并且不应该作为制定购买决策的依据

More information

Microsoft Word - 《Hadoop大数据技术与应用》教学大纲.doc

Microsoft Word - 《Hadoop大数据技术与应用》教学大纲.doc Hadoop 大数据技术原理与应用 课程教学大纲 ( 课程英文名称 ) 课程编号 :201800522062 学分 :5 学分学时 :63 学时 ( 其中 : 讲课学时 51 上机学时 :12) 先修课程 : 后续课程 :Spark 适用专业 : 大数据应用技术开课部门 : 一 课程的性质与目标 Hadoop 大数据技术原理与应用 是互联网 + 创业教育学院软件工程 ( 大数据 人工智能 ) 专业的一门校定必修专业课

More information

支付宝2011年 IT资产与费用预算

支付宝2011年 IT资产与费用预算 OceanBase 支 持 ACID 的 可 扩 展 关 系 数 据 库 qushan@alipay.com 2013 年 04 月 关 系 数 据 库 发 展 1970-72:E.F.Codd 数 据 库 关 系 模 式 20 世 纨 80 年 代 第 一 个 商 业 数 据 库 Oracle V2 SQL 成 为 数 据 库 行 业 标 准 可 扩 展 性 Mainframe: 小 型 机 =>

More information

雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO

雲端 Cloud Computing 技術指南 運算 應用 平台與架構 10/04/15 11:55:46 INFO 10/04/15 11:55:53 INFO 10/04/15 11:55:56 INFO 10/04/15 11:56:05 INFO 10/04/15 11:56:07 INFO CHAPTER 使用 Hadoop 打造自己的雲 8 8.3 測試 Hadoop 雲端系統 4 Nodes Hadoop Map Reduce Hadoop WordCount 4 Nodes Hadoop Map/Reduce $HADOOP_HOME /home/ hadoop/hadoop-0.20.2 wordcount echo $ mkdir wordcount $ cd wordcount

More information

思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846 联 系 人 : 刘 颖 董 凯 联 系 电 话 :010

思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846 联 系 人 : 刘 颖 董 凯 联 系 电 话 :010 大 数 据 发 展 白 皮 书 (2015 版 ) 中 国 电 子 信 息 产 业 发 展 研 究 院 工 业 和 信 息 化 部 赛 迪 智 库 二 一 五 年 四 月 思 想, 还 是 思 想 才 使 我 们 与 众 不 同 编 辑 部 : 工 业 和 信 息 化 部 赛 迪 研 究 院 通 讯 地 址 : 北 京 市 海 淀 区 万 寿 路 27 号 电 子 大 厦 4 层 邮 政 编 码 :100846

More information

SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储 2

SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储 2 www.hand-china.com 搭 建 基 于 HANA 的 企 业 基 础 架 构 平 台 作 者 : HAND 日 期 : 2016-05 本 : 2.5 上 海 信 息 技 术 股 份 限 HAND Enterprise Solutions Company Ltd. www.hand-china.com SAP HANA 最 简 单 的 理 解 ERP CRM SRM BI 列 存 储

More information

11_03.indd

11_03.indd 1 02 03 08 12 17 25 29 34 39 44 49 55 60 65 70 80 90 16 24 54 94 95 95 96 2 3 4 模块功能工业仿真提交和管理作业个人磁盘空间管理社区监控性能监控记账计费报警信息优化设计提交和管理优化项目交易中心计算服务交易咨询服务交易帮助中心提问与问答共享经验 5 6 7 8 9 10 11 12 13 14 15 16 17 赟 18

More information

A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内

A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内 A API Application Programming Interface 见 应 用 程 序 编 程 接 口 ARP Address Resolution Protocol 地 址 解 析 协 议 为 IP 地 址 到 对 应 的 硬 件 地 址 之 间 提 供 动 态 映 射 阿 里 云 内 容 分 发 网 络 Alibaba Cloud Content Delivery Network 一

More information

MyCOS

MyCOS 江 苏 工 程 职 业 技 术 学 院 2015 年 度 毕 业 生 就 业 质 量 年 度 报 告 二 〇 一 五 年 十 二 月 三 十 一 日 目 录 第 一 章 就 业 基 本 情 况... 3 一 毕 业 生 规 模 和 结 构... 3 二 毕 业 生 就 业 率... 6 三 就 业 流 向... 8 第 二 章 促 进 毕 业 生 就 业 的 政 策 措 施... 12 第 三 章

More information

( 试 行 ) 中 国 城 市 科 学 研 究 会 数 字 城 市 工 程 研 究 中 心 二 〇 一 三 年 四 月 目 录 引 言... 1 1 范 围... 1 2 规 范 性 引 用 文 件... 1 3 术 语 定 义 与 缩 略 语... 2 3.1 术 语 与 定 义... 2 3.2 缩 略 语... 2 4 平 台 定 位... 2 4.1 智 慧 城 市 总 体 框 架...

More information

信息

信息 信 息 与 算 机 工 院 算 机 科 与 技 术 人 才 培 养 方 案 ( 代 码 :080901) 一 培 养 目 标 培 养 适 应 国 家 建 设 发 展 需 要, 德 智 体 全 面 发 展, 具 有 良 好 的 科 素 养 和 丰 厚 的 人 文 底 蕴, 掌 握 扎 的 算 机 科 核 心 基 础 理 论 知 识 和 主 流 工 技 术, 了 解 本 的 前 沿 发 展 现 状 和

More information

使用Spark SQL读取Hive上的数据

使用Spark SQL读取Hive上的数据 使用 Spark SQL 读取 Hive 上的数据 Spark SQL 主要目的是使得用户可以在 Spark 上使用 SQL, 其数据源既可以是 RDD, 也可以是外部的数据源 ( 比如 Parquet Hive Json 等 ) Spark SQL 的其中一个分支就是 Spark on Hive, 也就是使用 Hive 中 HQL 的解析 逻辑执行计划翻译 执行计划优化等逻辑, 可以近似认为仅将物理执行计划从

More information

册子0906

册子0906 IBM SelectStack ( PMC v2.0 ) 模块化私有云管理平台 是跨主流虚拟化技术的统一资源云管理平台 01 亮点 : 快速可靠地实现集成化 私有云管理平台 02/03 丰富的功能支持企业数据中心云计算 扩展性强 : 简单易用 : 04/05 功能丰富 : 06/07 为什么选择 IBM SelectStack (PMC v2.0)? 快速实现价值 提高创新能力 降低 IT 成本 降低复杂度和风险

More information

「西醫基層總額支付委員會《第28次委員會議紀錄

「西醫基層總額支付委員會《第28次委員會議紀錄 西 醫 基 層 總 額 支 付 委 員 會 101 年 第 2 次 委 員 會 議 紀 錄 時 間 :101 年 5 月 23 日 下 午 2 時 地 點 : 中 央 健 康 保 險 局 18 樓 會 議 室 ( 台 北 市 信 義 路 3 段 140 號 18 樓 ) 主 席 : 黃 召 集 人 三 桂 出 席 委 員 : 王 委 員 正 坤 王 委 員 錦 基 古 委 員 博 仁 王 正 坤 王

More information

StreamCQL

StreamCQL StreamCQL 在携程的使用 数据平台 - 实时平台 郑志锋 I. StreamCQL 介绍 II. 用例演示 III. 使用与改造 StreamCQL 介绍 StreamCQL 是华为开源的一个可持续数据流查询语言, 与传统的 SQL 执行一次返回一次结果不同, 提交之后的作业可以基于时间 / 长度划分数据流为多个窗口持续输出结果, 或者基于消息事件直接输出结果 语法与 SQL 类似, 底层的计算基于

More information

XXXXXXXX http://cdls.nstl.gov.cn 2 26

XXXXXXXX http://cdls.nstl.gov.cn 2 26 [ ] [ ] 2003-7-18 1 26 XXXXXXXX http://cdls.nstl.gov.cn 2 26 (2003-7-18) 1...5 1.1...5 1.2...5 1.3...5 2...6 2.1...6 2.2...6 2.3...6 3...7 3.1...7 3.1.1...7 3.1.2...7 3.1.2.1...7 3.1.2.1.1...8 3.1.2.1.2...10

More information

《教育信息化前沿》

《教育信息化前沿》 教 育 信 息 化 前 沿 第 13 期 目 录 新 闻 快 递... 1 安 徽 省 亳 州 市 抓 好 五 落 实 为 教 育 信 息 化 提 供 正 能 量...1 梧 州 移 动 推 动 教 育 信 息 化 发 展 举 办 信 息 化 推 介 会... 1 安 徽 省 芜 湖 市 开 展 教 育 信 息 化 试 点 推 动 教 育 现 代 化... 1 山 西 省 晋 中 市 成 为 首 批

More information

1904 1 1916 20 25 1 1917 2 40 25 1 1924 1936 1938 45 1 24900 5500 126 45800 10949 38 40 1 45 1 1256 7 1 5 525 501 1938 5 45 1 1941 1 50 22 27 3 2 102 2 175 1 3 1 2 120 1 1 1945 10 1 1950 1 18 1 35 1951

More information

21 贵 省 黔 东 南 贵 中 共 天 柱 县 委 党 奥 鹏 学 习 中 贵 省 黔 东 南 天 柱 县 凤 城 镇 环 城 0855- 中 共 天 柱 县 委 党 心 [23] 东 路 14 号 32097 22 贵 省 黔 东 南 贵 省 榕 江 县 古 镇 古 中 路 附 一 0855-

21 贵 省 黔 东 南 贵 中 共 天 柱 县 委 党 奥 鹏 学 习 中 贵 省 黔 东 南 天 柱 县 凤 城 镇 环 城 0855- 中 共 天 柱 县 委 党 心 [23] 东 路 14 号 32097 22 贵 省 黔 东 南 贵 省 榕 江 县 古 镇 古 中 路 附 一 0855- 序 号 西 安 交 通 学 现 代 远 程 教 育 奥 鹏 学 习 中 心 授 权 表 省 份 地 市 学 习 中 心 依 托 建 设 单 位 名 称 地 址 电 话 授 权 期 限 授 权 专 1 安 徽 省 安 庆 市 安 徽 安 庆 奥 鹏 学 习 中 心 [1] 安 徽 广 播 电 视 学 安 庆 市 分 安 徽 省 安 庆 市 锡 麟 街 119 号 2 安 徽 省 蚌 埠 市 安 徽 蚌

More information

更 没 有 高 深 的 思 想, 甚 至 说 不 出 一 点 儿 高 级 的 俏 皮 话 他 们 普 遍 认 为, 生 活 中 的 我 和 电 视 里 的 那 个 人 基 本 上 还 算 表 里 如 一, 但 相 比 之 下 少 了 很 多 趣 味 记 得 有 一 个 女 记 者 采 访 我, 半

更 没 有 高 深 的 思 想, 甚 至 说 不 出 一 点 儿 高 级 的 俏 皮 话 他 们 普 遍 认 为, 生 活 中 的 我 和 电 视 里 的 那 个 人 基 本 上 还 算 表 里 如 一, 但 相 比 之 下 少 了 很 多 趣 味 记 得 有 一 个 女 记 者 采 访 我, 半 随 遇 而 安 全 集 作 者 : 孟 非 自 序 直 到 现 在, 我 仍 然 不 能 确 信 究 竟 有 多 少 人 能 看 得 下 去 这 么 平 淡 的 一 本 书 我 既 没 有 到 该 写 自 传 的 岁 数, 更 没 有 可 以 写 自 传 的 资 本, 只 是 因 为 今 年 正 好 无 可 避 免 地 迈 入 不 惑 之 年 的 门 槛, 似 乎 要 做 一 些 稍 微 特 别 点

More information

此 外, 晚 上 可 以 在 海 滩 东 边 的 剧 场 看 印 象 海 南 岛 的 实 景 演 出 1 可 乘 兴 龙 观 光 巴 士 和 共 速 达 巴 士 游 1 2 路 抵 达, 途 经 白 龙 路 海 府 路 滨 海 大 道 ;2 可 乘 坐 40 35 28 29 路 公 交 车 到 达

此 外, 晚 上 可 以 在 海 滩 东 边 的 剧 场 看 印 象 海 南 岛 的 实 景 演 出 1 可 乘 兴 龙 观 光 巴 士 和 共 速 达 巴 士 游 1 2 路 抵 达, 途 经 白 龙 路 海 府 路 滨 海 大 道 ;2 可 乘 坐 40 35 28 29 路 公 交 车 到 达 5 天 四 夜 浪 漫 海 南 旅 游 攻 略 D1 海 口 第 一 天 自 行 乘 坐 交 通 工 具 到 达 美 丽 海 南 海 口 入 住 海 口 金 色 阳 光 温 泉 度 假 酒 店 ( 海 南 金 色 阳 光 泰 得 温 泉 度 假 酒 店 引 位 于 海 口 市 滨 海 大 道, 三 面 均 有 开 阔 的 海 景 面, 可 远 眺 海 口 湾 的 城 市 轮 廓 和 浩 瀚 的 大

More information

Apache CarbonData集群模式使用指南

Apache CarbonData集群模式使用指南 我们在 Apache CarbonData 快速入门编程指南 文章中介绍了如何快速使用 Apache CarbonData, 为了简单起见, 我们展示了如何在单机模式下使用 Apache CarbonData 但是生产环境下一般都是使用集群模式, 本文主要介绍如何在集群模式下使用 Apache CarbonData 启动 Spark shell 这里以 Spark shell 模式进行介绍,master

More information

電機工程系認可證照清單 2011/7/1

電機工程系認可證照清單                  2011/7/1 南 台 科 技 大 學 電 機 工 程 系 專 業 證 照 課 程 實 施 要 點 96 年 10 月 05 日 系 務 會 議 通 過 100 年 06 月 30 日 系 務 會 議 修 正 通 過 101 年 06 月 21 日 系 務 會 議 修 正 通 過 一 本 系 為 提 升 學 生 的 專 業 技 能, 特 訂 定 本 辦 法 二 實 施 對 象 : 本 系 日 間 部 96 學 年

More information

<4D6963726F736F667420576F7264202D20D0C5CFA2BBAFB7A2D5B9D6D8B5E3D7A8CFEEB9E6BBAE2E646F63>

<4D6963726F736F667420576F7264202D20D0C5CFA2BBAFB7A2D5B9D6D8B5E3D7A8CFEEB9E6BBAE2E646F63> 国 民 经 济 和 社 会 发 展 第 十 个 五 年 计 划 信 息 化 发 展 重 点 专 项 规 划 前 言 信 息 化 是 当 今 世 界 科 技 经 济 与 社 会 发 展 的 重 要 趋 势 信 息 技 术 已 广 泛 渗 透 到 经 济 和 社 会 的 各 个 领 域, 推 动 人 类 社 会 生 产 力 达 到 一 个 崭 新 的 高 度 全 球 信 息 化 开 创 了 世 界 经

More information

关于建立境内违法互联网站黑名单管理制度的通知

关于建立境内违法互联网站黑名单管理制度的通知 关 于 建 立 境 内 违 法 互 联 网 站 黑 名 单 管 理 制 度 的 通 知 各 省 自 治 区 直 辖 市 和 计 划 单 列 市 通 信 管 理 局 新 闻 办 教 育 厅 ( 教 委 ) 公 安 厅 ( 局 ) 国 家 安 全 厅 ( 局 ) 文 化 厅 ( 局 ) 卫 生 厅 ( 局 ) 工 商 行 政 管 理 局 广 播 影 视 局 新 闻 出 版 局 食 品 药 品 监 督 管

More information

? 這 全 都 是 市 政 府 提 供 給 我 的 資 料 低 底 盤 公 車 計 畫 96 年 預 算 新 台 幣 4,500 萬 元 97 年 預 算 新 台 幣 1 億 6,500 萬 元 98 年 預 算 新 台 幣 3 億 2,300 萬 元, 共 有 307 台 低 底 盤 公 車,99

? 這 全 都 是 市 政 府 提 供 給 我 的 資 料 低 底 盤 公 車 計 畫 96 年 預 算 新 台 幣 4,500 萬 元 97 年 預 算 新 台 幣 1 億 6,500 萬 元 98 年 預 算 新 台 幣 3 億 2,300 萬 元, 共 有 307 台 低 底 盤 公 車,99 民 政 部 門 質 詢 第 13 組 質 詢 日 期 : 中 華 民 國 98 年 10 月 6 日 質 詢 對 象 : 民 政 部 門 有 關 各 單 位 質 詢 議 員 : 陳 嘉 銘 周 柏 雅 陳 碧 峰 李 文 英 顏 聖 冠 王 孝 維 洪 健 益 計 7 位 時 間 126 分 鐘 速 記 錄 98 年 10 月 6 日 速 記 : 何 采 穎 主 席 ( 李 議 員 慶 元 ): 現

More information

目 录 第 五 部 分 第 六 部 分 第 七 部 分 第 八 部 分 投 标 邀 请 投 标 人 须 知 附 表 评 标 方 法 和 评 分 细 则 项 目 需 求 和 技 术 方 案 要 求 1

目 录 第 五 部 分 第 六 部 分 第 七 部 分 第 八 部 分 投 标 邀 请 投 标 人 须 知 附 表 评 标 方 法 和 评 分 细 则 项 目 需 求 和 技 术 方 案 要 求 1 政 府 采 购 招 标 文 件 ( 服 务 类 ) 第 二 册 项 目 编 号 :SDGP2016-224 项 目 名 称 : 公 共 法 律 服 务 系 统 开 发 项 目 包 号 :A1 山 东 省 省 级 机 关 政 府 采 购 中 心 目 录 第 五 部 分 第 六 部 分 第 七 部 分 第 八 部 分 投 标 邀 请 投 标 人 须 知 附 表 评 标 方 法 和 评 分 细 则 项 目

More information

大连软~1

大连软~1 大 连 软 件 职 业 学 院 高 等 职 业 教 育 质 量 年 度 报 告 ( ) 二 〇 一 六 年 一 月 ( 二 学 2...4 大 连 软 件 职 业 学 院 高 等 职 业 教 育 质 量 报 告 (2015)...4 目 录 一 学 院 基 本 情 况 二 办 学 基 本 信...8...6...7 息 ( 一 ) 明 确 办 学 思 路, 科 学 谋 划 发 展 战 略 ( 二 )

More information

浙江师范大学2014年度毕业生就业质量报告

浙江师范大学2014年度毕业生就业质量报告 二 〇 一 五 年 十 二 月 目 录 学 校 概 况...1 第 一 部 分 2015 届 毕 业 生 就 业 基 本 情 况...3 一 毕 业 生 规 模...3 二 毕 业 生 结 构...3 三 毕 业 生 就 业 率...5 四 就 业 流 向...5 五 国 内 升 学...10 六 出 国 出 境...10 七 自 主 创 业...11 第 二 部 分 毕 业 生 就 业 相 关 分

More information

目 录 监 管 资 讯 2016 年 全 国 保 险 监 管 工 作 会 议 召 开...3 协 会 动 态 赤 峰 保 险 行 业 协 会 召 开 数 据 统 计 和 信 息 宣 传 总 结 表 彰 会 议...5 赤 峰 市 保 险 行 业 协 会 秘 书 处 召 开 2015 年 度 述 职

目 录 监 管 资 讯 2016 年 全 国 保 险 监 管 工 作 会 议 召 开...3 协 会 动 态 赤 峰 保 险 行 业 协 会 召 开 数 据 统 计 和 信 息 宣 传 总 结 表 彰 会 议...5 赤 峰 市 保 险 行 业 协 会 秘 书 处 召 开 2015 年 度 述 职 0 目 录 监 管 资 讯 2016 年 全 国 保 险 监 管 工 作 会 议 召 开...3 协 会 动 态 赤 峰 保 险 行 业 协 会 召 开 数 据 统 计 和 信 息 宣 传 总 结 表 彰 会 议...5 赤 峰 市 保 险 行 业 协 会 秘 书 处 召 开 2015 年 度 述 职 总 结 会...6 聚 焦 理 赔 平 安 人 寿 赤 峰 中 心 支 公 司 2.5 小 时 重

More information

同 时, 采 取 提 供 新 闻 线 索 和 素 材 安 排 专 访 等 方 式 主 动 为 新 闻 媒 体 服 务, 为 采 访 报 道 活 动 创 造 便 利 条 件 建 设 网 络 信 息 发 布 平 台 2013 年 9 月 开 通 中 央 纪 委 监 察 部 网 站,2015 年 1 月

同 时, 采 取 提 供 新 闻 线 索 和 素 材 安 排 专 访 等 方 式 主 动 为 新 闻 媒 体 服 务, 为 采 访 报 道 活 动 创 造 便 利 条 件 建 设 网 络 信 息 发 布 平 台 2013 年 9 月 开 通 中 央 纪 委 监 察 部 网 站,2015 年 1 月 中 国 坚 持 公 开 透 明 反 腐 败 的 成 功 实 践 中 共 十 八 大 以 来, 中 国 政 府 积 极 履 行 联 合 国 反 腐 败 公 约, 秉 持 公 开 透 明 反 腐 理 念, 拓 宽 信 息 公 开 渠 道, 开 门 搞 监 督, 支 持 鼓 励 公 众 依 法 有 序 参 与 监 督, 取 得 良 好 社 会 效 果 一 加 强 信 息 公 开 平 台 建 设, 充 分

More information

公務員服務法第13條相關解釋彙整表

公務員服務法第13條相關解釋彙整表 1 2 3 4 5 6 7 公 務 員 服 務 法 ( 以 下 簡 稱 服 務 法 ) 13 條 所 稱 私 營 商 業 及 經 理 公 務 員 得 否 依 法 兼 任 公 營 事 業 或 公 司 代 表 官 股 之 董 事 監 察 人 原 經 營 商 業 之 人, 任 為 有 俸 給 之 公 務 員 者, 得 否 繼 續 經 營 現 任 官 吏 不 得 充 任 民 營 實 業 公 司 董 監 事

More information

B1

B1 民 生 周 刊 农 历 丙 申 年 八 月 初 二 第 50 期 本 期 导 读 有 意 识 没 知 识 老 人 维 权 摸 不 着 门 B2 版 民 政 十 三 五 规 划 让 百 姓 更 有 获 得 感 五 福 的 工 作 人 员 用 专 业 细 致 的 服 务, 让 入 住 的 老 人 宾 至 如 归, 安 享 晚 年 五 福 : 让 失 独 老 人 心 有 所 依 北 京 乃 至 全 国 首

More information

時間軸上的竹蓮記憶 學務主任 黃雅彙 我不是竹蓮國小的畢業校友 但對於身為新竹人的我來 說 仔細回想起來 似乎和竹蓮有著一種特別的緣分 對竹蓮國小最初的印象是在小學的時候 猶記得年幼的 我經過一段時日的啦啦隊舞蹈訓練後 老師便帶著我們從學 校步行到竹蓮國小來參加比賽 一踏入竹蓮校門 映入眼簾 的是黑

時間軸上的竹蓮記憶 學務主任 黃雅彙 我不是竹蓮國小的畢業校友 但對於身為新竹人的我來 說 仔細回想起來 似乎和竹蓮有著一種特別的緣分 對竹蓮國小最初的印象是在小學的時候 猶記得年幼的 我經過一段時日的啦啦隊舞蹈訓練後 老師便帶著我們從學 校步行到竹蓮國小來參加比賽 一踏入竹蓮校門 映入眼簾 的是黑 鎏 金 歲 月 竹蓮 生日快樂 教務主任 李曉蘭 時間過得很快 轉眼間 來到竹蓮即將邁入第十五個年 頭 回想當初剛從外縣市調入新竹市時 對新竹市的學校並 不了解 一心只想著 只要能調成 哪個學校都可以 沒想 到自己就在竹蓮安居樂業到此 眼看再過幾年就可以從竹蓮 退休了 師專畢業後 這是我待過最久的學校了 我想 這 就是我和竹蓮的緣分吧 近幾年 竹蓮由於少子化和鄰近社區設校的關係 面臨 不小的減班壓力

More information

B1

B1 民 周 刊 生 农 历 丙 申 年 七 月 十 七 第 48 期 执 法 工 作 人 员 对 太 平 间 进 行 突 击 检 查 殡 葬 执 法 是 民 政 执 法 中 的 一 项 重 要 工 作, 也 是 推 行 殡 葬 改 革 的 一 项 重 要 举 措 从 8 月 8 日 至 8 月 16 日, 市 民 政 综 合 执 法 监 察 大 队 已 完 成 对 城 六 区 95 家 医 院 太 平

More information

Microsoft Word - 临政办发6.doc

Microsoft Word - 临政办发6.doc 临 沂 市 人 民 政 府 办 公 室 文 件 临 政 办 发 2016 6 号 临 沂 人 民 政 府 办 公 室 关 于 印 发 临 沂 市 地 方 史 志 事 业 发 展 规 划 纲 要 (2016-2020 年 ) 的 通 知 各 县 区 人 民 政 府, 市 政 府 各 部 门 各 直 属 机 构, 临 沂 高 新 技 术 产 业 开 发 区 管 委 会, 临 沂 经 济 技 术 开 发

More information

资 讯 速 递 台 基 于 大 数 据 的 学 校 督 导 评 估 系 统 建 设 上 海 市 闵 行 区 人 民 政 府 教 育 督 导 室 ( 摘 要 ) 闵 行 教 育 在 深 化 教 育 改 革 探 索 管 办 评 分 离 的 背 景 下, 把 教 育 督 导 评 估 系 统 建 设 作 为

资 讯 速 递 台 基 于 大 数 据 的 学 校 督 导 评 估 系 统 建 设 上 海 市 闵 行 区 人 民 政 府 教 育 督 导 室 ( 摘 要 ) 闵 行 教 育 在 深 化 教 育 改 革 探 索 管 办 评 分 离 的 背 景 下, 把 教 育 督 导 评 估 系 统 建 设 作 为 责 任 督 学 专 辑 专 报 2015 年 第 四 期 ( 总 第 6 期 ) 闵 行 区 人 民 政 府 教 育 督 导 室 编 2016 年 01 月 本 期 目 录 资 讯 速 递 台 1. 基 于 大 数 据 的 学 校 督 导 评 估 系 统 建 设 督 导 室 2. 互 联 网 + 方 兴 未 艾, 闵 行 督 导 力 拔 头 筹 陈 惠 红 收 获 与 随 想 3. 用 行 动 诠

More information

大陸教育部等6個部門公佈「現代職業教育體系建設規劃 (2014-2020年)」規劃到2015年初步形成現代職業教育體系框架,到2020年基本建成「中國」特色現代職業教育體系

大陸教育部等6個部門公佈「現代職業教育體系建設規劃 (2014-2020年)」規劃到2015年初步形成現代職業教育體系框架,到2020年基本建成「中國」特色現代職業教育體系 肆 文 化 大 陸 教 育 部 發 佈 關 於 深 化 考 試 招 生 制 度 改 革 的 實 施 意 見, 啟 動 新 一 輪 高 考 制 度 改 革,2014 年 起 先 在 上 海 浙 江 兩 地 試 行, 預 計 2017 年 於 全 大 陸 推 行 計 算 機 和 網 路 技 術 的 普 及, 引 發 數 碼 時 代 失 寫 症 提 筆 忘 字 的 現 象, 因 此 大 陸 制 訂 通 用

More information

拥抱大数据

拥抱大数据 25 The MathWorks, Inc. 拥抱大数据 陈建平 高级应用工程师 MathWorks 25 The MathWorks, Inc. 2 大数据? ENERGY Asset Optimization FINANCE Market Risk, Regulatory AUTO Fleet Data Analysis AERO Maintenance, reliability Medical

More information

目 录 目 录... I 1 背 景 介 绍... - 2-2 指 导 思 想 和 建 设 目 标... - 3-3 建 设 内 容... - 3-3.1 系 统 定 位... - 3-3.2 系 统 架 构... - 3-3.3 信 息 交 换 平 台 建 立... - 4-3.4 云 计 算 应

目 录 目 录... I 1 背 景 介 绍... - 2-2 指 导 思 想 和 建 设 目 标... - 3-3 建 设 内 容... - 3-3.1 系 统 定 位... - 3-3.2 系 统 架 构... - 3-3.3 信 息 交 换 平 台 建 立... - 4-3.4 云 计 算 应 神 州 数 码 家 庭 医 生 信 息 管 理 系 统 解 决 方 案 白 皮 书 神 州 数 码 系 统 集 成 服 务 有 限 公 司 二 〇 一 五 年 九 月 目 录 目 录... I 1 背 景 介 绍... - 2-2 指 导 思 想 和 建 设 目 标... - 3-3 建 设 内 容... - 3-3.1 系 统 定 位... - 3-3.2 系 统 架 构... - 3-3.3 信

More information

PowerPoint Presentation

PowerPoint Presentation 中 小 IT 企 业 人 力 资 源 管 理 咨 询 简 介 一 背 景 分 析 二 需 求 分 析 三 服 务 内 容 四 操 作 流 程 五 斯 隆 优 势 六 行 业 案 例 七 服 务 理 念 目 录 一 背 景 分 析 -IT 业 现 状 分 析 IT 产 业 的 总 量 水 平 较 低 中 国 IT IT 现 状 总 体 规 模 较 小 技 术 自 主 创 新 能 力 差 对 经 济 的

More information

个人介绍 思考数据分析系统的基本指标 Hadoop 史前和史后的数据仓库流程 Hadoop 史前和史后的数据分析流程 思考 Hadoop 解决了什么样的根本问题 演讲大纲 Python 如何在构建数据仓库系统的作用 1. 使用 Python 快速构建数据分析模块 ComETL 2. 基于 Pytho

个人介绍 思考数据分析系统的基本指标 Hadoop 史前和史后的数据仓库流程 Hadoop 史前和史后的数据分析流程 思考 Hadoop 解决了什么样的根本问题 演讲大纲 Python 如何在构建数据仓库系统的作用 1. 使用 Python 快速构建数据分析模块 ComETL 2. 基于 Pytho Python&Hadoop 构建数据仓库从开源中来, 到开源中去 EasyHadoop 童小军 tongxiaojun@gmail.com 2012 年 10 年 20 日 个人介绍 思考数据分析系统的基本指标 Hadoop 史前和史后的数据仓库流程 Hadoop 史前和史后的数据分析流程 思考 Hadoop 解决了什么样的根本问题 演讲大纲 Python 如何在构建数据仓库系统的作用 1. 使用

More information

1-What makes QingCloud different? 青云IaaS+PaaS技术路径-李威Jordan

1-What makes QingCloud different? 青云IaaS+PaaS技术路径-李威Jordan 扫我并发送 南京 加入南京课堂微信群 What makes QingCloud different? 青云 IaaS+PaaS 技术路径 Jordan 李威 青云 QingCloud 系统工程师 李威 (Jordan) 青云 QingCloud 系统工程师,QingCloud Hadoop 集群服务作者 2008 年北京大学硕士毕业, 曾为 IBM DevOps 架构师 IBM 金牌讲师, 曾在 4

More information

聚 焦 大 众 金 秋 十 月, 让 爱 走 动 2015-10-28 引 领 大 众 金 秋 十 月 又 重 阳 清 早, 大 众 汽 车 租 赁 公 司 的 爱 心 小 队 一 行 十 余 人 就 带 着 早 已 备 好 的 节 日 慰 问 品 来 到 提 篮 桥 街 道 敬 老 院, 为 那

聚 焦 大 众 金 秋 十 月, 让 爱 走 动 2015-10-28 引 领 大 众 金 秋 十 月 又 重 阳 清 早, 大 众 汽 车 租 赁 公 司 的 爱 心 小 队 一 行 十 余 人 就 带 着 早 已 备 好 的 节 日 慰 问 品 来 到 提 篮 桥 街 道 敬 老 院, 为 那 引 领 大 众 微 信 订 阅 号 第 86 期 2015 年 10 月 28 日 1. 聚 焦 大 众 金 秋 十 月, 让 爱 走 动 2. 大 众 群 英 用 优 雅 与 智 慧 书 写 企 业 的 春 天 3. 大 众 视 野 澳 洲 商 品 考 察 报 告 4. 大 众 视 野 为 何 说 出 租 改 革 意 见 比 专 车 新 规 更 值 得 关 注? 5. 招 聘 信 息 大 众 物

More information

中国证券监督管理委员会公告

中国证券监督管理委员会公告 201523 : 1. 1 120 1 200 / 1 APP 2 / 2 8 4 30% 3 APP APP 80% 120 / 4 2 5 2. 2 5 1 1 APP 1.2 / 0.8 / IP 0.4 / 2 0.8G 1%/ 3 2017 3 1 2017 3 31 23 1. WORD, 2 2. PDF 3., WORD PDF 4. 2016 WORD PDF 5. 2016 1

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 大数据基础组件的安全解决方案 Security solutions based on big data component 2016 BDTC 北京观数科技有限公司 01 公司简介 02 大数据基础框架生态 目录 CONTENTS 03 大数据安全防护的必要性 04 大数据安全的基本思路 05 常见组件的安全保护方案 06 相关资质 PART ONE 公司介绍 公司简介 观数科技 北京观数科技有限公司

More information

温州市政府分散采购

温州市政府分散采购 温 州 市 政 府 分 散 采 购 招 标 文 件 招 标 编 号 :F - G B 2 0 1 6 0 3 1 4 0 0 4 7 招 标 项 目 : 温 州 市 人 民 政 府 办 公 室 政 务 云 平 台 ( 重 ) 招 标 方 式 : 公 开 招 标 招 标 人 : 温 州 市 人 民 政 府 办 公 室 招 标 代 理 : 二 〇 一 六 年 三 月 目 录 投 标 保 证 金 办 理

More information

孟 祥 萍, 等 HBase 在 智 能 电 网 异 构 数 据 同 步 中 的 应 用 - 123 - 步 最 后, 对 异 构 数 据 同 步 到 数 据 中 心 的 性 能 进 行 了 测 试, 验 证 了 本 文 所 提 方 案 的 可 行 性, 在 探 索 未 来 智 能 电 网 大 数

孟 祥 萍, 等 HBase 在 智 能 电 网 异 构 数 据 同 步 中 的 应 用 - 123 - 步 最 后, 对 异 构 数 据 同 步 到 数 据 中 心 的 性 能 进 行 了 测 试, 验 证 了 本 文 所 提 方 案 的 可 行 性, 在 探 索 未 来 智 能 电 网 大 数 第 43 卷 第 24 期 电 力 系 统 保 护 与 控 制 Vol.43 No.24 2015 年 12 月 16 日 Power System Protection and Control Dec. 16, 2015 HBase 在 智 能 电 网 异 构 数 据 同 步 中 的 应 用 孟 祥 萍 1, 周 来 2, 王 晖 1, 纪 秀 (1. 长 春 工 程 学 院 电 气 与 信 息

More information

- 22-4 58 4 5 1998 12 415 416 6 431 7 1993 359

- 22-4 58 4 5 1998 12 415 416 6 431 7 1993 359 - 21-1 2 1 52 1963 1 7 154 2 1478 62 3 202 193-21 - - 22-4 58 4 5 1998 12 415 416 6 431 7 1993 359 - 23-8 8 5 1573 9 10 2120 1982 2 11 1480 729-730 - 23 - - 24-12 1007~1072 14 15 12 1997 4 9-10 13 1997

More information

领导,我不想写CSS代码.key

领导,我不想写CSS代码.key 领导 我不想写 CSS 张鑫旭 25MIN 2018-03-31 YUEWEN USER EXPERIENCE DESIGN 01 1 YUEWEN USER EXPERIENCE DESIGN 砖家 02 CSS - 艺术家 YUEWEN USER EXPERIENCE DESIGN 03 CSS - 砖家 艺术家 YUEWEN USER EXPERIENCE DESIGN 04 领导, 我不想写

More information

User Group SMTP

User Group SMTP SOP v1.00 2003 02 28 TrendMicro Control Manager V2.5 1 1... 3 2... 4 2.1... 4 2.2... 14 3... 24 3.1... 24 3.2... 29 3.3... 34 3.3.1... 34 3.3.2 User Group... 37 3.3.3... 40 3.4... 41 3.4.1... 41 3.4.2

More information

幻灯片 1

幻灯片 1 www.vip.com Redis 在大数据业务中的应用 陈群 @ 唯品会 / 数据基础架构 /DBA Agenda 1. Redis In Bigdata Ecosystem 2. Storage Architecture Evolution 3. Redis Cluster In Practice 2 计算和存储 计算 Map-Reduce Job Storm Spark Java/C++/Python

More information

PowerPoint 演示文稿

PowerPoint 演示文稿 大数据分析工具介绍 主讲 : 王建明 手机 :13940975206 QQ:564250480( 微信 ) 2/39 大数据的基本特征 特征 Volume 数据体量巨大 PB 级 -> EB 级 -> ZB 级 速度要求快数据输入输出的速度 Velocity Big Data Varity 数据类型多样文本 图像 视频 音频 Veracity 价值密度低商业价值高 Hadoop 生态系统介绍 ( 离线

More information

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成

云 计 算 集 群 架 构 师 高 居 服 务 器 / 系 统 / 运 维 / 架 构 职 业 方 向 的 塔 尖 在 最 活 跃 的 移 动 互 联 网 时 代, 云 端 架 构 师 年 薪 普 遍 超 过 25 万 九 年 三 万 多 名 高 端 学 员, 全 国 唯 一 的 自 主 高 端 成 ULA 尚 观 云 计 算 集 群 架 构 师 ( 零 首 付 )V9.0( 周 末 ) 一 尚 观 教 育 九 年 运 营 35000 学 员, 平 均 月 薪 6258+ 签 法 律 双 保 就 业 协 议, 保 底 薪, 保 就 业, 不 就 业 100% 退 所 有 学 费, 绝 非 就 业 推 荐 协 议 9 年 运 营 9 大 城 市 直 属 校 区 实 力 保 证, 三 万 多 名 已

More information

合 富 辉 煌 ( 中 国 ) 湖 南 公 司 第 一 时 间 为 您 发 布 最 新 长 沙 楼 市 动 态 热 点 资 讯 土 地 成 交 快 讯 等 信 息, 定 期 发 布 长 沙 房 地 产 市 场 研 究 报 告 关 注 官 方 微 信, 随 时 随 地 掌 握 长 沙 最 新 楼 市

合 富 辉 煌 ( 中 国 ) 湖 南 公 司 第 一 时 间 为 您 发 布 最 新 长 沙 楼 市 动 态 热 点 资 讯 土 地 成 交 快 讯 等 信 息, 定 期 发 布 长 沙 房 地 产 市 场 研 究 报 告 关 注 官 方 微 信, 随 时 随 地 掌 握 长 沙 最 新 楼 市 长 沙 房 地 产 市 场 研 究 周 报 2014 年 11 月 长 沙 房 地 产 2015 年 总 第 21 周 (5 月 17 日 -5 月 23 日 ) 市 场 研 究 月 报 合 富 辉 煌 ( 中 国 ) 湖 南 公 司 合 富 辉 煌 ( 中 国 ) 湖 南 公 司 发 展 策 略 中 心 2014 年 12 月 05 号 发 展 策 略 中 心 项 目 拓 展 联 系 人 : 岳

More information

MapReduce

MapReduce MapReduce 陳威宇 Review Hadoop Hdfs Datanode Namenode files / blocks Data locality ( 在地運算 ) 2 Outline What is MapReduce Process flow Yarn Configuration Java programing 3 MapReduce Introduction Objective :

More information

Kubenetes 系列列公开课 2 每周四晚 8 点档 1. Kubernetes 初探 2. 上 手 Kubernetes 3. Kubernetes 的资源调度 4. Kubernetes 的运 行行时 5. Kubernetes 的 网络管理理 6. Kubernetes 的存储管理理 7.

Kubenetes 系列列公开课 2 每周四晚 8 点档 1. Kubernetes 初探 2. 上 手 Kubernetes 3. Kubernetes 的资源调度 4. Kubernetes 的运 行行时 5. Kubernetes 的 网络管理理 6. Kubernetes 的存储管理理 7. Kubernetes 包管理理 工具 Helm 蔺礼强 Kubenetes 系列列公开课 2 每周四晚 8 点档 1. Kubernetes 初探 2. 上 手 Kubernetes 3. Kubernetes 的资源调度 4. Kubernetes 的运 行行时 5. Kubernetes 的 网络管理理 6. Kubernetes 的存储管理理 7. Kubernetes

More information

提纲 2 / 1

提纲 2 / 1 小米 HBase 实践 刘绍辉 小米云存储组 China Hadoop Summit 2013 提纲 2 / 1 提纲 3 / 1 HBase 是什么? Google Bigtable 系统的开源实现 分布式的, 可扩展的, 一致性的, 半结构化数据存储系统 稀疏的, 一致性的, 分布式的, 多维有序的映射表 4 / 1 数据模型 表 行 列簇 列 版本 ( 时间戳 ) 多维映射表 : ( 行 key,

More information

Ioncube Php Encoder 8 3 Crack 4. llamaba octobre traslado General Search colony

Ioncube Php Encoder 8 3 Crack 4. llamaba octobre traslado General Search colony Ioncube Php Encoder 8 3 Crack 4 ->>->>->> DOWNLOAD 1 / 5 2 / 5 Press..the..General..Tools..category4Encrypt..and..protect..files..with..PHP..encoding,..encryption,..ob fuscation..and..licensing... 2016

More information

计算机网络实验说明

计算机网络实验说明 计算机网络实验说明 龚旭东 电三楼 420 lzgxd@mailustceducn 2011 年 11 月 1 日 龚旭东 (TA) 计算机网络实验说明 2011 年 11 月 1 日 1 / 20 Outline 1 实验系统介绍 实验环境实验流程 2 实验内容编程实验交互实验观察实验 3 一些控制台命令 4 实验报告说明 龚旭东 (TA) 计算机网络实验说明 2011 年 11 月 1 日 2

More information

通过Hive将数据写入到ElasticSearch

通过Hive将数据写入到ElasticSearch 我在 使用 Hive 读取 ElasticSearch 中的数据 文章中介绍了如何使用 Hive 读取 ElasticSearch 中的数据, 本文将接着上文继续介绍如何使用 Hive 将数据写入到 ElasticSearch 中 在使用前同样需要加入 elasticsearch-hadoop-2.3.4.jar 依赖, 具体请参见前文介绍 我们先在 Hive 里面建个名为 iteblog 的表,

More information

Slide 1

Slide 1 1 Oracle ADF Mobile 介绍 马平 ping.ma@oracle.com 2 议程 从算盘到手机 Oracle 手机应用开发解决方案 Oracle ADF Mobile Browser Oracle ADF Mobile 更多信息 3 从算盘到手机 4 唯一不变的就是改变 5 6 GLOBAL MOBILE 3G SUBSCRIBERS 7 移动应用面临的挑战 如何满足用户的期望值

More information

三种恢复 HDFS 上删除文件的方法

三种恢复 HDFS 上删除文件的方法 三种恢复 HDFS 上删除文件的方法 我们每天都可能会操作 HDFS 上的文件, 这就很难避免误操作, 比如比较严重的误操作就是删除文件 本文针对这个问题提供了三种恢复误删除文件的方法, 希望对大家的日常运维有所帮助 如果想及时了解 Spark Hadoop 或者 Hbase 相关的文章, 欢迎关注微信公共帐号 :iteblog_hadoop 通过垃圾箱恢复 HDFS 为我们提供了垃圾箱的功能, 也就是当我们执行

More information

SiteView技术白皮书

SiteView技术白皮书 SiteView ECC V6.2 技 术 白 皮 书 游 龙 网 络 科 技 ( 中 国 ) 有 限 公 司 DragonFlow Networks(China),Inc. 目 录 第 一 章 产 品 概 述... 3 第 二 章 系 统 结 构... 6 一 系 统 架 构... 7 1 用 户 管 理 模 块... 7 2 Web Server... 8 3 存 储 加 密 模 块... 8

More information

附件1-1

附件1-1 學 校 名 稱 : 臺 中 市 南 屯 區 黎 明 國 民 小 學 方 案 名 稱 : 學 習 的 源 頭 活 水 ~ 圖 書 教 師 計 畫 壹 前 言 ~ 黎 明 教 閱 讀 半 畝 方 塘 一 鑑 開 天 光 雲 影 共 徘 徊 問 渠 哪 得 清 如 許 為 有 源 頭 活 水 來 宋 朝 朱 熹 < 觀 書 有 感 > 本 校 自 99 學 年 度 起 連 續 申 請 教 育 部 試 辦

More information

深入理解otter

深入理解otter 深 入 理 解 otter 七 锋 2013-07-04 Agenda 1. 中 美 同 步 需 求 2. otter 架 构 & 设 计 o o o o o o o o 如 何 解 决 " 差 " 网 络 如 何 避 免 双 向 回 环 如 何 处 理 数 据 一 致 性 如 何 高 效 同 步 数 据 如 何 高 效 同 步 文 件 如 何 支 持 系 统 HA 如 何 处 理 特 殊 业 务

More information