普元信息技术股份有限公司作业调度监控平台 Primeton JobCtrl 安装部署手册年 9 月

Size: px

Start display at page:

Download "普元信息技术股份有限公司作业调度监控平台 Primeton JobCtrl 安装部署手册年 9 月"

音邹
5 years ago
Views:

1 普元信息技术股份有限公司作业调度监控平台 Primeton JobCtrl 安装部署手册年 9 月

2 第一章部署环境硬件软件... 4 第二章安装包说明... 5 第三章安装说明数据库准备安装数据库创建数据库初始化数据库运行环境准备 Java 运行环境 Web 应用容器部署程序主程序调度程序代理程序监听程序... 20

4 第一章部署环境 1.1 硬件作业调度监控平台应用系统服务器要求组件要求处理器内存磁盘空间网络连接 2CPU, 推荐 4CPU 最低 4G, 推荐 32G 以上 200GB, 推荐 500GB TCP/IP 1.2 软件作业调度监控平台应用系统服务器要求组件要求下列操作系统之一 : 操作系统 Windows 2000 / 2003 / 2008 HP-UNIX Linux 下列服务器之一 : 应用服务器 Tomcat 5.5 WebSphere 6.1 BEA WebLogic 9.0 下列数据库之一 : Oracle 关系数据库服务器 Microsoft SQL Server DB2 MySQL Java 运行环境 JDK1.5

5 第二章安装包说明说明 : primetonjobctrl: 主程序 war 包 ; Agent: 代理服务器 zip 包程序 ; Listener: 监听服务器 zip 包程序 ; scheduler: 调度服务器 war 包 ; jdbc: 数据库驱动包 ; sql: 初始化数据库脚本 ;

6 第三章安装说明 3.1 数据库准备安装数据库略创建数据库 DB2: 保证 DB2 所有的服务正常启动建库具体步骤如下 : 1 打开控制中心 : 安装菜单 - 一般管理工具 - 控制中心 ; 2 选中所有数据库, 右键创建数据库, 选中标准 ; 3 选则系统和实例, 点击确认 ; 4 输入数据库名称, 例如 :primetondb; 选中存放路径 ; 可以添加别名和注释 ; 5 缺省缓冲池和表空间页大小, 选中 32k ; 6 然后一直下一步完成即可 Oracle: 1 通过配置向导创建数据库 Oracle 安装菜单 - 配置和移植工具 - Database Configuration Assistant, 默认配置 2 建库脚本

7 保证 Oracle 相应服务器启动, 启动 cmd 命令窗口, 顺序执行下面的 sql 命令 sqlplus /nolog CONN / AS SYSDBA; -- 优化数据库, 根据系统配置情况而定 alter system set db_files=900 scope=spfile; alter system set processes=600 scope=spfile; alter system set sessions=400 scope=spfile; -- 创建数据库表空间及用户, 建库后建立下面的系统路径如 :D:\ data\ CREATE TABLESPACE "PRIMETONTABLE" LOGGING DATAFILE 'D:\data\PRIMETONTABLE.ora' SIZE 2048M AUTOEXTEND ON NEXT 50M MAXSIZE UNLIMITED; -- 创建用户 create user primeton identified by "primeton" default tablespace PRIMETONTABLE temporary tablespace TEMP profile DEFAULT; -- 用户授权 grant connect to primeton; grant dba to primeton; grant unlimited tablespace to primeton; COMMIT;

8 -- 测试连接数据库 CONNECT primeton /primeton; 初始化数据库可用工具, 例如 :toad DbVisualizer, 或者数据库自带的可视化命令工具, 执行数据库初始脚本 1 连接上面创建的空数据库 ; 2 顺序执行监控脚本 : 说明 : 1 primetonjobctrl_drop.sql 删除所有的库表, 确保数据库为空库, 如果是新建库, 此文件可以不执行 ; 2 primetonjobctrl_create.sql 创建所有库表, 并设置相应的库表属性 ; 3 primetonjobctrl_initdata.sql 系统初始化数据 4 primetonjobctrl_initsql_all.sql 是以上所有 sql 合集, 可以直接执行这一个文件 3.2 运行环境准备 Java 运行环境 1 安装 JDK

9 安装版 : 点击安装程序, 默认选项, 一直下一步即可解压缩版 : 解压缩非安装版 jdk 到任意目录, 注意不要有汉字目录 2 配置环境安装 java 环境完毕, 例如安装目录是 C:\Java\jdk1.6.0_30, 然后设置环境变量 : 1) 计算机图标, 右键选中属性, 弹出计算机属性页 ; 2) 在计算机属性页, 选中高级系统设置, 进入高级系统设置页面 ; 3) 点击环境变量按钮, 进入环境变量设置页 ; 4) 点击新建..., 分别增加以下系统变量 : JAVA_HOME=C:\Java\jdk1.6.0_30 PATH=C:\Java\jdk1.6.0_30\bin CLASSPATH:.;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar; 5) 验证 : 配置完成后, 在 CMD 中, 运行 java version 测试是否配置成功 Web 应用容器以 Tomcat 为例介绍 1) 安装安装版 : 双击安装文件, 开始安装 Tomcat 在安装过程中, 安装程序会自动搜寻 JDK 和 JRE 的位

置安装完成后, 在 Windows 系统的开始 -> 程序菜单下会添加 Apache Tomcat 菜单组解压缩版 : 下载 Tomcat 压缩包, 通过解压缩的方式安装 Tomcat, 解压缩的方式也适用于其他的操作系统, 例如 Linux 系统使用 WinZip 或 WinRAR 等解压缩工具将 Tomcat 压缩包解压到指定的驱动器和目录中说明 : 安装 Tomcat

10 置安装完成后, 在 Windows 系统的开始 -> 程序菜单下会添加 Apache Tomcat 菜单组解压缩版 : 下载 Tomcat 压缩包, 通过解压缩的方式安装 Tomcat, 解压缩的方式也适用于其他的操作系统, 例如 Linux 系统使用 WinZip 或 WinRAR 等解压缩工具将 Tomcat 压缩包解压到指定的驱动器和目录中说明 : 安装 Tomcat 之前, 先安装 jdk; 2) 运行 Tomcat 在 Tomcat 安装目录下的 bin 子目录中, 有一些批处理文件 ( 以.bat 作为后缀名的文件 ), 其中的 startup.bat 就是启动 Tomcat 的脚本文件, 用鼠标双击启动 3) Tomcat 启动验证打开浏览器, 在地址栏中输入表示本地机器,8080 是 Tomcat 默认监听的端口号 ), 将出现如图所示的 Tomcat 页面 4) 关闭 Tomcat 如果要关闭 Tomcat 服务器, 可以用鼠标双击 bin 目录下的 shutdown.bat 文件注 : 如果你机器上的 Tomcat 启动失败, 有可能是因为 TCP 的 8080 端口被其他应用程序

11 所占用, 你可以修改 Tomcat 默认监听的端口号 3.3 部署程序主程序第一步准备安装包获得安装包程序 primetonjobctrl 第二步准数据库驱动拷贝安装包内 jdbc 文件夹内得数据库驱动 jar 包至应用服务器 lib 下 ; 第三步修改配置文件 a. governor 监控配置 ( 可略 ) 1 修改 WEB-INF/web.xml 中管理端口 :(6400) <context-param> <param-name>startupmode</param-name> <param-value>admin</param-value> </context-param> <context-param> <param-name>adminport</param-name> <param-value>6400</param-value>

12 </context-param> ---- 端口 6400 是该应用的管理端口, 可以取其他值, 但不可与其他端口冲突 2 修改 WEB-INF/_srv/domain/domain.xml 中修改 IP Port 应用名称 ( 让 Primeton JobCtrl 中 Governor 可以监控 ) <?xml version="1.0" encoding="utf-8"?> <domain name="primetondomain" timestamp=" " interval="5000" timeout="5000" adminserverip=" " adminserverport="6400" adminappname="primetonjobctrl"> <servers> <server ip=" " jndiport="0" httpport="0" adminport="6400" appname="primetonjobctrl" issynchronized="true" name="server_ _6400" type="tomcat"/> </servers> <groups/> </domain> ----domain 节点下 adminserverip 与 server 节点下 ip 设置为当前服务器的 ip 地址 ----domain 节点下 adminserverport 与 server 节点下 adminport 为 web.xml 中设置的管理端口 ----domain 节点下 adminappname 与 server 节点下 appname 为当前应用名称 b. 数据库配置

13 修改 WEB-INF/_srv/config/user-config.xml 中数据源配置 <module name="datasource"> <group name="default"> <configvalue key="database-type">oracle</configvalue> <configvalue key="jdbc-type">oracle Driver(thin)(Type4)</configValue> <configvalue key="c3p0-driverclass">oracle.jdbc.driver.oracledriver</configvalue> <configvalue <configvalue key="c3p0-username">etl</configvalue> <configvalue key="c3p0-password">etl</configvalue> <configvalue key="c3p0-poolsize">5</configvalue> <configvalue key="c3p0-maxpoolsize">5</configvalue> <configvalue key="c3p0-minpoolsize">5</configvalue> <configvalue key="transaction-isolation">isolation_default</configvalue> <configvalue key="test-connect-sql">select count(*) from EOS_UNIQUE_TABLE</configValue> <configvalue key="retry-connect-count">-1</configvalue>

14 </group> </module> ( 亦可通过启动应用后, 访问 Primeton JobCtrl 中 governor, 修改数据源, 但是启动时由于数据源连接不正确, 会报错, 但不影响 Primeton JobCtrl 中 Governor 的访问, 地址 : c. 是否显示第三方 ETL 工具配置修改配置文件 jobtypeconfig.properties, 位置 WEB-INF\classes\com\primeton\dams\system 和 WEB-INF\_srv\work\user\com.primeton.dams.system\com\primeton\dams\system 下 1 ShowOtherETLTool=false, 标示不显示 pc 和 ds 配置信息 ; 2 ShowOtherETLTool=true, 标示显示 pc 和 ds 配置信息, 在新增作业和作业服务器时候, 会有 pc 和 ds 作业类型选项 d. 首页 flex 图形展示配置修改 WEB-INF\flex\services-config.Xml <channels> <channel-definition id="my-amf" class="mx.messaging.channels.amfchannel"> <endpoint url=" class="flex.messaging.endpoints.amfendpoint"/> </channel-definition>

15 <channel-definition id="my-secure-amf"class="mx.messaging.channels.secureamfchannel"> <endpoint url=" class="flex.messaging.endpoints.secureamfendpoint"/> <properties> <add-no-cache-headers>false</add-no-cache-headers> </properties> </channel-definition> <channel-definition id="my-polling-amf" class="mx.messaging.channels.amfchannel"> <endpoint url=" class="flex.messaging.endpoints.amfendpoint"/> <properties> <polling-enabled>true</polling-enabled> <polling-interval-seconds>4</polling-interval-seconds> </properties> </channel-definition>

16 </channels> 修改为当前应用的 ip 端口和应用名称第四步部署应用通过标准 J2EE 应用部署方式, 向服务器部署 EAR/WAR 应用, 拷贝 war 包至应用服务器 Tomcat 的 webapps 目录下第五步启动应用服务器进入 tomcat 安装目录, 到 bin 目录下找到 startup.bat, 双击启动应用第六步访问应用程序访问地址 : 调度程序 1 部署通过标准 J2EE 应用部署方式, 向服务器部署 scheduler.war ----Tomcat 下, 拷贝 war 文件至 webapps 目录下 ( 调度服务器可以部署与管理服务器部署在同一应用服务器之下, 亦可分开部署至两个应用服务器下 ) 2 配置 1) 修改 config 目录下 config.properties 文件配置文件内容 :

17 recordlogflag=false joblogdir=d:\\etllog\\job joblogdestdir=d:\\etllog\\jobflow savedays=7 timeround=08:40-09:50 说明 : recordlogflag 是否输出日志文件 ; 配置为 false 该模块不启用 joblogdir 是日志生成目录 ( 内部临时目录 ); joblogdestdir 输入日志目录 ( 对外日志输出目录, 以及日志定时清理目录 ); savedays 日志保存天数 ; timeround 作业流执行时间范围, 必须整点 ; 以上配置的路径, 文件夹必须先手工创建要新建 joblogdir 文件夹, 以及 joblogdir 下面的 bak 文件夹 ; 2) 修改配置文件 SchedulerFailOverConfig.properties, 设置调度程序热备信息 : 示例 : SchedulerList=71Scheduler 71Scheduler= :6080:scheduler:0, :6081:scheduler:1

18 说明 : 第一项是调度服务器名字列表, 名称是在管理服务器中配置的名称 ; 第二项是调度服务器的热备服务器列表, 每个调度服务器配置之间用逗号隔开, 每个调度服务器配置包括 ip 端口应用名称和优先级, 配置项之间用分号隔开当前配置的调度是主服务, 其他是备份服务 3 启动通过 start.bat 或者 start.sh 启动 tomcat,scheduler 应用会自动完成部署 4 配置访问首次登录可以设置用户名和密码, 亦可不设置 ---- 配置应用访问的数据源

19 3.3.3 代理程序 1 部署解压 agent.zip, 可放至任意目录下 ; 2 配置 1) 修改 config 目录下 server.properties 文件中 port 端口号, 防止端口冲突! ----port=8181 2) 修改配置文件 SchedulerFailOverConfig.properties, 设置调度程序热备信息 : 示例 : SchedulerList=71Scheduler 71Scheduler= :6080:scheduler:0, :6081:scheduler:1 说明 : 第一项是调度服务器名字列表, 名称是在管理服务器中配置的名称 ; 第二项是调度服务器的热备服务器列表, 每个调度服务器配置之间用逗号隔开, 每个调度服务器配置包括 ip 端口应用名称和优先级, 配置项之间用分号隔开当前配置的调度是主服务, 其他是备份服务 3 启动通过 start.bat 或者 start.sh 启动代理服务器

20 3.3.4 监听程序 1 部署解压 listener.zip, 可放至任意目录下 ; 2 配置 1) 修改 config 目录下 config.properties 文件中调度服务器的 URL 地址 ; ---schedulerserver=http\://localhost\:8081/scheduler/ 热备相关配置 listenerserver= :7081 listenerlist= :7081, :7082, :7083 说明 : listenerserver 是当前监听的 ip 和端口 listenerlist 是监听热备列表先启动的服务为主服务, 其他为备份服务 ; 列表直接用逗号隔开, 每个配置项由 ip 和端口组成, 用冒号分割 3 启动通过 start.bat 或者 start.sh 启动监听服务器

BPS 6.6 手工部署指南 (JBoss4) 手工部署 BPS( 单机 ) 手工部署包支持的 jboss 版本有 jboss ga 和 jboss ga 示例中的 jboss 版本为 jboss ga, 操作系统为 Solaris(IP:

BPS 6.6 手工部署指南 (JBoss4) 手工部署 BPS( 单机 ) 手工部署包支持的 jboss 版本有 jboss-4.0.5.ga 和 jboss-5.1.0.ga 示例中的 jboss 版本为 jboss-4.0.5.ga, 操作系统为 Solaris(IP:192.168.2.179), 进行手工配置前需要准备好干净的 jboss 环境 1. 获取部署文件从 BPS_6.6_Deploy_Package.zip

普元信息技术股份有限公司 作业调度监控平台 Primeton JobCtrl 安装部署手册 年 9 月

普元信息技术股份有限公司作业调度监控平台 Primeton JobCtrl 安装部署手册年 9 月