数据仓库相关发布包stardw-2.1.0安装配置手册

1、Linux 下部Kettle及数据仓库【注意因为数据仓库与SBOS统部署到一台服务器上，避免数据仓库影响 S，比如数据仓库加载时会占用大量的系统资源，会影响S 性能等。因为用到Oracle 11g 的自动创建分区的特性，因此oracle 必须安11g 以一、 发布物介绍包说pdi-ce-ETL数据仓库建表， 即对应kettle 抽取、加载程二、 系统环境如果服务器已经安装好jdk（1.6.0_17）卸载系统自带jdk #rpm -qa | grep gcjrpmenodeps#rpm-e- 将安装文件放到cd # odu+x./jdk-6u7-linux-i586-#./jdk-6u7-lin

2、ux-i586-测试 JDk 是否安装# java-javaversionJava(TM)SERuntimeEnvironment (build 1.7.0_31-JavaHotSpot(TM) 64-BitServer VM(build20.6-b01,mixed 配置环境变 export PATH=$JAVA_HOME/bin:$PATHexport 修改.bash_profile 户权限使用这些环境变量，你只需要修改其个人用户主 下的.bash_profile用文本编辑器打开用户 下的.bash_profile件在.bash_profile 文件末尾加入：export PATH=$JAV

3、A_HOME/bin:$PATHexport 三、 安装数据仓库系统DB1 BOSS 抽取到一个数据仓针对不同的服务器创建不同的数据对于抽取的服务器： 在 windows 本地执行发布包“ workspacesql ”bossusername(BOSS数据库的用户bossuserpassword(BOSS数据库的用户):LUWDSMS3_140108 bossdatabaselink(BOSSNet 服务名):210_starbossdw datafile path(用于抽取的经分数据库的数据文件路径):/starsms/oradatadwusername(用于抽取的经分数据库的用户dwuse

4、rpassword(用于抽取的经分数据库的用户 对于加载的服务器： 在 windows 本地执行发布包“ workspacesql ”dw datafile path(加载的经分数据库的数据文件路径): /starsms/oradatadw user name(加载的经分数据库的用户):dw_testdwuserpassword(加载的经分数据库的用户 在所有服务器部在所有服务器部署数据仓库的程可以把 DW_DB 的配置信息删除。 在加载服务器配置多BOSS 配置FTP 服务器：用linux 下的vsftpd 配置FTP 服务器，然后给每个BOSS 创建一个ftp用户，每个ftp用户的根 是w

5、orkspace 下对应的文件夹，比如nigeria 的ftp 用户登录 ftp 后，当前路径是“./wrokspace/nigeria“（注意，是在 nigeria。说明：此处配置的 ftp 用户名、需要告诉抽取各个 BOSS 的售后，然后各自配置到各个 BOSS 的抽取服务器的“conf_ftp_upload_perties”文件中。在抽取服务器配FTP ”中的 BOSS 抽取到一个数据仓DB1.ETL务ETL服务器上运行BOSS DB镜像主要用于减少BOSS DB的BOSS DB可以省略或者BOSS DB镜像使用 BOSS DB的读写分离库最小化环境BSS DB镜像省略，BSS D、数据

6、仓库、EL服务器都安装到一台数据库服务器上。目前数据仓库数据量比BOSSDB数据2.创建数据仓库的数据在windows 本地执行发布包“workspacesql”bossusername(BOSS数据库的用户bossuserpassword(BOSS数据库的用户):LUWDSMS3_140108 bossdatabaselink(BOSSNet 服务名):210_starbossdw datafile path(用于抽取的经分数据库的数据文件路径):/starsms/oradata dw user name(用于抽取的经分数据库的用户):dw_ext21002dwuserpassword(用于

7、抽取的经分数据库的用户 在 windows 本地执行发布包“workspacesql”dw datafile path(加载的经分数据库的数据文件路径): /starsms/oradata dwusername(加载的经分数据库的用户dwuserpassword(加载的经分数据库的用户 在服务器部四、 单个安装步骤说明】放置在 下所有.sh 文件的执行权限即od+x 修改pdi-ce-213data-integrationspoon.sh文件（windwos系统，则修改 Spoon.bat 文件）中的如下内容； 服务器的内容，一般建议 128G，有条件可以增加到 256G。 DW_DB 将下【

8、perties】文件拷贝覆盖到linux当前用户录.kettle修改启动文件 run1.sh、run2.sh、run_all.sh、run_ftp_upload_job.shcd 指向部署workspacewrokspace在操作系统中五、 执行数据仓库抽取、加载经分配置文件说 代表抽取时间的偏移值，单位（分钟 邮件配置（若不想接收邮件，忽略此步骤单独执行抽取过特别说明目，job1抽取前需手动增加如下配置： 建议执行： nohup ./run1.sh &件夹 和 各个表的 zip 文件。下生成list.txt文件FTP 上传过workspacerun_ftp_upload_job.sh 启动上传过程.建议执行： nohup ./ run_ftp_upload_job.sh & 建议执行： nohup ./run2.sh & linux 下配置定时自动运crontab -u root -e3001*/starboss/BASS/data- crontab-uroot-3003*/starbo