kettle6.0linux安装配置

来源：互联网发布：iphone随机抽奖软件编辑：程序博客网时间：2024/05/16 00:46

kettle

kettle部署分为kettle server部署和客户端的kettle client部署，二者安装包完全一致，除因为不同操作系统执行相对应的脚本文件外(linux执行shell文件，windows执行bat文件)，其它配置基本一致。

kettle版本：6.0,下载地址：http://sourceforge.net/projects/pentaho/files/Data%20Integration/6.0/

步骤：

安装JDK，kettle6.0必须依赖jdk1.7或以上，安装步骤见：系统架构-JDK安装
解压kettle安装包。
unzip pdi-ce-6.0.0.0-353.zip
如果是linux系统请修改spoon.sh脚本。
OPT="$OPT $PENTAHO_DI_JAVA_OPTIONS -Djava.library.path=$LIBPATH -DKETTLE_HOME=$KETTLE_HOME -DKETTLE_REPOSITORY=$KETTLE_REPOSITORY -DKETTLE_USER=$KETTLE_USER -DKETTLE_PASSWORD=$KETTLE_PASSWORD -DKETTLE_PLUGIN_PACKAGES=$KETTLE_PLUGIN_PACKAGES -DKETTLE_LOG_SIZE_LIMIT=$KETTLE_LOG_SIZE_LIMIT -DKETTLE_JNDI_ROOT=$KETTLE_JNDI_ROOT"
在该参数最后加上
-Dorg.eclipse.swt.browser.DefaultType=mozilla
如果是windows系统不需要修改直接运行spoon.bat文件即可。
安装MySQL，MySQL主要为kettle资源库配置。也可以使用其它关系型数据库代替。安装步骤见：系统架构-安装MySQL。
加入mysql驱动包。把mysql驱动包放入/data-integration/lib目录下。
配置资源库。
在菜单栏中选择工具->资源库->连接资源库。

选择添加资源库图表

选择创建资源库的类型，我们选择第一个基于数据库的资源库。

点击新建，并在连接类型中选择相对应的关系型数据库，填入对应的配置选项。

测试连接成功后，点击确认，并输入资源库的名称和描述，点击创建或更新。

点击创建会预生成预创建sql的脚本，编辑改sql脚本，修改：
INSERT INTO R_VERSION(ID_VERSION, MAJOR_VERSION, MINOR_VERSION, UPGRADE_DATE, IS_UPGRADE) VALUES (1,5,0,'2015/10/22 10:47:04.964','N');
INSERT INTO R_USER(ID_USER, LOGIN, PASSWORD, NAME, DESCRIPTION, ENABLED) VALUES (1,'admin','2be98afc86aa7f2e4cb79ce71da9fa6d4','Administrator','User manager','Y');
INSERT INTO R_USER(ID_USER, LOGIN, PASSWORD, NAME, DESCRIPTION, ENABLED) VALUES (2,'guest','2be98afc86aa7f2e4cb79ce77cb97bcce','Guest account','Read-only guest account','Y');
修改为：
INSERT INTO R_VERSION(ID_VERSION, MAJOR_VERSION, MINOR_VERSION, UPGRADE_DATE, IS_UPGRADE) VALUES (1,5,0,'2015/10/22 10:47:04.964',false);
INSERT INTO R_USER(ID_USER, LOGIN, PASSWORD, NAME, DESCRIPTION, ENABLED) VALUES (1,'admin','2be98afc86aa7f2e4cb79ce71da9fa6d4','Administrator','User manager',true);
INSERT INTO R_USER(ID_USER, LOGIN, PASSWORD, NAME, DESCRIPTION, ENABLED) VALUES (2,'guest','2be98afc86aa7f2e4cb79ce77cb97bcce','Guest account','Read-only guest account',true);
点击执行，资源库创建完成。在资源库登陆界面选择创建的资源库，输入用户名/密码(admin/admin)登陆即可。
配置kettle连接hadoop集群。
选择hadoop集群对应的kettle版本,各版本对应信息请查看：http://wiki.pentaho.com/display/BAD/Configuring+Pentaho+for+your+Hadoop+Distro+and+Version。kettle在5.4版本开始支持CDH5.3，我们使用最新的6.0版本。
编辑/data-integration/plugins/pentaho-big-data-plugin/plugin.properties文件。
active.hadoop.configuration=hadoop-20
修改为hadoop-configurations目录下集群对应的hadoop版本我们这里选择cdh54
active.hadoop.configuration=cdh54
编辑/data-integration/plugins/pentaho-big-data-plugin/pentaho-big-data-plugin/hadoop-configurations/cdh54/yarn-site.xml、core-site.xml文件修改主机名，并加入当前使用集群配置。并在/data-integration/plugins/pentaho-big-data-plugin/pentaho-big-data-plugin/hadoop-configurations/cdh54/目录下加入hbase-site.xml文件，配置完成后重启kettle配置生效。
解决kettle资源库保存中文乱码问题。
编辑kettle的启动脚本spoon.bat文件。
if"%PENTAHO_DI_JAVA_OPTIONS%"==""set PENTAHO_DI_JAVA_OPTIONS="-Xmx512m""-XX:MaxPermSize=256m"
在该文件内容后面加入
"-Dfile.encoding=utf8"
在数据连接时，编辑选项在命名参数中加入characterEncoding=utf8参数。

0 0