数据对接—kettle使用之三

上一篇介绍了Data Grid和文本文件输出两个插件&＃xff0c;并通过实例介绍插件的简单使用&＃xff0c;如果有这样的需求大家可以参考一下并深入研究插件的其它细节设置。这一篇我们介绍&＃xff08;表输出&＃xff09;的使用。

表输出

1、 Target Schema&＃xff1a;目标模式。要写数据的表的Schema的名称。允许表明中包含“。”对数据源来说是很重要的

2、目标表&＃xff1a;要写数据的表名。

3、提交记录数量&＃xff1a;在数据表中用事物插入行。如果n比0大&＃xff0c;每n行提交一次连接。否则不使用事务&＃xff0c;速度会慢一些。

4、裁剪表&＃xff1a;在第一行数据插入之前裁剪表。

5、忽略插入错误&＃xff1a;使Kettle忽略比如违反主键约束之类的插入错误&＃xff0c;最多20个警告将被日志记录。在批量插入的时候这个功能不可用。

6、使用批量插入&＃xff1a;这个选项速度快&＃xff0c;默认被选上。

7、表分区数据&＃xff1a;使用这个选项可以在多个表之间拆分数据。例如把数据放到表s1、s2、s3中来代替直接插入数据到表s中。

例如&＃xff1a;create or replace view sales as

Select* from sales_200501

Unionall

Select* from sales_200502

8、表名定义在一个字段里&＃xff1a;使用此选项可以拆分数据到一个或者多个表里&＃xff0c;目标表名可以用你指定的字段来定义。例如&＃xff1a;如果你想存储客户性别数据&＃xff0c;这些数据可能会存储到表M和表F里面。这个选项可以阻止这些字段插入到相应的表里。

9、返回一个自动产生的关键字&＃xff1a;往表中插入行时&＃xff0c;是否产生一个关键字。

10、自动产生关键字的字段名称&＃xff1a;指定包含关键字的输出字段的字段名称。

1、打开表输出插件&＃xff0c;选择新建数据库连接和选择目标表&＃xff0c;如下图&＃xff1a;

2、数据库连接展示&＃xff0c;如下图&＃xff1a;

3、点击测试&＃xff0c;连接成功说明可以正常使用&＃xff0c;如下图&＃xff1a;

4、点击如上箭头指向的按钮&＃xff0c;自动执行生成的sql脚本&＃xff0c;创建表&＃xff0c;如下图&＃xff1a;

5、执行结果如下图&＃xff1a;

6、成功创建的表ttt&＃xff0c;选择表为目标表&＃xff0c;如下图&＃xff1a;

7、点击获取输出字段&＃xff0c;如下图&＃xff1a;

8、还可以预览数据&＃xff0c;如下图&＃xff1a;

9、错误日志录到文本文件中&＃xff0c;下图为配置项&＃xff1a;

10、最后点击运行按钮&＃xff0c;可以测试脚本&＃xff0c;操作和上一篇博客中的一样&＃xff0c;这里就不在赘述了。

总结&＃xff1a;表输出可以自动的创建表及字段&＃xff0c;这样我们可以用它来处理一些特殊的动态的创建表并保存数据的业务需求&＃xff0c;而且表输出的效率也要比更新插入插件的高。