WahaTransformer操作手册.doc

必科温信息技术（上海）有限公司Waha！Transoformer操作手册目 录第 1 章 连接源信息41. 连接源信息41.1 SQLDB连接器51.2 更新SQLDB连接器51.3 固定长文本文件连接器51.4 可变长文本文件连接器51.5 二进制文件连接器51.6 Essbase维度构建连接器51.7 Essbase维度构建连接器51.8 输入用XML连接器51.9 输出用XML连接器51.10 Excel读取51.11 Excel工作表名读取51.12 Excel指定单元格读取51.13 Excel写入51.14 Excel指定单元格写入51.15 DB load for ORACLE51.16 DB load for Sybase IQ51.17 数据通道连接器51.18 临时文件连接器51.19 虚拟文件连接器62. 如何创建连接源62.1.新建连接源62.2 选择连接源62.2.1 SQLDB连接器的属性设置72.2.2 固定长文本连接器属性设置72.2.3 可变长文本连接器属性设置72.2.4 二进制文件连接器属性设置82.2.5 Essbase维度构建连接器属性82.2.6 Essbase数据装入连接器属性82.2.7 更新SQLDB连接器属性92.2.8 输入用XML连接器属性92.2.9 输出用XML连接器属性92.2.10 Excel读取连接器属性102.2.11 Excel工作表名读取属性设置102.2.12 Excel指定单元格读取连接源属性设置102.2.13 Excel写入连接源属性设置112.2.14 Excel指定单元格写入连接源属性设置112.2.15 DB loader for ORACLE属性设置112.2.16 DB Loader for Sybase IQ连接源属性设置12第 2 章 视图模板121. 视表模板122. 按内容把视表归类123. 创建视表模板。123.1 选择视表模板123.2 视表属性设置133.3 导入数据表格式13第 3 章Waha过滤器介绍16过滤器功能定义161. 过滤器分类162. 过滤器介绍173.1 标准过滤器173.2 结合过滤器173.3 归并过滤器183.4 统计过滤器193.5分割过滤器213.6参照过滤器223.7纵展开过滤器233.8更新SQLDB过滤器。24第 4 章作业流程制作261. 新建作业262. 作业工作区域263. 作业属性及和外部程序接口的设定263.1 外部程序接口设定。263.2 作业流程设定。273.2.1拖放源视表和目标视表到作业面板中。273.2.2选择过滤器283.2.3源视表和目标视表的设定。283.2.4对应字段的设定293.2.5字段函数设定293.2.6作业执行30第 1 章 连接源信息1. 连接源信息连接源定义：连接器是数据库与视表之间数据通信的桥梁纽带，把数据从数据库或文本文件中取出放入视表中或把视表中的数据写入数据库或文本文件中。连接源种类：数据库连接源、文本连接源、虚拟连接源三类。关于数据库连接源、文本连接源，如下图所示：关于虚拟连接源，如下图所示1.1 SQLDB连接器：用于连接各种关系型数据库，把数据从数据库中读取出来。对数据库中的数据只读，不会坏数据库中的数据。1.2 更新SQLDB连接器：用于连接各种关系型数据库，把过滤中处理过的数据更新到数据库中。对数据库具有读和写的功能。1.3 固定长文本文件连接器：用于连接文本数据文件，根据视表中设定的长度读取数据超过设定长度的部分，将被截掉。具有读写文件功能。示例如下图：固定长文本连接器连接文件数据时，根据设置的列长度取值。超过长度部分将被截断FAChar10FBChar5源文件长AABBCCAABBCC输出结果AABBCCAABBC1.4 可变长文本文件连接器：用于连接文本数据文件，根据设定的分隔符读取数据字段。具有读写文件功能。如下图所示：用可变长文本连接器连接文本文件时，按分隔符去字符串长度。分隔符为“，”源文件输出结果AABBCCDDEEFF,GG,HHIIJJKKLLAABBCCDDEEFFGGHHIIJJKKL1.5 二进制文件连接器：连接二进制文件，并具有对其读写的功能。用于对以二进制形式存在的文件进行操作。此连接器主要用于IBM大型机、小型机或PC机上的二进制文件传输。1.6 Essbase维度构建连接器：用于读取多维数据库hyperion(企业绩效管理)中的数据。1.7 Essbase维度构建连接器：用于写入多维数据库hyperion(企业绩效管理)中的数据。1.8 输入用XML连接器：用于根据节点读取XML文件里面的数据。1.9 输出用XML连接器：用于根据节点将数据写入到XML文件里面。1.10 Excel读取：用于读取excel表格里面的数据。1.11 Excel工作表名读取：用于读取excel的sheet名称。1.12 Excel指定单元格读取：用于读取某一个或者某几个指定单元格的值。1.13 Excel写入：用于将数据写入到目标excel表格中。1.14 Excel指定单元格写入：用于将数据写入到目标表中某个或者是某几个指定的单元格当中。1.15 DB load for ORACLE：只用于连接ORACLE数据库，适用于处理大数据量的数据迁移，数据更新等。把数据批量更新到Oracle数据库中，属Oracle数据库专用。1.16 DB load for Sybase IQ: 只用于连接IQ数据库，适用于处理大数据量的数据迁移，数据更新等。把数据批量更新到Sybase IQ数据库中，属IQ数据库专用。1.17 数据通道连接器：此虚拟连接器用于直接在内存中处理数据，其所连接的过滤器同时并行处理数据。1.18 临时文件连接器：此虚拟连接器用于直接在内存中处理数据，当处理数据时，会往计算机上写入临时文件，处理完毕后，临时文件会自动删除掉。连接在其两端的过滤器是串行处理数据。1.19 虚拟文件连接器：此虚拟连接器用于直接在内存中处理数据，当处理数据时，会使用计算机虚拟内存，连接在其两端的过滤器串行处理数据。2. 如何创建连接源2.1. 新建数据源如图所示，选中连接源信息，点右键，“新建连接源信息”。2.2 选择连接源，如下图所示。 2.2.1 SQLDB连接器的属性设置。如下图所示：2.2.2 固定长文本连接器属性设置。如下图所示：2.2.3可变长文本连接器属性设置。如下图所示：2.2.4二进制文件连接器属性设置，如下图所示：2.2.5 Essbase维度构建连接器属性，如下图所示。 2.2.6 Essbase数据装入连接器属性，如下图所示。2.2.7 更新SQLDB连接器属性，如下图所示。2.2.8 输入用XML连接器属性，如下图所示。2.2.9 输出用XML连接器属性，如下图所示。2.2.10 Excel读取连接器属性，如下图所示。2.2.11 Excel工作表名读取属性设置，如下图所示。2.2.12 Excel指定单元格读取连接源属性设置，如下图所示。2.2.13 Excel写入连接源属性设置，如下图所示。2.2.14 Excel指定单元格写入连接源属性设置，如下图所示。2.2.15 DB loader for ORACLE属性设置，如下图所示。2.2.16 DB Loader for Sybase IQ连接源属性设置，如下图所示。小结：在Waha中，根据不同的数据库和文本文件，选择不同的连接器，在使用ODBC连接源时，需要客户端安装对应的数据库驱动程序，并在Windows的ODBC中建立好数据源，然后在WAHA中选择ODBC连接源。注意：SQLDB连接器，是只读连接源。DB Loader for ORACLE连接器是只适合于ORACLE数据库。第 2 章 视图模板1. 视表模板视表的定义：Waha中视表的概念，对应着数据库中的视图和表。用于多方位地展示数据库中的数据。2. 按内容把视表归类。如图所示。3. 创建视表模板。3.1 选择视表模板，右键“新建视表”。如下图所示：3.2 视表属性设置，如下图所示。3.3 导入数据表格式。如下图所示：第一步：点击“导入”第二步：点击“下一步”第三步：选择文件后，点击“下一步”第四步：点击“下一步”第五步：如图，点击“下一步”第六步：选择导入模式，点击“下一下”第七步：点击“完成”第八步：可预显数据，如下图所示，点击“视表预显”。第九步：查看预显结果。小结：视表制作过程中，如果要连表头标题一起输出，需要在此视表中的连接源中修改表头行数。若在一些文件中出现文本乱码情况，需要修改字码设置。如：GB码修改为UTF-8等。第 3 章 Waha过滤器介绍1. 过滤器功能定义：把数据按条件设置从源视表输出到目标视表,在过滤器中可以设置过滤条件、输入输出视表、字段转换函数等。过滤器的几种传输方式：数据库-数据库、数据库-文件、文件-数据库、文件-文件，如下图所示：1. 过滤器分类在Waha中共有八种过滤器：标准过滤器、结合过滤器、归并过滤器、统计过滤器、分割过滤器、参照过滤器、纵展开过滤器、更新SQLDB过滤器。如下图所示：2. 过滤器介绍2.1 标准过滤器流程图如下所示：功能：把源视表中的数据按一定的条件输出到目标视表中。数据库中对应的WHARE条件均可在标准过滤器中设置。流程制作：1 建源视表。 2 建目标视表。 3 用鼠标选中源视表，向目标视表拖放。 4 设置过滤条件，并确定。 5 流程制作完成。2.2 结合过滤器流程图如下所示：功能：把多个源视表中的数据按某种方式结合，输出到目标视表中。结合方式：结合过滤器中的结合方式有完全一致结合、包含左视表中的全部数据、包含右视表中的全部数据、仅包含左视表中的数据、仅包含右视表中的数据、包含左右视表中的数据等几种方式。流程制作：1 新建两个或多个源视表（这些视表必须有关联关系）。 2 新建目标视表。 3 把源视表用鼠标拖放到目标视表。 4 设置多个源视表。 5 设置结合关系 6 设置源视表过滤条件。 7 设定其它条件。 8 确定后，结合关系设定完毕。结合关系设定如下图所示：2.3 归并过滤器流程图如下所示：功能：把结合相同的两个或两个以上的源视表中的数据合并到一个目标视表中。注意源视表的表结构必须相同。流程制作：1 新建要归并的源视表。 2 新建目标视表 3 把源视表用鼠标拖放到目标视表上。 4 设定要归并的其它源视表。 5 设定过滤条件。 6 设定归并键。 7 设定其它条件。 8 确定。归并属性设置完毕。归并设置如下图所示：2.4 统计过滤器流程图如下所示：图1：普通统计流程图图2: Step子组统计流程图图3：USER子组统计流程图功能：把源视表中的各种明细数据按某种条件统计，得出统计结果。数据可以按条件统计、分组统计、分子组统计、按某种区间条件设定统计。流程制作：1 新建源视表 2 新建目标视表 3 把源视表用鼠标拖放到目标视表 4 设置统计分组 5 设置统计条件 6 设置统计子组（若无子组统计，此步骤可省略） 7 设置子组属性 8 确定，统计条件设置完成。统计过滤器属性设置如下图所示：图1：普通统计属性图 图2：数值型子组统计图图3：字符型子组统计图2.5 分割过滤器流程图如下所示：功能：分割过滤器是按设定的分割条件把数据由源视表输出到各个目标视表中。流程制作：1 新建源视表。 2 新建目标视表。 3 把源视表用鼠标拖放到目标视表。 4 设定分割条件。 5 设置其它条件。 6 确定。分割属性设置完成。分割过滤器的属性设置如下图所示：2.6 参照过滤器流程图如下所示：功能：根据两个或两个以上的视表之间的参照关系，把源视表数据按照参照关系输出，符合条件的数据输出到目标视表中。不符合条件的输出到拒收视表。流程制作：1 新建源视表、新建参照用视表、新建目标视表、新建拒收用视表 2 把源视表用鼠标拖放到目标视表。 4 设定参照条件。 5 设置拒收用视表。 6 设置其它条件。 7 确定。参照条件设置完成。参照条件设置如下图所示： 2.7 纵展开过滤器流程图如下所示：功能：把以列方式显示的数据，转换为以行方式显示的数据。流程制作：1 新建源视表。 2 新建目标视表。 3 把源视表用鼠标拖放到目标视表。 4 设定纵展开条件。 5 设置其它条件。 6 确定。纵展开属性设置完成。纵展开属性设置如下图所示：2.8 更新SQLDB过滤器。流程图如下所示：功能：更新过滤器，用于把数据从源数据库更表到目标数据库。此过滤器只适用于数据库之间的数据更新。流程制作：1 新建源视表。 2 新建目标视表。 3 把源视表用鼠标拖放到目标视表。 4 设置对应视表（输入视表、输出视表、删除用视表、拒收用视表） 5 设置删除条件（若不需要删除目标数据，此步骤可省略） 6 设定更新条件。 7 设置其它条件。 8 确定。更新属性设置完成。更新SQLDB属性设置如下图所示：删除条件的设定：更新条件的设定：第 4 章 作业流程制作1. 新建作业2. 作业工作区域，如下图所示3. 作业属性及和外部程序接口的设定。如下图所示。3.1. 外部程序接口设定。3.2. 作业流程设定。3.2.1. 拖放源视表和目标视表到作业面板中。3.2.2. 选择过滤器3.2.3. 源视表和目标视表的设定。3.2.4. 对应字段的设定3.2.5. 字段函数设定3.2.6. 作业执行小结：作业流程制作过程大致分为：1、建立连接器，根据情况连接目标数据库或文件2、建立视表模版，导入对应数据库表或文件的数据结构类型3、制作作业流程，根据规划好的业务来设计作业流程连接器种类分为：SQLDB连接器，固定长文本文件连接器，可变长文本文件连接器，二进制文件连接器，更新SQLDB连接器，DB Loader for ORACLE。过滤器种类分为：标准过滤器，结合过滤器，归并过滤器，统计过滤器，分割过滤器，参照过滤器，纵向展开过滤器，更新SQLDB过滤器。第 5 章 Waha运行环境1. Waha！Transformer3.1中文Windows版所支持的操作系统平台。* Microsoft Windows 2000 Professional (Simplified Chinese) version Service Pack 3 or later* Microsoft Windows 2000 Server (Simplified Chinese) version Service Pack 3 or later* Microsoft Windows 2000 Advanced Server (Simplified Chinese) version Service Pack 3 or later* Microsoft Windows XP Professional (Simplified Chinese) version Service Pack 2* Microsoft Windows Server 2003 (Simplified Chinese) versionService Pack 2* Microsoft Windows Server 2008Windows Server 2008 R2Windows Server 2012 * Windows 7等等2. Waha！Transformer3.1中文Windows版所支持的数据库Microsoft SQL Server 6.5 Service Pack 5a Microsoft SQL Server 7.0 Microsoft SQL Server 2000 Microsoft SQL Server 2005 Microsoft SQL Server 2008 Oracle8i Oracle9i Oracle Database 10g Oracle Database 11g Oracle9i及以后的版本，WAHA中以ODBC方式连接。IBM DB2 Universal Database for Windows V7.xIBM DB2 Universal Database for Windows V8.xIBM DB2 Universal Database for UNIX V7.xIBM DB2 Universal Database for UNIX V8.xIBM DB2 Universal Database for OS/400 (OS/400 Version 5)由于数据库较多，以上只写出部分常用数据库版本。3. Waha运行的硬件环境CPU:Intel Pentium Processor (166MHz 或更高)内存:128M或更高硬盘:100M以上