摘要: 1.组件介绍分支组件主要用处根据分支条件判断后续任务执行的路径，满足分支条件，就会执行其后续的任务组件。1.分支条件是一个返回布尔值的表达式，支持通用表达式，也支持通过宏引用当前任务中定义的参数。在执行[阅读全文]
摘要: 1.组件介绍参数赋值组件用于根据输入的记录来更新ETL编辑器中定义的参数值。参数值可以设置输入的字段、表达式、宏等。在交换任务执行的过程中，通过参数赋值组件改变参数的取值，供后续组件调用参数。每次点击“[阅读全文]
摘要: 1.组件概述Oracle 装载组件、卸载组件常常用于Oracle 数据库之间的大数据量的数据传输场景。项目上使用传统的表输入-表输出的形式针对大数据量的情况下，性能往往与预期相差较大。Oracle卸载组[阅读全文]
摘要: 1.概述Json生成组件故名思意就是讲已有的数据字段信息生成一个json串存储在临时表中，供后续组件或者系统的使用。目前json生成组件支持配置生成的json格式位数组、对象两种类型。json生成组件中[阅读全文]
摘要: 1.HTTP 接口组件1.组件介绍可调用数据源管理页面的接口数据源下的http格式的接口，读取接口返回结果，将结果保存到临时表的一个字段中，供后置组件使用。数据源：选择数据源下的一个接口数据源[阅读全文]
摘要: 1.HDFS文件输入组件hdfs输入组件是一个将hdfs服务器上的文件或压缩文件解析以供后续组件使用，从文本文件中读取数据到任务中，和表输入组件一样作为输入端。与平面文件输入不同的是hdfs文件输入组件[阅读全文]
摘要: 1.概述Hadoop文件输入组件可将本地文本文件输出到Hadoop目标表，如cdh、impala、petabase等Hadoop文件输入组件，文件设置页面：源文件路径：配置产品服务器得文件路径。列分割符[阅读全文]
摘要: 1.概述将经过数据交换etl处理后的数据保存到大数据库impala或petabase等库中，和表输出组件一样作为输出端。 用户使用Hadoop输出组件，选择Hive和对应的表并选择不存在则创建[阅读全文]
摘要: 1.概述用户可以通过Hadoop迁移组件将关系型数据库中的数据批量导入到impala或petabase、hive等库中。2.操作步骤前置条件：用户已部署HDFS服务器。操作入口：【任务管理>任务定[阅读全文]
摘要: 1.组件介绍通过创建外部表方式读取第三方文件，将大数据量的表数据抽取到Greenplum目标库中。 Greenplum装载组件的目标设置中：1.协议选项，下拉框有gpfdist和file协议，[阅读全文]
摘要: 1.概述数据交换组件支持Greenplum数据库表导出为文本文件。通过该方式可有效的提高Greenplum数据库的数据交换的效率。2.操作步骤前置步骤：1.Liunx服务器或者windows服务器已部署[阅读全文]
摘要: 批处理与交换任务部分组件支持spark大数据处理引擎，使用该引擎能够有效得提升海量数据的数据传输与数据处理的效率。用户新建批处理任务或者交换任务后，执行任务时选择Spark引擎作为计算引擎，程序将自动的[阅读全文]
摘要: 1.组件介绍ETL任务流升级改造为调度平台后，去掉了任务循环功能，在ETL组件得流程组件中新增循环节点组件，实现数据处理的循环和遍历功能。循环节点组件支持对ETL任务中支持现有组件得嵌套。基本配置：循环[阅读全文]
摘要: 交换任务-文件传输组件新增一个文件生成组件。支持将表字段类型为大字段和二进制类型的数据输出为文件，每一行生成一个文件。输出支持文本、excel文件、图片、视频等。后缀支持：txt、doc、docx、js[阅读全文]
摘要: 批量交换到表组件，选择一个或者多个连接池下的表，将其批量设置表名后交换到另外一个数据库中。 【操作步骤】基本设置：1.源表的设置可以选择不同数据库的多张数据库表，支持表名模糊搜索与[阅读全文]
摘要: 1.表输入组件表输入组件用于从数据库连接池中选择源表进行数据的抽取，作为后续组件的数据来源。时间戳增量（改名为主键+时间戳增量）它是一种基于快照比较的变化数据捕获方式，在源表上增加一个时间戳字段，业务系[阅读全文]
摘要: 1.Greenplum卸载组件数据交换组件支持Greenplum数据库表导出为文本文件。通过该方式可有效的提高Greenplum数据库的数据交换的效率。【操作步骤】前置步骤：1.Liunx服务器或者wi[阅读全文]
摘要: Xml解析组件可以从前置组件中读取到xml格式的数据，然后将其解析成结构化数据，并向后置组件输出。客户的一个接口返回的书本信息，书名，类型，出版社等等，这些信息是以xml的形式返回的，可以通过时xmlN[阅读全文]