摘要: 为了防止数据丢失，用户可将数据进行离线归档处理，以文件的形式备份在应用服务器中。离线归档的设置操作与近线归档类似，可参考帮助手册《10.1近线归档》内容。操作不同之处如下，需引起注意：（1）对于离线归档[阅读全文]
摘要: 1.概述标准集是标准的集合，通常会把相同类型相同管理流程的数据标准归到一个标准集中。标准集可以约定这些标准的属性，并统一管理这些属性。新建标准前，必须新建标准集。下面我们就来讲解如何新建标准集。2.操作[阅读全文]
摘要: 为节约核心数据库的存储空间，企业可将不经常使用的低价值数据进行归档处理。归档方式中的近线归档是将数据迁移到其他数据库表中（相当于剪切），迁移后，原表中这部分数据会被删除，因此归档应慎重。 本文用于介绍如[阅读全文]
摘要: 1.概述数据生命周期管理支持对数据进行自动归档、销毁和监控，为系统节省数据空间，提高数据的查询效率。归档分为近线归档和离线归档。近线归档是将不用的数据移动到另外的数据库中，离线归档是将数据以文件形式备份[阅读全文]
摘要: 1.定义数据标准是对数据的命名、数据类型、长度、计算口径、归属部门等，定义一套统一的规范，保证各业务系统对数据的统一理解，对数据定义和使用的一致性。2.管理价值1)标准的统一制定与管理保证数据定义和使用[阅读全文]
摘要: 题表输出组件和表输出组件一样，也是作为输出端，目标组件。界面设置基本一样，不同的是主题表输出是输出到主题表的。主题表输出的更新方式可参考表输出。注意：主题表输出组件支持将字段注释一起输出到目标表中。具体[阅读全文]
摘要: 1.组件概述可以读取redis数据上的数据，作为数据源，进行数据抽取。属性设置：输入对应的redis数据库的地址，以及密码（没有密码可不输入），输入完成后可进行连通性测试。连通成功后,选择对应的key值[阅读全文]
摘要: 1.mongodb 输入组件Mongodb输入组件可直接从组件中配置mongodb数据源，选择集合进行数据的抽取，作为后续组件的数据来源。该组件输入设置tab页主要配置分别是mongodb数据[阅读全文]
摘要: 1.组件介绍主要作用：文件传输代理组件可以实现将两个不同服务器之间的文件进行相互传输。主要功能介绍： 1.可以选择传输文件块大小； 2.可以选择加密或[阅读全文]
摘要: 1.组件介绍校验组件主要通过对前置组件的结果集与所校验组件设置的条件进行比较，返回结果值。目前可设置的校验条件有行数等于指定值、行数等于指定输入组件行、所有数据行满足指定表达式、第一行数据满足指定表达式[阅读全文]
摘要: 1.组件概述路由组件是将满足不同过滤条件的数据进行分流，分别执行不同的分支.默认分支：当存在数据不满足其他分支的条件时，这部分数据会进入到默认分支。每个路由组件有且只能设置一个默认分支。2.使用场景下面[阅读全文]
摘要: 1.组件介绍分支组件主要用处根据分支条件判断后续任务执行的路径，满足分支条件，就会执行其后续的任务组件。1.分支条件是一个返回布尔值的表达式，支持通用表达式，也支持通过宏引用当前任务中定义的参数。在执行[阅读全文]
摘要: 1.组件介绍参数赋值组件用于根据输入的记录来更新ETL编辑器中定义的参数值。参数值可以设置输入的字段、表达式、宏等。在交换任务执行的过程中，通过参数赋值组件改变参数的取值，供后续组件调用参数。每次点击“[阅读全文]
摘要: 1.组件概述Oracle 装载组件、卸载组件常常用于Oracle 数据库之间的大数据量的数据传输场景。项目上使用传统的表输入-表输出的形式针对大数据量的情况下，性能往往与预期相差较大。Oracle卸载组[阅读全文]
摘要: 1.概述Json生成组件故名思意就是讲已有的数据字段信息生成一个json串存储在临时表中，供后续组件或者系统的使用。目前json生成组件支持配置生成的json格式位数组、对象两种类型。json生成组件中[阅读全文]
摘要: 1.HTTP 接口组件1.组件介绍可调用数据源管理页面的接口数据源下的http格式的接口，读取接口返回结果，将结果保存到临时表的一个字段中，供后置组件使用。数据源：选择数据源下的一个接口数据源[阅读全文]
摘要: 1.HDFS文件输入组件hdfs输入组件是一个将hdfs服务器上的文件或压缩文件解析以供后续组件使用，从文本文件中读取数据到任务中，和表输入组件一样作为输入端。与平面文件输入不同的是hdfs文件输入组件[阅读全文]
摘要: 1.概述Hadoop文件输入组件可将本地文本文件输出到Hadoop目标表，如cdh、impala、petabase等Hadoop文件输入组件，文件设置页面：源文件路径：配置产品服务器得文件路径。列分割符[阅读全文]
摘要: 1.概述将经过数据交换etl处理后的数据保存到大数据库impala或petabase等库中，和表输出组件一样作为输出端。 用户使用Hadoop输出组件，选择Hive和对应的表并选择不存在则创建[阅读全文]
摘要: 1.概述用户可以通过Hadoop迁移组件将关系型数据库中的数据批量导入到impala或petabase、hive等库中。2.操作步骤前置条件：用户已部署HDFS服务器。操作入口：【任务管理>任务定[阅读全文]