亿信华辰文档中心>> 百科分类 >> 指标管理 >> 5.6.1 >> 数据集成 >> 数据整合

创建词条 "数据整合" 分类下的词条 该分类下有36个词条

JSON解析组件
词条创建者:wxw     创建时间:09-01 11:48 编辑:1次 | 浏览:209次
标签:

摘要: 1.应用背景实时json解析组件可以从前置实时组件中读取到json格式的数据,然后将其解析成结构化数据,并向后置组件输出。客户的一个接口返回的用户信息,姓名性别身份证家庭住址等等,这些信息是以JSON的[阅读全文:]

边缘采集组件
词条创建者:wxw     创建时间:09-01 15:07 编辑:0次 | 浏览:123次
标签:

摘要: 1.组件介绍本章节主要介绍了如何使用边缘采集输入输出组件实时采集服务器上的日志数据。前提条件1、需要提前在采集服务器上安装边缘节点程序。2、在使用边缘采集输入输出组件前,需要配置边缘节点的IP地址和端口[阅读全文:]

CDC日志增量组件
词条创建者:wxw     创建时间:09-01 14:59 编辑:0次 | 浏览:202次
标签:

摘要: 1.前置步骤1.需要提前对原数据库的环境进行操作配置。目前支持的四种数据库。分别为ORACLR,MYSQL,SQLSERVER,POSTGRESQL. 详情参考数据库表配置。2.在进行CDC同步的过程中[阅读全文:]

KAFKA生产消费组件
词条创建者:wxw     创建时间:09-01 14:37 编辑:0次 | 浏览:194次
标签:

摘要: 1.前置步骤需提前部署kafka服务器,并且在产品服务器的kafka数据源中新建同一套生产开发kafka数据源连接池。如图,两数据源除适用环境不一致,其余的配置都是一样的。如果没有配置配套的kafka生[阅读全文:]

主题表输出组件
词条创建者:wxw     创建时间:09-01 14:17 编辑:0次 | 浏览:116次
标签:

摘要: 题表输出组件和表输出组件一样,也是作为输出端,目标组件。界面设置基本一样,不同的是主题表输出是输出到主题表的。主题表输出的更新方式可参考表输出。注意:主题表输出组件支持将字段注释一起输出到目标表中。具体[阅读全文:]

表输入输出组件
词条创建者:wxw     创建时间:09-01 14:16 编辑:0次 | 浏览:275次
标签:

摘要: 1.表输入组件表输入组件用于从数据库连接池中选择源表进行数据的抽取,作为后续组件的数据来源。时间戳增量(改名为主键+时间戳增量)它是一种基于快照比较的变化数据捕获方式,在源表上增加一个时间戳字段,业务系[阅读全文:]

批量交换到表组件
词条创建者:wxw     创建时间:09-01 14:14 编辑:0次 | 浏览:146次
标签:

摘要: 批量交换到表组件,选择一个或者多个连接池下的表,将其批量设置表名后交换到另外一个数据库中。  【操作步骤】基本设置:1.源表的设置可以选择不同数据库的多张数据库表,支持表名模糊搜索与[阅读全文:]

redis输入组件
词条创建者:wxw     创建时间:09-01 14:11 编辑:0次 | 浏览:95次
标签:

摘要: 1.组件概述可以读取redis数据上的数据,作为数据源,进行数据抽取。属性设置:输入对应的redis数据库的地址,以及密码(没有密码可不输入),输入完成后可进行连通性测试。连通成功后,选择对应的key值[阅读全文:]

Mongodb组件
词条创建者:wxw     创建时间:09-01 14:10 编辑:0次 | 浏览:135次
标签:

摘要: 1.mongodb 输入组件Mongodb输入组件可直接从组件中配置mongodb数据源,选择集合进行数据的抽取,作为后续组件的数据来源。该组件输入设置tab页主要配置分别是mongodb数据[阅读全文:]

文件传输代理组件
词条创建者:wxw     创建时间:09-01 14:08 编辑:0次 | 浏览:175次
标签:

摘要: 1.组件介绍主要作用:文件传输代理组件可以实现将两个不同服务器之间的文件进行相互传输。主要功能介绍:    1.可以选择传输文件块大小;    2.可以选择加密或[阅读全文:]

 共36条 1234››