创建词条 "数据整合" 分类下的词条 该分类下有38个词条

边缘采集组件

词条创建者:wxw     创建时间:09-09 18:20 编辑:0次 | 浏览:253次

标签:

摘要: 1.组件介绍本章节主要介绍了如何使用边缘采集输入输出组件实时采集服务器上的日志数据。前提条件1、需要提前在采集服务器上安装边缘节点程序。2、在使用边缘采集输入输出组件前，需要配置边缘节点的IP地址和端口[阅读全文:]

实时CDC日志单表同步组件

词条创建者:wxw     创建时间:09-09 18:13 编辑:0次 | 浏览:304次

标签:

摘要: 1.前置步骤1.需要提前对原数据库的环境进行操作配置。目前支持的四种数据库。分别为ORACLR,MYSQL,SQLSERVER,POSTGRESQL. 详情参考数据库表配置。2.在进行CDC同步的过程中[阅读全文:]

KAFKA生产消费组件

词条创建者:wxw     创建时间:09-09 18:10 编辑:0次 | 浏览:436次

标签:

摘要: 1.前置步骤需提前部署kafka服务器，并且在产品服务器的kafka数据源中新建同一套生产开发kafka数据源连接池。如图，两数据源除适用环境不一致，其余的配置都是一样的。如果没有配置配套的kafka生[阅读全文:]

发布ETL任务到运行区

词条创建者:liuyishou     创建时间:08-19 10:27 编辑:0次 | 浏览:403次

标签:

摘要: 1. 概述当制作好的ETL任务需要定时执行时，我们需将ETL任务发布到运行区，因为只有运行区中ETL任务流才能创建调度任务定时执行。设计区中草稿状态的ETL任务不影响运行区中的ETL任务执行，[阅读全文:]

实时任务

词条创建者:liuyishou     创建时间:08-19 10:20 编辑:0次 | 浏览:468次

标签:

摘要: 1. 概述实时任务中数据库表既可以作为输入源，也可以作为输出源。 用户设计实时任务，拖入输入组件和处理组件以及表输出组件，然后配置好输入组件信息，处理组件处理逻辑以及表输出组件连接池和目标表及[阅读全文:]

创建ETL任务

词条创建者:liuyishou     创建时间:08-19 10:03 编辑:0次 | 浏览:1190次

标签:

摘要: 1. 概述ETL任务是对数据进行抽取、转换和加载等一系列操作。目的是将数据从源系统中迁移到目标系统，在迁移过程中对数据进行清洗、整合和格式化，以满足后续分析和使用的需求。本文档是ETL任务的入[阅读全文:]

ETL任务设计器界面功能介绍

词条创建者:wxw     创建时间:08-18 18:11 编辑:1次 | 浏览:446次

标签:

摘要: 1. 概述ETL任务设计器提供可视化的ETL作业界面，支持作业的试运行和断点调试等，提供丰富的组件，能完成ETL数据加工的边调试边预览数据。本文档用于帮助大家了解ETL任务设计器。2.&nbs[阅读全文:]

了解数据整合

词条创建者:wxw     创建时间:08-18 17:49 编辑:0次 | 浏览:585次

标签:

摘要: 1. 定义数据整合是亿信华辰自主研发的一款数据处理工具，结合数据集中的分层管理和可视化建模功能，能帮助企业或政府构建数据仓库，完成数据融合，提升数据质量，为后续数据应用和服务提供基础。2.&n[阅读全文:]