摘要: 1.循环节点组件ETL任务流升级改造为调度平台后，去掉了任务循环功能，在ETL组件得流程组件中新增循环节点组件，实现数据处理的循环和遍历功能。循环节点组件支持对ETL任务中支持现有组件得嵌套[阅读全文:]
摘要: 批处理与交换任务部分组件支持spark大数据处理引擎，使用该引擎能够有效得提升海量数据的数据传输与数据处理的效率。用户新建批处理任务或者交换任务后，执行任务时选择Spark引擎作为计算引擎，程序将自动的[阅读全文:]
摘要: 1.应用背景实时json解析组件可以从前置实时组件中读取到json格式的数据，然后将其解析成结构化数据，并向后置组件输出。 客户的一个接口返回的用户信息，姓名性别身份证家庭住址等等，这些信息是以JSON[阅读全文:]
摘要: 题表输出组件和表输出组件一样，也是作为输出端，目标组件。界面设置基本一样，不同的是主题表输出是输出到主题表的。主题表输出的更新方式可参考表输出。注意：主题表输出组件支持将字段注释一起输出到目标表中。具体[阅读全文:]
摘要: 1.表输入组件表输入组件用于从数据库连接池中选择源表进行数据的抽取，作为后续组件的数据来源。时间戳增量（改名为主键+时间戳增量）它是一种基于快照比较的变化数据捕获方式，在源表上增加一个时间戳字段，业务系[阅读全文:]
摘要: 批量交换到表组件，选择一个或者多个连接池下的表，将其批量设置表名后交换到另外一个数据库中。 【操作步骤】基本设置： 1.源表的设置可以选择不同数据库的多张数据库表，支持表名模糊搜索与Ctrl[阅读全文:]
摘要: 1.组件概述可以读取redis数据上的数据，作为数据源，进行数据抽取。属性设置：输入对应的redis数据库的地址，以及密码（没有密码可不输入），输入完成后可进行连通性测试。连通成功后,选择对应的key值[阅读全文:]
摘要: 1.mongodb 输入组件Mongodb输入组件可直接从组件中配置mongodb数据源，选择集合进行数据的抽取，作为后续组件的数据来源。该组件输入设置tab页主要配置分别是mongodb数据[阅读全文:]