数据集成通过大模型语义创建任务、任务流、调度。
首先需要在系统设置-智能应用配置,配置数据集成agent所需要的模型。
配置完成后,进入数据集成模块页面,点击左树中的数据集成agent节点。右侧有智能对话框的悬浮球,点击可进行对话。也可进入到批处理任务、交换任务设计器页面唤起agent对话框。
对话框中输入语义,可通过模型自动的创建的ETL任务。创建完成后,agent对话框中会输出对应的任务、任务流、任务流调度链接。点击可跳转到对应的任务、任务流、调度页面。
注意事项:
1.上面的问题,是一个建etl任务的需求描述。同时可以指定任务、任务流和调度创建出来后,放在什么分组下面,可以指定任务、任务流和调度的名称为什么,指定调度的执行周期是什么。首页的数据集成Agent里,如果没有设计创建调度相关的语义,默认不会创建任务流和调度。如果需要创建任务流和调度,需要问题中直接说创建任务流和调度相关的语义。
2.如果任务发布不成功,任务有报错。创建任务流和调度时会agent对话框中会提示创建失败。
3.设计器页面agent对话框支持通过语义执行保存、发布、编辑组件或者删除组件等操作。例如在刚刚创建的A5数据迁移任务设计器对话框中输入以下语义“将a5表改成a5_join_1表,删除掉表输出组件。”模型即可对输入的语义进行解析并在设计器中完成对应的操作。
4. 支持的组件信息
输入输出组件:表输入组件、主题表输入组件、平面文件输入组件、sql输入组件、表输出组件、平面文件输出组件、主题表输出组件、redis输入组件
脱敏加密组件:脱敏组件、加解密组件
接口组件:HTTP接口组件、JSON解析组件、JSON生成组件
表达式组件:表达式组件、聚合组件、连接组件、过滤组件、排序组件、清洗组件、唯一标识组件、序号组件、删除组件、路由组件、分支组件、校验组件
脚本组件:SQL组件、存储过程组件、Groovy脚本组件、参数赋值组件、备注组件
请先登录