摘要: 数据销毁用于销毁近线归档产生的归档数据，可选择彻底销毁或放入回收站。本文用于介绍如何进行数据销毁。【操作步骤】（1）新建销毁设置：在【销毁设置】模块，选择【新建】，完成基本信息的填写，如设置标题、选择需[阅读全文]
摘要: 为了防止数据丢失，用户可将数据进行离线归档处理，以文件的形式备份在应用服务器中。离线归档的设置操作与近线归档类似，可参考帮助手册《近线归档》内容。操作不同之处如下，需引起注意：（1）对于离线归档，第一步[阅读全文]
摘要: 为节约核心数据库的存储空间，企业可将不经常使用的低价值数据进行归档处理。归档方式中的近线归档是将数据迁移到其他数据库表中（相当于剪切），迁移后，原表中这部分数据会被删除，因此归档应慎重。 本文用于介绍如[阅读全文]
摘要: 数据生命周期管理支持对数据进行自动归档、销毁和监控，为系统节省数据空间，提高数据的查询效率。归档分为近线归档和离线归档。近线归档是将不用的数据移动到另外的数据库中，离线归档是将数据以文件形式备份到磁盘上[阅读全文]
摘要: 对数据源、数据整合以及调度平台下的资源进行监控，可全局掌握资源运行状态。监控范围包括：数据源系统下各类型数据源的连通性任务流调度、实施调度的启用/禁用个数统计任务流调度、实时调度的执行、耗时、调度时间统[阅读全文]
摘要: 事件管理主要是对驱动任务流调度执行的监听事件进行新建、编辑及删除的管理操作。1. 库表事件以数据库表为监控对象，检测指定库表中的时间戳字段是否发生变化，发生变化则认定事件被触发，事件绑定的所有[阅读全文]
摘要: 在传统的实时任务中，我们运行实时任务模式默认为spark模式的,目前除了spark模式外，我们还支持了flink.首先我们需要在系统设置-大数据环境配置中配置flink执行引擎，支持local跟yarn[阅读全文]
摘要: 点击左树实时调度管理扩展按钮或实时调度管理页面的【新建】按钮，进入新建实时调度的弹框。弹框中可选择定版任务总的实时任务，作为调度执行的子任务，一个实时调度仅支持选择一个实时任务。然后配置实时调度标题及通[阅读全文]
摘要: 新建调度时，在通知方式配置中支持设置超时阈值，当调度执行时间超过了设置的阈值，就会根据配置的通知方式自动发送运行超时的消息。[阅读全文]
摘要: 支持对调度任务设置重试执行机制，当调度下的任务执行失败时触发重试执行。功能入口：在新建或者编辑任务流调度时，开启重试开关按钮，设置重试次数、间隔时间、重试方式，重试方式支持重新开始、从失败处继续。重新开[阅读全文]
摘要: 支持对任务流调度资源设置优先级，优先级优先级高的调度优先提交执行。功能入口：在新建或者编辑任务流调度时，在【设置任务执行周期】处对【优先级】参数进行选择。优先级的选择有5种，优先级由高至低分别是最高、高[阅读全文]
摘要: 应用服务器临时宕机或主动关服过程中，针对调度任务的遗漏执行，进行补发执行。功能配置入口：在新建或者编辑任务流调度时，在【设置任务执行周期】处对【补充策略】参数进行选择。补发执行策略有3种，分别对应含义是[阅读全文]
摘要: 1. 调度监控调度任务创建完成后，可查看任务的运行状态和下次执行时间等。手动执行可点击【立即运行】。调度执行后可通过两个入口查看调度执行记录，第一个入口是直接从任务流调度管理列表界面点击调度标[阅读全文]
摘要: 任务流调度是指对任务流中的批处理任务、交换任务合理安排和调度，以达到最优的执行效果或满足特定的业务场景需求，从而可提高系统资源的利用率、降低任务执行时间、满足任务执行顺序和依赖关系，提高系统稳定性和可靠[阅读全文]
摘要: 针对ETL任务流设计器中任务组件之间的依赖进行血缘分析，可直观的查看当前组件的完整血缘关系。当分析节点中存在任务流组件时，可通过查看完整模型查看该任务流下嵌套了哪些任务，点击按钮可展开任务流下嵌套的任务[阅读全文]
摘要: 当调度平台服务存在集群环境时，ETL任务流下各任务的执行将随机分布在各个集群节点下，充分利用集群环境下各节点服务器的资源，提升任务执行的稳定性及执行效率。ETL任务流设计器下并发运行三个ETL任务，可在[阅读全文]
摘要: 同一个ETL任务流下的多个任务组件，在不设置连线依赖及属性依赖时，各组件会并发执行。当线程池资源不足时则按优先级先后提交执行，相同优先级的任务随机提交执行。[阅读全文]
摘要: 在任务流设计器管理页面，两两组件之间支持配置依赖执行，且执行条件支持三种方式a.当结果为真的时候继续下一步b.当结果为假的时候继续下一步c.无条件执行。组件间设置连线后，选择连线然后右键，可查看条件执行[阅读全文]
摘要: 控制策略作用任务流组件，设置组件控制属性使其在更加复杂的业务场景下也能正常按流程执行。1. 互斥资源多个任务流组件之间支持通过配置互斥资源来进行互斥执行，配置相同互斥资源的组件同一时间仅支持运[阅读全文]
摘要: ETL任务流设计器是以图形化的方式完成ETL任务的前驱后继关系和调度顺序的定义。ETL任务依赖关系分为强制依赖和非强制依赖，强制依赖是指作业之间有着业务上的依赖关系，前置作业的输出做为后置作业的输入，只[阅读全文]