数据链路-策略配置

数据链路策略配置是在任务可以成功运行的基础上,对于任务运行过程中出现的问题进行应对的策略。

关于此功能

策略配置共包括6个细分策略,分别是

  • 结构变化策略

  • 数据加载策略

  • 缓存策略

  • 自动重启策略

  • 错误队列策略

  • 预警策略

  • 日志策略

操作步骤

  1. 点击数据链路列表->数据链路详情,进入数据链路详情页;

  2. 点击策略配置按钮,切换至策略配置页面;

  3. 您可以点击以收起/展示每条策略的详细内容:

    1. 配置结构变化策略

      1. 点击以切换数据目的地节点

      2. 选择策略执行选项

      3. 策略选项中删除表与修改表结构的操作需要数据节点的相应权限,如执行过程中无相关权限,任务将报错暂停

    2. 配置数据加载策略

      1. 点击以切换数据目的地节点

      2. 选择策略执行选项

      3. 选项3中保留增量数据的处理需要配合数据映射的清洗脚本功能使用,详见<数据映射-清洗脚本-常见场景说明>

    3. 配置自动重启策略

      1. 详见<数据链路-策略配置-自动重启策略>

    4. 配置错误队列策略

      1. 详见<数据链路-策略配置-错误队列策略>

    5. 配置预警策略

      1. 点击新增任务运行预警创建预警规则

      2. 输入预警规则名称,选择预警指标,点击规则配置进行规则配置

      3. 为预警规则选择预警发送组

        1. 预警发送组配置,详见<系统设置-预警中心-预警发送组配置>

    6. 配置日志策略

      1. 确认日志存储回收时间是否合适

      2. 选择日志是否输出至服务器路径

      3. 配置输出格式

下一步

数据任务-策略配置

最后更新于

这有帮助吗?