详情页标题前

阿里云大数据开发治理平台 DataWorks调度周期:小时调度-云淘科技

详情页1

小时调度即每天指定的时间段内,调度任务N*1小时的时间间隔运行一次。例如,每天00:00~03:00的时间段内,每1小时运行一次。

注意事项

  • 时间周期根据左闭右闭原则计算。例如,配置调度任务在0~3点的时间段内,每隔1个小时运行一次。表示时间区间为[00:00,03:00],间隔为1小时,调度系统每天将生成4个实例,实例定时时间分别在0点、1点、2点和3点,即0点、1点、2点和3点是实例的定时运行时间。
  • 您可设置在每天指定的时间段内,节点按指定时间间隔运行一次;也可选择多个时间点,设置在每天指定的时间点运行。
  • 周期调度配置的时间点为定时时间,任务实际运行时,可能会因为等待资源等原因导致实际运行时间与定时时间不一致。

配置示例

  • 配置路径

    您需要进入数据开发节点的编辑页面,单击右侧导航栏的调度配置,在调度配置 > 时间属性区域配置节点的调度周期。

  • 场景示例
    • 配置详情目标任务每天00:00~23:59的时间段内,每隔6小时自动调度一次,配置详情如下图所示。说明 corn表达式会根据您选择的时间自动生成,不可手动修改。阿里云大数据开发治理平台 DataWorks调度周期:小时调度-云淘科技
    • 调度详情调度系统每天将生成4个实例,并在实例的定时时间0点、6点、12点和18点运行,如下图所示。阿里云大数据开发治理平台 DataWorks调度周期:小时调度-云淘科技

场景:小时任务依赖其他调度任务

DataWorks支持上下游不同调度周期的任务相互依赖,在上下游调度周期不一致情况下,您可先了解DataWorks挂载依赖的默认规则,再基于业务需要根据规则来变更任务的调度配置。更多关于DataWorks复杂依赖场景的说明,请参见必读:复杂依赖场景调度配置原则与示例。

小时任务常见依赖场景如下,您可结合必读:复杂依赖场景调度配置原则与示例中的图示加以理解。

  • 当小时任务依赖小时任务:
    • 若下游小时任务与上游小时任务当天执行周期数不一样,当前小时任务按照各周期定时时间挂载依赖。
    • 若下游小时任务与上游小时任务当天执行周期数一样,当前小时任务按照周期序号挂载对应的上游周期依赖,即当前小时任务挂载上游小时依赖与各周期的定时时间无关,与是第几个周期有关。
  • 当小时任务依赖天任务:小时任务当天所有周期均会直接或间接依赖天实例,即小时任务当天所有实例开始执行时间由上游天任务的完成时间决定。
  • 当小时任务依赖分钟任务:小时任务会依赖该定时时间内的所有上游分钟任务。

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/171998.html

(0)
上一篇 2023年12月10日 下午3:11
下一篇 2023年12月10日 下午3:14
详情页2

相关推荐

  • 阿里云日志服务SLS将日志服务数据投递到AnalyticDB MySQL-云淘科技

    日志服务采集到日志后,支持将日志投递至云原生数据仓库AnalyticDB MySQL进行存储与分析。本文档介绍将日志投递至AnalyticDB MySQL的操作步骤。 说明 投递数据到AnalyticDB MySQL遵循REPLACE INTO语义。REPLACE INTO用于实时覆盖写入的数据。写入数据时,REPLACE INTO会先根据主键判断待写入数据…

    2023年12月10日
  • 阿里云大数据开发治理平台 DataWorks配置调度日历-云淘科技

    DataWorks在原有调度配置基础上,新增自定义调度日历功能,您可通过该功能实现更灵活的任务调度日期与调度方式定义。本文为您介绍自定义调度日历的典型应用场景及如何在DataWorks上新增并使用自定义调度日历。 背景信息 自定义调度日历适用于有灵活调度日期需求的行业及场景,例如: 金融行业,任务运行需避开金融行业的休市时间(法定假日、周末)时,您就可以年度…

  • 阿里云对象存储OSSAndroid生命周期-云淘科技

    OSS支持设置生命周期(Lifecycle)规则,自动删除过期的文件(Object)和碎片,或将到期的文件转储为低频或归档存储类型,从而节省存储费用。本文介绍如何管理存储空间(Bucket)的生命周期规则。 背景信息 每条生命周期规则包含以下内容: 生命周期规则ID。用于标识一条规则,同一存储空间内规则ID不能重复。 生命周期策略。有以下两种设置方式。同一存…

    阿里云对象存储 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云日志服务SLS日志字段详情-云淘科技

    本文介绍负载均衡7层访问日志的字段详情。 字段 说明 __topic__ 日志主题,固定为slb_layer7_access_log。 body_bytes_sent 发送给客户端的Body字节数。 client_ip 请求客户端IP地址。 host 优先从请求参数中获取host。如果获取不到则从host header取值,如果还是获取不到则以处理请求的后端…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS开启智能存储分层-云淘科技

    日志服务提供智能分层存储功能,降低您长周期存储的成本,并同时保证日志的查询、分析、可视化、告警、投递和加工等能力不受影响。分层存储数据的存储费用按照存储空间计费,数据转换不会产生费用。 功能说明 日志服务提供热存储、低频存储(原冷存储)和归档存储功能。 您可以在Logstore属性页面,开启智能分层存储功能,将热存储的数据转为低频存储或归档存储。 您可以在开…

    2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。