时间
-
阿里云大数据开发治理平台 DataWorks智能诊断-云淘科技
您可以使用智能诊断功能对任务进行全链路分析,当任务运行不符合预期时,您可以使用该功能快速定位问题。 功能概述 智能诊断功能可以基于以下维度对任务进行诊断分析: 全链路分析: 检查上游任务运行情况:上游任务运行失败时,将阻塞当前任务的运行。智能诊断功能可以帮助您迅速定位上游任务运行失败的原因。 检查是否已到达任务设置的定时运行时间。 说明 在数据开发模块中定义…
-
阿里云大数据开发治理平台 DataWorks自定义参数取值差异对比-云淘科技
自定义参数分为系统内置参数、自定义参数${..}、自定义参数$[…]、常量,不同类别的参数赋值格式及取值不同。本文为您介绍不同格式自定义参数的取值差异对比情况。 不同格式自定义参数的应用对比 以当前时间为2021年11月01日,任务每天00:00定时运行,示例不同格式自定义参数的赋值情况,具体如下表。 说明 假设代码引用方式均为pt=${date…
-
阿里云大数据开发治理平台 DataWorks调度周期:月调度-云淘科技
月调度即调度任务在每月的特定几天,在特定时间点自动运行一次。 注意事项 在非指定的调度时间内,为保证下游实例正常运行,月调度节点会生成空跑的周期实例。重要 空跑现象:系统直接返回运行成功,不会真实执行任务,即实例运行状态为成功;执行时长为0秒,无执行日志;不会占用调度资源;不会阻塞依赖当前空跑节点的下游节点执行,即本节点非调度时间内空跑,不影响下游每日调度的…
-
阿里云大数据开发治理平台 DataWorks调度周期:周调度-云淘科技
周调度即调度任务每周的特定几天,在特定时间点自动运行一次。 注意事项 在非指定的调度时间内,为保证下游实例正常运行,周调度节点会生成空跑的周期实例。重要 空跑现象:系统直接返回运行成功不会真实执行任务,即实例运行状态为成功;执行时长为0秒,无执行日志;不会占用调度资源;不会阻塞依赖当前空跑节点的下游节点执行,即本节点非调度时间内空跑,不影响下游每天调度的任务…
-
阿里云大数据开发治理平台 DataWorks调度周期:小时调度-云淘科技
小时调度即每天指定的时间段内,调度任务按N*1小时的时间间隔运行一次。例如,每天00:00~03:00的时间段内,每1小时运行一次。 注意事项 时间周期根据左闭右闭原则计算。例如,配置调度任务在0点~3点的时间段内,每隔1个小时运行一次。表示时间区间为[00:00,03:00],间隔为1小时,调度系统每天将生成4个实例,实例定时时间分别在0点、1点、2点和3…
- 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
-
阿里云大数据开发治理平台 DataWorks调度周期:分钟调度-云淘科技
分钟调度即每天指定的时间段内,调度任务按N*指定分钟的时间间隔运行一次。 使用限制 分钟调度的时间间隔最小粒度只能设置为5分钟。 配置示例 配置路径 您需要进入数据开发节点的编辑页面,单击右侧导航栏的调度配置,在调度配置 > 时间属性区域配置节点的调度周期。 场景示例目标任务每天00:00~23:59的时间段内,每隔30分钟调度一次,配置详情如下图所示…
-
阿里云大数据开发治理平台 DataWorks最佳实践:集成第三方调度系统-云淘科技
DataWorks的开放平台为您提供OpenEvent、OpenAPI等开放能力,您可通过开放平台将第三方调度系统集成到DataWorks的调度系列中,将三方调度系统的任务嵌入DataWorks的业务流程中。本文以一个示例为您介绍集成第三方调度系统时需要进行的配置要点。 背景信息 当您的数据处理主流程在DataWorks中,且需要集成一个其他调度系统的调度任…
-
阿里云大数据开发治理平台 DataWorks合理配置基线承诺时间和预警余量-云淘科技
本文为您介绍如何合理的配置基线承诺时间和预警余量。 背景信息 智能基线能够及时捕捉导致任务无法按时完成的异常情况并提前预警,保障复杂依赖场景下重要数据能在预期时间内顺利产出。详情请参见:智能基线概述。 基线承诺时间是任务运行成功的最晚时间点。即面向数据应用,任务承诺在该时间点前完成。如果希望为运维人员预留一定的时间处理异常,您可以为基线设置预警余量,则系统会…
-
阿里云大数据开发治理平台 DataWorksCreateDataServiceApiAuthority-云淘科技
调用CreateDataServiceApiAuthority新增数据服务API授权。 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。 请求参数 名称 类型 是否必选 示例值 描述 Action String 是 CreateDataService…
-
阿里云大数据开发治理平台 DataWorksListDataServiceAuthorizedApis-云淘科技
调用ListDataServiceAuthorizedApis获取获得授权的API信息列表。 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。 请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ListDataServic…