本文为您介绍2022年之前DataWorks产品功能和对应的文档动态。
MaxCompute的重要功能发布详情请参见产品重大更新。
2021-12
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 数据质量支持选择规则模板来批量配置数据质量规则。 | DataWorks数据质量支持选择规则模板来批量配置数据质量规则，简化配置难度：
|
2021.12.14 | 全部地域。 | 按模板配置监控规则 |
| 数据治理中心新增资源使用分析功能。 | DataWorks数据治理中心新增资源使用分析功能，从MaxCompute存储消耗、MaxCompute计算消耗、DataWorks调度消耗、DataWorks离线同步消耗四个维度展示资源消耗总览、资源消耗异动，以及资源消耗明细。 | 2021.12.9 | 全部地域。 | 使用透视 |
2021-11
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 数据开发新增资源组编排功能。 | DataWorks的资源组编排功能，帮助您在数据开发阶段，批量修改指定业务流程下目标节点使用的调度资源组。当您的工作空间中有多个调度资源组时，可以根据实际业务需求，使用该功能快速为目标节点重新分配资源组，促进资源的合理使用。 | 2021.11.30 | 全部地域。 | 资源组编排 |
| 数据开发新增批量操作功能。 | DataWorks支持对节点、资源、函数进行批量修改责任人等批量编辑操作，并支持批量提交并发布，将变更操作发布至生产环境生效。 | 2021.11.11 | 全部地域。 | 批量操作 |
2021-10
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks智能数据建模新增逆向建模、命名词典功能。 |
|
2021.10.30 | 该功能目前正在公测中，已开通公测的地域有：华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口）、西南1（成都）、亚太东南1（新加坡）、美国西部1（硅谷）、欧洲中部1（法兰克福）、中国（香港）、华东2（上海）金融云、华南1（深圳）金融云。 |
|
| 数据开发新增代码搜索功能。 | DataWorks的代码搜索功能，用于通过关键字搜索节点中的代码片段，并展示包含该代码片段的所有节点及片段的详细内容。当目标表数据产生变更，您需要查找操作源（即导致目标表数据变更的任务）时，可以使用该功能。 | 2021.10.27 | 全部地域。 | 代码搜索 |
2021-09
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 数据服务API资产全面纳入数据地图。 | 数据服务API资产（向导、脚本、注册等类型API）已接入数据地图，支持企业场景和全局范围的数据接口查找及管理，包括全局API检索、热门API统计、独立API详情页、各数据源下的API分布等产品功能。 | 2021.09.30 | 全部地域。 |
|
| 数据治理中心全新发布。 | DataWorks的数据治理中心从全局视角、工作空间视角、个人视角，自动发现并量化平台使用过程中数据存储、任务计算、代码开发、数据质量及数据安全等维度存在的待治理问题，并通过健康分模型进行统计，以治理报告及治理排行榜的形式呈现治理结果，帮助您有效推动解决治理问题，达成治理目标。 | 2021.09.12 | 该功能目前正在公测中，已开通公测的地域有：华东2（上海）、华东1（杭州）、华北2（北京）、华南1（深圳）。 | 数据治理中心概述 |
2021-08
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 独享数据服务资源组上线杭州、上海地域。 | 在调用数据服务API需要高QPS和SLA保障的情况下，企业需要使用独享的数据服务资源来保障调用成功。同时，独享数据服务资源组能够满足高并发、高频率的接口调用并及时返回结果数据。 | 2021.08.06 | 华东1（杭州）、华东2（上海）地域。 | 独享数据服务资源组 |
| DataWorks迁移助手8.1日正式商业化。 | 迁移助手可以帮您快速复制DataWorks上不同的版本、主账号、地域和工作空间中的开发成果。迁移助手支持迁移周期任务、手动任务、资源、函数、数据源、表元数据、临时查询和组件等对象。您可以根据业务需求，选择全量导出、增量导出或自选导出等方式导出DataWorks中的开发成果。 | 2021.08.01 | 全部地域。 | 迁移助手 |
2021-07
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据治理模块新增审批中心，可自定义审批流程。 | DataWorks审批中心是一个用于管理数据授权、敏感行为管控流程的功能模块，包含审批范围定义、审批流程定义等核心功能，满足不同企业在不同内部合规场景下的审批要求。 | 2021.07.16 | 全部地域。 | 审批中心 |
| DataWorks支持任务下发EMR gateway节点。 | 通过任务高级参数，支持任务下发EMR gateway节点，支持EMR负载均衡。后续会上线工作空间级别任务下发节点设置。 | 2021.07 | 全部地域。 | 创建EMR Hive节点 |
2021-06
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks支持EMR实时任务开发运维。 | DataWorks支持EMR实时任务spark streaming，streaming SQL开发运维。支持实时任务开发，试运行，提交生产环境，出错重试等。任务状态详情展示，任务启动终止下线，任务出错监控报警等。 | 2021.06 | 全部地域。 | 创建EMR Spark Streaming节点 |
| EMR数据开发任务一键迁移DataWorks。 | DataWorks为您提供了以下两种迁移方式，将EMR集群下的工作流（节点和调度配置）、手动任务、资源、数据源通过DataWorks迁移助手迁移至DataWorks工作空间中。您可通过DataWorks控制台迁移助手，查看迁移进度、迁移结果以及迁移报告。 | 2021.06 | 全部地域。 | 迁移EMR项目至DataWorks |
| 运维中心新增资源运维，支持独享资源组水位监控。 | 资源运维功能用于监控DataWorks中任务运行所用资源组的使用情况。 | 2021.06.09 | 全部地域。 | 资源运维 |
| 数据服务支持MaxCompute数据源封装API。 | DataWorks数据服务现已灰度支持直接访问并使用MaxCompute表封装API，该类API的调用请求将借助MaxCompute加速查询能力（MCQA）在引擎中执行数据查询，实现快速、高效的调用返回。（附：仅支持在独享数据服务资源组中使用MaxCompute数据源） | 2021.06 | 全部地域。 | 无 |
| DataWorks新增报警联系人中心。 | 您可以通过报警联系人页面，将目标RAM用户或RAM角色添加为报警联系人，添加后，DataWorks会将任务运行出错时产生的报警发送至对应联系人，方便您及时发现并处理异常任务。 | 2021.06 | 全部地域。 | 查看和设置报警联系人 |
2021-05
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据集成新增实时同步数据至AnalyticDB MySQL 3.0的解决 。 | DataWorks支持实时同步MySQL、OceanBase、PolarDB等数据库数据至AnalyticDB MySQL 3.0。您可以先全量同步，再启动实时增量同步，实现数据的不间断同步。同时，实时同步已经自动支持源端增加列时，目标端接收同步数据的表也会增加相应列。 | 2021.05.25 | 全部地域。 | 实时同步数据至AnalyticDB MySQL 3.0 |
| 开放消息服务（Open Message）开启公测。 | DataWorks为您提供了开放消息能力。您可以在DataWorks开放平台开启消息订阅功能。该功能仅支持DataWorks企业版用户参与公测活动，企业版用户可以直接免费参与公测并试用开放消息功能。您可以通过开放消息获取DataWorks中的元数据及任务变更事件，实现DataWorks与您的自有系统深度集成。 | 2021.05.21 | 华北2（北京）、华东1（杭州）、华南1（深圳）和华东2（上海）地域。 | 开放消息 |
| DataWorks任务调度新增年周期和月末最后一天周期。 | DataWorks周期任务调度新增了年周期调度和月末最后一天调度，可实现按年、季度、指定月最后一天的周期调度。目前DataWorks调度周期支持包括分钟、小时、日、周、月和年。 | 2021.05.19 | 全部地域。 | 时间属性配置说明 |
| DataWorks支持ClickHouse引擎。 | DataWorks支持ClickHouse引擎，提供了数据集成、数据开发、任务调度与任务运维等ETL操作和管理能力。
|
2021.05.15 | 全部地域。 |
|
2021-04
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据集成支持实时同步到AnalyticDB MySQL 3.0。 | 实时同步至AnalyticDB MySQL 3.0，可以在一个任务中一次同步多个表的实时信息，实时同步时已经自动支持添加列的DDL同步，即源端增加列时目标端的表也会增加相应列。 | 2021.4.20 | 全部地域。 | 配置同步到AnalyticDB MySQL 3.0的全增量解决方案 |
| DataWorks数据开发模块新增FTP Check功能节点。 | FTP Check节点可用于通过FTP协议周期性检测指定文件是否存在。如果文件存在，则启动调度下游任务，不存在，则按照配置的间隔时间重复检测，直到满足检测的停止条件时停止检测。该节点通常作为DataWorks调度系统与其他调度系统之间传递信号使用。 | 2021.4.15 | 华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口）、西南1（成都）、亚太东南1（新加坡）。 | FTP Check节点 |
2021-03
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks企业版新增自定义角色功能。 | 自定义角色功能，可以方便您针对实际业务制定权限功能。 | 2021.3.22 | 全部地域。 | 空间级模块权限管控 |
| DataWorks数据集成支持kerberos认证文件机制。 | 对于Hive、kafka等数据源，有时是需要kerberos认证文件来进行访问的，数据集成支持了kerberos认证文件机制，可以自由上传数据源相关的认证文件，并在配置时使用，保证访问数据源的安全性。 | 2021.3.16 | 全部地域。 | 附录：配置Kerberos认证 |
| DataWorks控制台新增新版安全中心功能。 | DataWorks的安全中心，帮助您快速构建平台的数据内容、个人隐私等相关的安全能力，满足企业面向高风险场景的各类安全要求（例如，审计），无需您额外配置即可直接使用该功能。 | 2021.03.13 | 全部地域。 | 概述 |
| 运维中心新增DAG聚合视图及上下游分析功能。 | 您可以按照工作空间、责任人、优先级等维度，对DAG图中的节点进行聚合，查看目标维度节点的总数量。同时，也可以对指定节点进行上下游分析，快速定位阻塞当前节点运行的上游节点，并查看当前节点的下游节点数量，掌握任务的运行情况。 | 2021.03.10 | 华南1（深圳）地域。 | 查看并管理周期任务 |
2021-02
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 数据建模商业化。 | DataWorks的数据建模Datablau正式商业化。您可以购买该功能模块，将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力您实现数据资产价值化输出，在数据全生命周期上夯实数据基础，为数据价值化提供有力支撑。 | 2021.02.20 | 全部地域。 | DATABLAU数据建模计费标准 |
| 数据发现支持批量创建元数据采集器。 | 数据地图 > 数据发现支持自动及批量创建元数据采集器，帮助您在数据地图中快速查看表的内部结构及与表相关的关联关系。 | 2021.02.17 | 全部地域。 | 采集元数据 |
| 迁移助手支持Airflow。 | 迁移助手支持将Airflow调度系统中的任务迁移至DataWorks。 | 2021.02.16 | 全部地域。 | 导出开源引擎任务 |
| 数据服务新增计量API。 | 数据服务的计量API，包括计量大屏及计量详情。为您提供了各类可视化图表及统计数据，包括工作空间下的API总数、总调用次数等信息，帮助您从全局角度了解API的调用情况。同时，可以针对单个API分别查看监控图表，获取API网关状态码、数据服务错误码等详细信息。 | 2021.02.16 | 华北2（北京）。 |
|
| DataWorks控制台新增开放平台功能。 | DataWorks控制台的开放平台功能，为您展示OpenAPI的计量报表，方便您查看指定日期OpenAPI的调用详情。 | 2021.02.13 | 全部地域。 | DataWorks开放平台OpenAPI报表 |
2021-01
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据集成新增支持HTTP形式的数据源。 | 某些数据源只能以HTTP REST API形式对外提供数据，或者接收数据。针对这类数据源，数据集成支持离线形式读取和写入数据。 | 2021.1.4 | 全部地域。 | RestAPI Reader |
2020-12
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据集成新增全增量同步到Elasticsearch。 | 将指定的整个数据库全部或者部分表一次性的全部同步至ElasticSearch，并且支持后续的实时增量同步模式，将新增数据持续同步至ElasticSearch。 | 2020.12.30 | 全部地域。 | 一键实时同步至Elasticsearch |
2020-09
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| DataWorks数据集成新增实时同步功能。 | 提供的实时数据同步功能，可以将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。利用解决方案可以实现全增量一体化同步。 | 2021.4.15 | 全部地域。 |
|
2020-07
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 独享资源组监控功能。 | DataWorks独享资源组支持资源水位监控功能，提供详细的资源使用水位趋势。您可以查看任务的运行和排队情况，辅助精细化地扩容和缩容资源组。 | 2020.07.17 | 全部地域。 | 查看和设置报警资源 |
| OpenAPI公测，自定义DataWorks功能。 | DataWorks开放租户、元数据、数据开发、运维中心、数据质量、数据服务等API，让您更加自由地使用DataWorks。说明 您需要购买DataWorks企业版及以上版本，才可以使用OpenAPI功能。 | 2020.07.16 | 华东1（杭州）、华东2（上海）、华南1（深圳）、华北2（北京）和华北3（张家口）。 | DataWorks OpenAPI概述 |
| 迁移助手公测。 | 迁移助手支持迁移周期任务、手动任务、资源、函数、数据源、表元数据、临时查询和组件等对象。您可以根据业务需求，选择全量导出、增量导出或自选导出等方式导出DataWorks中的开发成果。 | 2020.07 | 东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、西南1（成都）和亚太东南1（新加坡）。 | 迁移助手 |
| 数据服务更新。 | DataWorks数据服务更新发布全新的目录树结构、函数模块迁移、向导模式支持参数排序、更丰富的请求参数操作符、向导模式转脚本模式等功能。 | 2020.07.28 |
|
数据服务 |
2020-06
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 从数据源查询功能。 | 您可以在编辑电子表格页面，使用从数据源查询功能，快速从数据源读取数据进行分析。 | 2020.06.09 | 华东2（上海）。 | 分析数据 |
2020-04
| 功能名称 | 功能描述 | 发布时间 | 发布地域 | 相关文档 |
|---|---|---|---|---|
| 运维中心支持电话告警功能。 | 运维中心支持短信、邮件和电话三种报警方式。 重要 您需要购买DataWorks专业版及以上版本，才可以使用电话告警功能。 | 2020.04.15 | 全部地域。 | 规则管理 |
内容没看懂？ 不太想学习？想快速解决？ 有偿解决： 联系专家
阿里云企业补贴进行中： 马上申请
腾讯云限时活动1折起，即将结束： 马上收藏
同尘科技为腾讯云授权服务中心。
购买腾讯云产品享受折上折，更有现金返利:同意关联，立享优惠
转转请注明出处：https://www.yunxiaoer.com/165749.html
