阿里云大数据开发治理平台 DataWorks

本文为您介绍如何创建EMR（E-MapReduce）表。 背景信息 绑定EMR引擎后，平台将自动在数据地图新建EMR元数据采集器来采集该集群元数据，若您绑定EMR引擎后仍无法在此界面选择到EMR库，请前往数据地图找到该集群的元数据采集器重新采集，详情请参见采集E-MapReduce元数据。 操作步骤 进入数据开发页面。 登录DataWorks控制台，单击左侧…

DataWorks为您提供DLF可视化权限申请、权限审批及权限审计等功能，帮助您实现数据湖全托管的统一权限管理，本文为您详细介绍如何进行DLF数据访问权限管控。 前提条件 已将DLF设置为计算引擎元数据服务。 例如，EMR已将DLF设置为元数据服务，并开启DLF-Auth组件实现数据湖构建DLF的权限功能，详情请参见DLF-Auth。 已了解DLF数据权限，…

本文为您介绍如何手动配置DataWorks租户成员云账号与EMR集群指定身份账号的映射关系，实现DataWorks租户成员可通过映射的集群指定身份在DataWorks侧执行任务。 注意事项 集群身份映射关系将在注册了同一个EMR集群的所有工作空间内生效，请谨慎修改EMR集群。 如若未参考本文手动配置DataWorks租户成员与集群账号映射，无论您使用哪个云账…

DataWorks为您提供StarRocks数据源、MySQL数据源，可对接EMR Serverless StarRocks，以便实现在DataWorks上进行EMR Serverless StarRocks数据的集成、开发、分析、数据服务等操作。本文以一个简单的流程，为您介绍使用EMR Serverless StarRocks在DataWorks上应用的通…

支持您跨阿里云账号注册EMR集群。该操作必须通过RAM角色访问的方式执行。本文为您介绍，如何使用RAM角色访问方式，让阿里云账号A可以在DataWorks中注册阿里云账号B的EMR集群，实现跨账号访问EMR数据。 前提条件 已创建阿里云主账号A、阿里云主账号B。创建账号，详情请参见创建阿里云账号。 阿里云主账号A：在DataWorks中注册账号B的EMR集群…

您可在计算引擎信息界面，将Hologres计算引擎绑定至DataWorks作为DataWorks工作空间的引擎实例，以便通过DataWorks来执行该引擎类型的计算任务。本文为您介绍如何绑定Hologres引擎。 前提条件 类别 操作说明 相关文档 引擎相关 已购买Hologres实例并创建数据库。 购买Hologres 创建数据库 资源组相关 已购买独享调…

DataWorks的代码结构功能，帮助您根据当前节点编写的SQL代码，解析出SQL代码运行的流程结构图。您可以通过代码结构快速定位、查看及修改SQL代码。 查看代码结构 进入DataStudio。 登录DataWorks控制台，单击左侧导航栏的数据建模与开发 > 数据开发，在下拉框中选择对应工作空间后单击进入数据开发。 进入目标节点的编辑页面。 您可以…

DataWorks的资源组编排功能，帮助您在数据开发阶段，批量修改指定业务流程下目标节点使用的调度资源组。当您的工作空间中有多个调度资源组时，可以根据实际业务需求，使用该功能快速为目标节点重新分配资源组，促进资源的合理使用。本文为您介绍如何进行资源组编排。 前提条件 资源组编排是基于业务流程使用的功能，因此您需要先创建业务流程。创建业务流程，详情请参见创建周…

DataWorks支持将本地的CSV文件或部分文本文件数据直接上传至MaxCompute表中，本文为您介绍操作步骤详情。 前提条件 已准备好用于接收本地数据的MaxCompute表。 您可以选择已创建的MaxCompute表，或者直接新创建一个MaxCompute表，建表操作可参见创建MaxCompute表。 使用限制 当前仅支持上传本地数据至MaxComp…