详情页标题前

阿里云大数据开发治理平台 DataWorks构建数据仓库-云淘科技

详情页1

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。

构建云上大数据仓库

本场景推荐的架构如下。阿里云大数据开发治理平台 DataWorks构建数据仓库-云淘科技

  • 适用行业:全行业适用。
  • 方案优势:阿里巴巴大数据最佳实践,高性能、低成本、Severless服务,免运维、全托管模式,让企业的大数据研发人员更聚焦在业务数据的开发、生产、治理。
  • 产品组合:MaxCompute + Flink + DataWorks。
  • 场景说明
    • 用户数据来源丰富,包括来自云端的数据、外部数据源,数据统一沉淀,完成数据清洗、建模。
    • 用户的应用场景复杂,对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等,同时融合结构化数据搭建企业级的数据管理平台,并且计算和存储成本最低。
    • 平台支撑多种形式的应用,包括使用机器学习算法进行复杂数据分析、使用BI报表进行图表展现、使用可视化产品进行大屏展示、使用其他自定义的方式消费数据。

构建智能实时数据仓库

本场景推荐的架构如下。阿里云大数据开发治理平台 DataWorks构建数据仓库-云淘科技

  • 适用行业:适用于电商、游戏、社交等互联网行业大规模数据实时查询场景。
  • 方案优势
    • 阿里云实时数仓全套链路与离线数仓无缝打通。
    • 满足一套存储,两种计算(实时计算和离线计算)的高性价比组合。
  • 产品组合:DataHub+实时计算Flink+交互式分析+MaxCompute+DataWorks+Quick BI / DataV
  • 场景说明
    • 数据采集:通过DataWorks(批量)、DataHub(实时)进行统一数据采集接入。
    • 数据开发:基于DataWorks进行数据全链路研发,包括数据集成、数据开发和ETL 、转换及计算等开发,以及数据作业的调度、监控、告警等。DataWorks提供数据开发链路的安全管控的能力,以及基于DataWorks数据服务模块提供统一数据服务API能力。
    • 实时数据:按实际业务需求使用Flink进行实时ETL(可选)、结果入库,使用交互式分析产品构建实时数据仓库、应用集市,并提供海量数据的实时交互查询和分析。
    • 交互式分析:提供实时离线联邦查询。历史离线数据存放于MaxCompute,实时分析数据存放于交互式分析。基于阿里云Quick BI或第三方数据分析工具(如Tableau)执行数据可视化,以及构建各业务板块数据服务门户应用。

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/166758.html

(0)
上一篇 2023年12月10日
下一篇 2023年12月10日
详情页2

相关推荐

  • DataWorks中odps运行数据集成任务,运行日志中stage为0%?-云小二-阿里云

    DataWorks中odps运行数据集成任务,运行日志中stage为0%? 以下为热心网友提供的参考意见 在DataWorks中运行ODPS数据集成任务时,如果运行日志中的stage一直为0%,可能的原因是数据集成资源组的资源不足。当资源不足时,任务可能会长时间处于等待状态,导致stage的进度无法推进。在这种情况下,您可以考虑增加资源组的资源配额,以便任务…

    阿里云 2023年12月24日
  • 阿里云日志服务SLS通过SQL聚合指标数据进行智能巡检-云淘科技

    智能巡检功能用于对业务日志进行自动化、智能化、自适应的异常巡检。本文介绍通过SQL聚合指标数据进行智能巡检的操作步骤。 前提条件 已采集日志到源Logstore。具体操作,请参见数据采集概述。 已配置源Logstore的索引。具体操作,请参见配置索引。 已创建智能异常分析实例。具体操作,请参见创建实例。 注意 本文中所涉及的Logstore为Standard…

    2023年12月10日
  • 阿里云负载均衡应用场景-云淘科技

    传统型负载均衡CLB(Classic Load Balancer)的应用场景为高访问量的业务,提高应用程序的可用性和可靠性。 应用于高访问量的业务 如果您的应用访问量很高,您可以通过配置监听规则将流量分发到不同的云服务器ECS(Elastic Compute Service)实例上。此外,您可以使用会话保持功能将同一客户端的请求转发到同一台后端ECS,提高访…

    2023年12月10日
  • 阿里云日志服务SLS数据结构-云淘科技

    本文介绍数据加工语法相关的数据结构及其说明。 基本数据结构 基本数据结构的不同类型和说明如下表所示: 类型 说明 整数 用于设置字段值或者函数的参数传递。 例如e_set(“f1”, 100)表示设置字段f1的值为100。 浮点 用于设置字段值或者函数的参数传递。 例如e_set(“f1”, 1.5)表示设置字段f1的值为1.5。 字符串(String) 字…

    阿里云日志服务SLS 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云RDS数据库ModifyDBInstanceHAConfig – 修改实例的高可用模式和数据复制方式-云淘科技

    该接口用于修改RDS实例的高可用模式和数据复制方式。 接口说明 适用引擎 RDS MySQL RDS PostgreSQL 相关功能文档 注意 使用该接口前,请仔细阅读功能文档,确保完全了解使用接口的前提条件及使用后造成的影响后,再进行操作。 RDS MySQL修改数据复制方式 RDS PostgreSQL修改数据复制方式 调试 您可以在OpenAPI Ex…

    阿里云数据库 2023年12月9日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。