详情页标题前

阿里云对象存储OSSImpala以EMR集群的方式查询OSS-HDFS服务中的数据-云淘科技

详情页1

本文介绍Impala如何以EMR集群的方式查询OSS-HDFS服务中的数据。

前提条件

  • 创建EMR-3.42.0及以上版本或EMR-5.8.0及以上版本的集群。具体步骤,请参见创建集群。

  • 已开通并授权访问OSS-HDFS服务。具体操作,请参见开通并授权访问OSS-HDFS服务。

操作步骤

  1. 登录EMR集群。

    1. 登录EMR on ECS控制台。

    2. 单击创建的EMR集群。

    3. 单击节点管理页签,然后单击节点组左侧的阿里云对象存储OSSImpala以EMR集群的方式查询OSS-HDFS服务中的数据-云淘科技

    4. 单击ECS ID。在ECS实例页面,单击实例ID右侧的远程连接

    如果您希望使用SSH方式(SSH密钥对或SSH密码)在Windows和Linux环境中登录集群,请参见登录集群。

  2. 使用Impala查询OSS-HDFS服务中的数据。
    1. 创建表。
      CREATE EXTERNAL TABLE customer_demographics (
       `cd_demo_sk` INT,
       `cd_gender` STRING,
       `cd_marital_status` STRING,
       `cd_education_status` STRING,
       `cd_purchase_estimate` INT,
       `cd_credit_rating` STRING,
       `cd_dep_count` INT,
       `cd_dep_employed_count` INT,
       `cd_dep_college_count` INT)
      STORED AS PARQUET
      LOCATION 'oss://bucket.endpoint/dir';
    2. 查询表数据。
      select * from customer_demographics;

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/158934.html

(0)
上一篇 2023年12月10日
下一篇 2023年12月10日
详情页2

相关推荐

  • 阿里云RDS数据库(可选)ECS配置安全组-云淘科技

    RDS PostgreSQL的一键上云功能支持将ECS自建PostgreSQL迁移到RDS PostgreSQL。本文介绍上云前,ECS自建PostgreSQL配置安全组,允许RDS PostgreSQL访问自建PostgreSQL数据库端口。 前提条件 如果您需要将ECS自建PostgreSQL迁移到RDS PostgreSQL,则需要执行本文配置。ECS…

    2023年12月9日
  • 阿里云容器服务ACK搭建Spark应用-云淘科技

    本文介绍如何使用阿里云ACK Serverless集群和弹性容器实例(ECI),快速搭建Spark应用。 背景信息 Apache Spark是一个在数据分析领域广泛使用的开源项目,它常被应用于众所周知的大数据和机器学习工作负载中。从Apache Spark 2.3.0版本开始,您可以在Kubernetes上运行和管理Spark资源。 Spark Operat…

    2023年12月10日
  • 阿里云容器服务ACKACK支持的GPU机型列表-云淘科技

    ACK支持GPU节点的卡型包括NVIDIA T4、NVIDIA P4、NVIDIA P100、NVIDIA A10、NVIDIA V100等,但不支持这些GPU的共享型和虚拟型实例。本文介绍ACK支持的GPU实例类型。 支持的GPU实例类型 ECS规格族 该规格支持的GPU型号 GPU计算型gn4 NVIDIA M40 GPU计算型gn5i NVIDIA P…

    阿里云容器服务 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云ECS云服务器已停售的实例规格-云淘科技

    本文所列实例规格在中国站已全部停售,其中,sn2、sn1、n1、n2和e3在国际站(International)仍然在售。 存储增强型实例规格族g5se 通用型实例规格族sn2 计算型实例规格族sn1 高主频计算型实例规格族c4、ce4、cm4 GPU计算型实例规格族gn4 GPU可视化计算型实例规格族ga1 高主频型弹性裸金属服务器实例规格族ebmhfg5…

    阿里云服务器 2023年12月9日
  • 阿里云日志服务SLS管理服务关联角色AliyunServiceRoleForSLSAudit-云淘科技

    您可以授予日志服务应用(例如日志审计服务、EBS Lens等)使用SLS日志服务关联角色(AliyunServiceRoleForSLSAudit)来获取其他云服务中的资源。本文介绍AliyunServiceRoleForSLSAudit角色的应用场景和权限策略。 应用场景 当您在日志服务应用(例如日志审计服务、EBS Lens等)中进行日志采集时,日志服务…

    阿里云日志服务SLS 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。