详情页标题前

阿里云对象存储OSSHBase以EMR集群的方式使用OSS-HDFS服务作为底层存储-云淘科技

详情页1

HBase是Hadoop生态中的实时数据库,有较高的写入性能。 OSS-HDFS服务(JindoFS服务)是阿里云新推出的存储空间类型,并兼容HDFS接口。阿里云开源大数据开发平台E-MapReduce(简称EMR)支持HBase使用OSS-HDFS服务作为底层存储,同时支持存储WAL文件,实现存储与计算分离。

前提条件

  • 已创建EMR-3.42.0及以上版本或EMR-5.8.0及以上版本的集群,并在创建集群时选择Hbase。具体步骤,请参见创建集群。

  • 已开通并授权访问OSS-HDFS服务。具体操作,请参见开通并授权访问OSS-HDFS服务。

操作步骤

  1. 登录EMR集群。

    1. 登录EMR on ECS控制台。

    2. 单击创建的EMR集群。

    3. 单击节点管理页签,然后单击节点组左侧的阿里云对象存储OSSHBase以EMR集群的方式使用OSS-HDFS服务作为底层存储-云淘科技

    4. 单击ECS ID。在ECS实例页面,单击实例ID右侧的远程连接

    如果您希望使用SSH方式(SSH密钥对或SSH密码)在Windows和Linux环境中登录集群,请参见登录集群。

  2. 指定HBase的存储路径。您可以通过将hbase-site配置文件中的参数hbase.rootdir的值修改为OSS地址(格式为oss://bucket.endpoint/hbase-root-dir)的方式,指定HBase和WAL文件的存储路径。重要 如果要释放集群,需要先禁用table,确保WAL文件已全量更新到存储文件HFile。

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/157679.html

(0)
上一篇 2023年12月10日
下一篇 2023年12月10日
详情页2

相关推荐

  • 阿里云对象存储OSS通过crc64校验数据传输的完整性-云淘科技

    数据在客户端和服务器之间传输时有可能会出错。OSS现在支持对各种方式上传的Object返回其crc64值,客户端可以和本地计算的crc64值做对比,从而完成数据完整性的验证。 背景信息 OSS对新上传的Object进行crc64的计算,并将结果作为Object的元信息存储,随后在返回的response header中增加x-oss-hash-crc64ecm…

    阿里云对象存储 2023年12月10日
  • 阿里云容器服务ACK实践教程-云淘科技

    本文提供容器服务ACK不同集群类型的最佳实践和产品教程索引。 最佳实践索引 集群类型 相关文档 托管版与专有版容器集群ACK 托管与专有版容器集群ACK最佳实践 ACK Serverless集群 ASK集群最佳实践 云原生AI套件 云原生AI套件最佳实践 分布式云容器平台ACK One 分布式云容器平台ACK One最佳实践 内容没看懂? 不太想学习?想快速…

    阿里云容器服务 2023年12月10日
  • 阿里云RDS数据库DescribeDedicatedHosts – 查询RDS主机组内的主机信息-云淘科技

    查询专属集群内的主机信息。 接口说明 专属集群功能以集群形式批量管理实例,一个地域可以创建多个专属集群,一个专属集群包含多个主机,一个主机包含多个实例。详情请参见专属集群简介。 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。 调试调试授权信息下表是…

    阿里云数据库 2023年12月9日
  • 阿里云容器服务ACK创建集群-云淘科技

    创建一个新的集群实例,并新建指定数量的节点。 关于该命令的详细参数说明,请参见API文档创建Kubernetes专有版集群和创建Kubernetes托管版集群。 API请求响应 请求格式 aliyun cs POST /clusters –region=${regionId} –header “Content-Type=application/json”…

    阿里云容器服务 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云对象存储OSS列举存储空间-云淘科技

    存储空间(Bucket)按字母序排列。您可以结合实际场景列举当前账号下的所有存储空间、指定前缀的存储空间、指定个数的存储空间等。 列举条件 您可以通过设置prefix、marker或者max-keys参数列举满足指定条件的存储空间。 参数名称 描述 prefix 限制返回的存储空间名称必须以prefix作为前缀。如果不指定该参数,则返回所有存储空间。 mar…

    阿里云对象存储 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。