详情页标题前

腾讯云对象存储数据导出至 ES

详情页1

简介

数据导出至 Elasticsearch Service(ES)是腾讯云对象存储(Cloud Object Storage,COS)基于 云函数(Serverless Cloud Function,SCF) 为用户提供的数据出湖方案,可以帮助用户将 CSV、JSON 等文件格式的数据导出至同地域的腾讯云 Elasticsearch 服务,用于快速构建日志分析、异常监控等各类业务。

注意事项

数据导出至 ES 功能涉及 COS 数据检索接口,相关的限制说明请参见 Select 概述若您此前在对象存储控制台上为存储桶添加了数据导出至 ES 规则,可以在 云函数控制台 上看到您所创建的数据导出至 ES 函数,请不要删除或修改该数据导出至 ES 函数,否则可能导致您的规则不生效。当前数据导出至 ES 功能仅支持广州、上海、北京、成都。对象存储数据导出至 ES 功能依赖于云函数服务,云函数服务为用户提供了 免费额度,超出免费额度的部分需要按照 云函数产品定价 收费。

操作步骤

1. 登录 对象存储控制台2. 在左侧导航中,单击应用集成 > 数据导出,找到数据导出至 ES3. 单击配置规则,进入规则配置页面。4. 单击添加函数注意 如果您尚未开通云函数服务,请前往 云函数控制台 开通云函数服务,按照提示完成服务授权即可。5. 在弹出的窗口中,配置如下信息:

腾讯云对象存储数据导出至 ES

函数名前缀:作为函数的唯一标识名称,创建后不可修改。您可以在 云函数控制台 上查看该函数。场景选择:选择您希望导出的日志来源,推荐使用 COS 日志文件导出。源存储桶:日志所保存的存储桶名称,如果选择 COS 日志文件导出,需要先开启 COS 日志存储功能。SCF 授权:数据导出至 ES 需要授权云函数从您的存储桶中读取日志文件。因此需要添加此授权。6. 单击填写预设参数,进行数据导出至 ES 配置,配置项说明如下:

腾讯云对象存储数据导出至 ES

服务版本:ES 的版本,支持7.x 和6.x。访问方式:您的 ES 的访问方式。如果选择 VPC 内网访问,需要填写对应的 VPC 。访问地址:您的 ES 的访问地址,必须以http://https://开头。索引名称:您创建的 ES 检索索引。鉴权配置:您的 ES 鉴权方式,如果是腾讯云 ES,目前仅支持需鉴权,您需要填写对应的用户名称和用户密码。速率上限:导出至 ES 的速率上限。7. 如果您希望做一些个性化的日志数据提取,请单击上一步进行配置,通常情况,建议直接单击确认,完成函数的添加。

腾讯云对象存储数据导出至 ES


您可以对新创建的函数进行如下操作:
单击日志,查看数据导出至 ES 的历史运行情况。当数据导出至 ES 出现报错时,您还可以通过单击日志,快速跳转到云函数控制台查看日志错误详情。单击详情,查看当前函数的详细配置。单击编辑,修改数据导出至 ES 规则。单击触发,可以选择存储桶内已有的一份日志直接触发导出至 ES。单击删除,删除不使用的数据导出至 ES 规则。
对象存储官网1折活动,限时活动,即将结束,速速收藏
同尘科技为腾讯云授权服务中心。
购买腾讯云产品享受折上折,更有现金返利。同意关联立享优惠

转转请注明出处:https://www.yunxiaoer.com/144146.html

(0)
上一篇 2023年12月9日 上午1:42
下一篇 2023年12月9日 上午1:42
详情页2

相关推荐

  • 腾讯云对象存储提交视频审核任务

    功能描述 本接口用于提交一个视频审核任务。视频审核功能为异步任务方式,您可以通过提交视频审核任务审核您的视频文件,然后通过 查询视频审核任务接口 或 视频审核回调 查询审核结果。该接口支持情况如下:说明支持审核腾讯云 COS 上的视频文件。支持审核第三方云存储厂商的视频 URL。支持审核加密数据,如有需要,请 联系服务人员 咨询。支持对视频文件进行自动检测,…

    腾讯云 2023年12月9日
  • 阿里云RDS数据库创建数据库-云淘科技

    本文介绍如何为RDS MySQL或RDS MySQL Serverless实例创建数据库。 前提条件 已创建RDS MySQL实例或Serverless实例。 概念 实例:实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库。 数据库:数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理…

    阿里云数据库 2023年12月9日
  • 腾讯云容器服务使用 CLB 实现简单的蓝绿发布和灰度发布同尘科技

    操作场景 腾讯云 Kubernetes 集群实现蓝绿发布或灰度发布通常需向集群额外部署其他开源工具,例如 Nginx Ingress、Traefik 或将业务部署至服务网格 Service Mesh,利用服务网格的能力实现。这些方案均具有一定难度,若您的蓝绿发布或灰度需求不复杂,且不期望集群引入过多的组件或复杂的用法,则可参考本文利用 Kubernetes …

    2023年12月9日
  • 腾讯云云点播如何进行源站迁移

    简介 VOD Migrate Tool 是一个集成了数据迁移功能的一体化工具。通过编写简单的配置文件,用户可以将源地址媒体文件快速迁移至 VOD 中。 支持的数据源 本地文件夹URL 列表腾讯云 COSAWS S3阿里云 OSS七牛云 对象存储 使用环境 系统环境 支持 Windows、Linux 和 macOS 系统。 软件依赖 Python 2.7/3.…

    2023年12月9日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 腾讯云对象存储更新模板

    功能描述 更新视频目标检测模板。 授权说明 授权策略中 action 设置为 ci:UpdateMediaTemplate 。查看所有 action。 服务开通 使用该功能需提前开通数据万象,并绑定存储桶。详情请参见 绑定存储桶。 使用限制 使用该接口时,请先确认相关限制条件。详情请参见 使用限制。 请求 请求示例 PUT /template/<Te…

    腾讯云 2023年12月9日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。