详情页标题前

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

详情页1

操作场景

本文为您介绍如何通过云函数 SCF 将 CLS 日志转储至 Elasticsearch Service(ES)。其中,CLS 主要用于日志采集,SCF 主要提供数据加工的节点计算能力。数据处理流程图请参见 函数处理概述。

操作步骤

创建日志集和主题

1. 登录 日志服务控制台,在左侧导航栏中单击日志主题。2. 进入日志集管理页面,在页面上方选择日志集的地域。3. 单击创建日志主题,在弹出的创建日志集窗口中,填写相关信息:日志主题名称:例如 project_test日志集名称:例如 nginxn

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

4. 单击确定,即可创建日志集和主题。5. 日志主题新增成功,将进入日志主题管理页,如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技



创建云函数 SCF

1. 登录 Serverless 控制台,进入函数服务页面。2. 在“函数服务”页面上方选择北京地域,并单击新建进入新建函数页面,配置以下参数:创建方式:选择模板创建模糊搜索:输入“CLS 消息转储至 ES”,并进行搜索。3. 单击模板中的查看详情,即可在弹出的“模板详情”窗口中查看相关信息,支持下载操作。单击下一步,进入函数配置页面。n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

4.基础配置中,函数名称已经自动生成,可根据需要自行修改。按照引导配置环境变量和运行角色,如下图所示:环境变量:新增如下环境变量,参考表格进行填写。如下图所示: 

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技



key value 是否必填
ES_Address ES 服务地址
ES_User ES 用户名,默认为 elastic。
ES_Password ES 用户登录密码。

运行角色:勾选启用,选择“配置并使用SCF模板运行角色”。 5.网络配置中,为私有网络勾选启用,并选择和 Elasticsearch 相同的 VPC 和子网。如下图所示: 

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技


6. 函数配置保持默认配置,单击完成,完成函数的创建。

配置 CLS 触发器

1. 登录 日志服务控制台,在左侧导航栏中单击日志集管理。2. 找到已创建的日志集,在其右侧操作栏中,单击查看,进入日志集详情页面。3. 在日志主题详情页面,选择函数处理并单击新建。在弹出的“函数处理”窗口中添加已创完成的函数。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

n 主要参数信息如下,其余配置项请保持默认:命名空间:选择函数所在的命名空间。函数名:选择 创建云函数 SCF 步骤中已创建的云函数。别名:选择函数别名。最长等待时间:单次事件拉取的最长等待时间,默认60s。

测试函数功能

1. 下载 测试样例 中的日志文件,并解压出 demo-scf1.txt,导入至源端 CLS 服务。2. 切换至 Serverless 控制台,查看执行结果。n在函数详情页面中选择日志查询页签,可以看到打印出的日志信息。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

3. 切换至 Elasticsearch Service 控制台,查看数据转储及加工结果。说明您可以根据自身的需求编写具体的数据加工处理方法。
官网1折活动,限时活动,即将结束,速速收藏
同尘科技腾讯云授权服务中心。
购买腾讯云产品享受折上折,更有现金返利。同意关联立享优惠

转转请注明出处:https://www.yunxiaoer.com/150045.html

(0)
上一篇 2023年12月9日 下午1:30
下一篇 2023年12月9日 下午1:30
详情页2

相关推荐

  • 腾讯云对象存储生成预签名链接

    简介 本文档提供关于生成对象预签名链接的示例代码。关于使用预签名 URL 上传的说明请参见 预签名授权上传, 使用预签名 URL 下载的说明请参见 预签名授权下载。说明建议用户使用临时密钥生成预签名,通过临时授权的方式进一步提高预签名上传、下载等请求的安全性。申请临时密钥时,请遵循 最小权限指引原则,防止泄露目标存储桶或对象之外的资源。如果您一定要使用永久密…

    腾讯云 2023年12月9日
  • 腾讯云对象存储通过图片压缩实现业务降本增效

    简介 各大企业、平台随着业务的发展,数据量不断扩大,尤其是 Web 中最关键的部分——图片业务,很多人选择将图片存储到 对象存储(Cloud Object Storage,COS) 中,这也让客户的存储空间以及流量迅速增大。腾讯云 数据万象(Cloud Infinite,CI) 提供了高效、便捷、性价比高的 图片压缩 功能,帮助开发者们在图片质量不变的情况下…

    2023年12月9日
  • 腾讯云容器服务预留券概述同尘科技

    TKE Serverless 服务预留券是一种预付费产品。支持按月购买,购买后可以对同地域、同资源规格类型、同资源规格的容器(Serverless 集群 Pod 或容器实例)进行计算费用抵扣。 预留券特点 单位时间价格便宜n预留券仅支持按月购买,在生效期内,每小时/秒的单位时间价格相比 TKE Serverless 服务按量计费模式更便宜,具体可参考 产品定…

    腾讯云 2023年12月9日
  • 腾讯云内容分发网络CDN高级回源配置

    功能介绍 腾讯云 CDN 支持更细粒度的回源配置,根据不同规则回源到不同的源站地址。例如:分路径回源(指定文件类型、文件夹、全路径文件(如:/test/1.jpg)、首页回源),根据 Client IP 所在区域回源等。 注意事项 1. 仅加速类型为 CDN 网页小文件、CDN 下载大文件、CDN 音视频点播的域名支持高级回源配置。2. 回源协议、回源 HO…

    2023年12月9日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 腾讯云云点播音视频内容审核

    操作场景 本文演示用户通过控制台发起音视频审核任务,以及在任务中心和媒资页面查看审核结果。 操作步骤 步骤1:发起音视频审核任务 1. 登录 云点播控制台,单击左侧导航栏应用管理,进入应用列表页。2. 找到需要管理任务的应用,点击应用名称进入应用管理页。3. 默认进入媒资管理 > 音视频管理,“已上传”页面。4. 在媒资列表勾选需要审核的音视频。5. …

    2023年12月9日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。