详情页标题前

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

详情页1

操作场景

本文为您介绍如何通过云函数 SCF 将 CLS 日志转储至 Elasticsearch Service(ES)。其中,CLS 主要用于日志采集,SCF 主要提供数据加工的节点计算能力。数据处理流程图请参见 函数处理概述。

操作步骤

创建日志集和主题

1. 登录 日志服务控制台,在左侧导航栏中单击日志主题。2. 进入日志集管理页面,在页面上方选择日志集的地域。3. 单击创建日志主题,在弹出的创建日志集窗口中,填写相关信息:日志主题名称:例如 project_test日志集名称:例如 nginxn

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

4. 单击确定,即可创建日志集和主题。5. 日志主题新增成功,将进入日志主题管理页,如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技



创建云函数 SCF

1. 登录 Serverless 控制台,进入函数服务页面。2. 在“函数服务”页面上方选择北京地域,并单击新建进入新建函数页面,配置以下参数:创建方式:选择模板创建模糊搜索:输入“CLS 消息转储至 ES”,并进行搜索。3. 单击模板中的查看详情,即可在弹出的“模板详情”窗口中查看相关信息,支持下载操作。单击下一步,进入函数配置页面。n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

4.基础配置中,函数名称已经自动生成,可根据需要自行修改。按照引导配置环境变量和运行角色,如下图所示:环境变量:新增如下环境变量,参考表格进行填写。如下图所示: 

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技



key value 是否必填
ES_Address ES 服务地址
ES_User ES 用户名,默认为 elastic。
ES_Password ES 用户登录密码。

运行角色:勾选启用,选择“配置并使用SCF模板运行角色”。 5.网络配置中,为私有网络勾选启用,并选择和 Elasticsearch 相同的 VPC 和子网。如下图所示: 

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技


6. 函数配置保持默认配置,单击完成,完成函数的创建。

配置 CLS 触发器

1. 登录 日志服务控制台,在左侧导航栏中单击日志集管理。2. 找到已创建的日志集,在其右侧操作栏中,单击查看,进入日志集详情页面。3. 在日志主题详情页面,选择函数处理并单击新建。在弹出的“函数处理”窗口中添加已创完成的函数。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

n 主要参数信息如下,其余配置项请保持默认:命名空间:选择函数所在的命名空间。函数名:选择 创建云函数 SCF 步骤中已创建的云函数。别名:选择函数别名。最长等待时间:单次事件拉取的最长等待时间,默认60s。

测试函数功能

1. 下载 测试样例 中的日志文件,并解压出 demo-scf1.txt,导入至源端 CLS 服务。2. 切换至 Serverless 控制台,查看执行结果。n在函数详情页面中选择日志查询页签,可以看到打印出的日志信息。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至 ES-云淘科技

3. 切换至 Elasticsearch Service 控制台,查看数据转储及加工结果。说明您可以根据自身的需求编写具体的数据加工处理方法。
官网1折活动,限时活动,即将结束,速速收藏
同尘科技腾讯云授权服务中心。
购买腾讯云产品享受折上折,更有现金返利。同意关联立享优惠

转转请注明出处:http://www.yunxiaoer.com/150045.html

(0)
上一篇 2023年12月9日 下午1:30
下一篇 2023年12月9日 下午1:30
详情页2

相关推荐

  • 腾讯云对象存储智能语音概述

    概述 智能语音服务基于腾讯云数据万象,开启之后,可识别存储桶中的录音文件,进行语音识别、语音合成、音频降噪等处理。 适用场景 可应用于呼叫中心语音质检、视频字幕生成、会议语音资料撰写、有声书阅读等场景。 相关说明 智能语音为收费服务,由数据万象收取,具体费用请参见 计费与定价。数据万象在每个账户在首次产生该服务用量后,会发送有效期为2个月的免费额度资源包,超…

    腾讯云 2023年12月9日
  • 腾讯云CVM服务器Linux 云服务器搭建 FTP 服务

    操作场景 Vsftpd(very secure FTP daemon)是众多 Linux 发行版中默认的 FTP 服务器。本文以 CentOS 7.6 64位操作系统的腾讯云服务器(CVM)为例,使用 vsftpd 软件搭建 Linux 云服务器的 FTP 服务。 示例软件版本 本文搭建 FTP 服务组成版本如下:Linux 操作系统:本文以公共镜像 Cen…

    2023年12月9日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 腾讯云对象存储模板

    简介 您在使用数据工作流服务时,通常需要设定一系列参数,模板的作用就是将这一系列参数组合在一起。设置模板能简化您的操作,使得您设置的参数可被复用而无需重复填写。针对媒体处理功能(例如音视频转码、音视频拼接、视频截帧和视频转动图等),您需要在创建任务或工作流时,指定使用的模板,模板页为您提供了系统预设模板,您也可根据自身业务需求自定义模板。 系统预设模板 系统…

    2023年12月9日
  • 腾讯云对象存储开通AI内容识别服务

    简介 本文档提供关于查询AI内容识别队列的相关 API 概览以及 SDK 示例代码。    API 操作描述 开通AI内容识别服务 开通AI 内容识别服务并生成队列。 SDK API 参考 SDK 所有接口的具体参数与方法说明,请参考 SDK API。 开通AI内容识别服务 功能说明  开通AI 内容识别服务并生成队列。说明:COS iOS SDK 版本…

    腾讯云 2023年12月9日
  • 腾讯云云直播推流播放相关

    直播的在线人数是否有上限? 腾讯云直播默认不限制观看直播的在线人数,只要网络等条件允许都可以观看直播。如果用户配置了带宽限制,当观看人数过多、超出了限制带宽时新的用户无法观看,此情况下在线人数是有限制的。 如何使用播放转码? 考虑到不同的网络因素,满足您使用不同码率不同分辨率的需求,您可以前往 转码配置 设置不同码率不同分辨率的转码模板,更多转码相关信息请参…

    腾讯云 2023年12月9日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。