详情页标题前

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技

详情页1

操作场景

本文为您介绍如何通过云函数 SCF 将 CLS 日志转储至消息队列 Ckafka。其中,CLS 主要用于日志采集,SCF 主要提供数据加工的节点计算能力,Ckafka 主要提供数据流终端转储能力。数据处理流程图请参见 函数处理概述。

操作步骤

创建日志集和主题

1. 登录 日志服务控制台,在左侧导航栏中单击日志主题。2. 进入日志集管理页面,在页面上方选择日志集的地域。3. 单击创建日志主题,在弹出的创建日志集窗口中,填写相关信息:日志主题名称:例如 project_test日志集名称:例如 nginxn

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技

4. 单击确定,即可创建日志集和主题。5. 日志主题新增成功,将进入日志主题管理页,如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技



创建云函数 SCF

1. 登录 Serverless 控制台,进入函数服务页面。2. 在“函数服务”页面上方选择北京地域,并单击新建进入新建函数页面,配置以下参数:函数名称:命名为 “CLSdemo”。运行环境:选择 “Python 2.7”。创建方式:选择模板函数模糊搜索:输入“CLS数据转存到CKAFKA”,并进行搜索。3. 单击模板中的查看详情,即可在弹出的“模板详情”窗口中查看相关信息,支持下载操作。n

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技

4. 基本信息配置完成之后,单击下一步,进入函数配置页面。5. 函数配置保持默认配置,单击完成,完成函数的创建。注意函数需要在函数配置页面中,选择和 Ckafka 相同的 VPC 和子网。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技



配置 CLS 触发器

1. 登录 日志服务控制台,在左侧导航栏中单击日志主题。2. 找到已创建的日志集,例如”project_test“,在其右侧操作栏中,单击查看,进入日志集详情页面。3. 在日志主题详情页面,选择函数处理并单击右上角的新建。在弹出的“函数处理”窗口中添加已创完成的函数。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技

n主要参数信息如下,其余配置项请保持默认:命名空间:选择函数所在的命名空间。函数名:选择 创建云函数 SCF 步骤中已创建的云函数。别名:选择函数别名。最长等待时间:单次事件拉取的最长等待时间,默认60s。

测试函数功能

1. 下载 测试样例 中的日志文件,并解压出 demo-scf1.txt,导入至源端 CLS 服务。2. 切换至 Serverless 控制台,查看执行结果。n在函数详情页面中选择日志查询页签,可以看到打印出的日志信息。如下图所示: n

腾讯云云函数(SCF)SCF + CLS 日志转存至消息队列 Ckafka-云淘科技

3. 切换至 Ckafka 控制台,查看数据转储及加工结果。说明您可以根据自身的需求编写具体的数据加工处理方法。
官网1折活动,限时活动,即将结束,速速收藏
同尘科技腾讯云授权服务中心。
购买腾讯云产品享受折上折,更有现金返利。同意关联立享优惠

转转请注明出处:http://www.yunxiaoer.com/150031.html

(0)
上一篇 2023年12月9日 下午1:30
下一篇 2023年12月9日 下午1:30
详情页2

相关推荐

  • 最值得开发者关注的数据库技术与创新有哪些?-云小二-阿里云

    随着数字经济的蓬勃发展,数据库技术已经成为支撑现代应用不可或缺的核心。从关系型数据库到NoSQL,再到云原生数据库,技术的每一次迭代都不仅仅改变了数据存储的方式,更是开启了开发者们创新应用的新篇章。作为一名开发者,你所关注的数据库技术与创新有哪些? 本期话题(以下方向任选其一即可) 谈谈你最近关注的数据库技术与创新有哪些? 对于未来数据库的演进有哪些思考? …

    2024年1月5日
  • 阿里云RDS数据库什么是数据库代理-云淘科技

    RDS PostgreSQL数据库代理提供自动读写分离功能。数据库代理是位于数据库服务端和应用服务端之间的网络代理服务,用于代理应用服务端访问数据库时的所有请求,具有高可用、高性能、可运维、简单易用等特点,本文介绍RDS PostgreSQL的数据库代理服务。 适用场景 事务内有大量请求,导致主实例负载过高的场景。 连接数过多导致主实例负载过高的场景。 纯只…

    阿里云数据库 2023年12月9日
  • 视觉智能平台用java sdk的话, client 是线程安全的吧?整个应用,初始化一个clie-云小二-阿里云

    视觉智能平台用java sdk的话, client 是线程安全的吧?整个应用,初始化一个client 就行了吧 ? 以下为热心网友提供的参考意见 是的,调用视觉智能开放平台的javasdk,client的线程是安全的,整个应用初始化一个client就可以了 以下为热心网友提供的参考意见 确实,视觉智能平台的Java SDK是线程安全的。在整个应用中,您只需初…

    阿里云 2023年12月6日
  • 腾讯云对象存储预请求跨域配置

    简介 本文档提供关于预请求跨域配置操作相关的 API 概览以及 SDK 示例代码。 API 操作名 操作描述 Options Object 预请求跨域配置 用预请求来确认是否可以发送真正的跨域请求 SDK API 参考 SDK 所有接口的具体参数与方法说明,请参考 SDK API 参考。 预请求跨域配置 功能说明 获取预请求跨域配置(Options Obje…

    腾讯云 2023年12月9日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 腾讯云对象存储日志监控问题

    日志相关 COS 是否有文件的上传/下载/删除等操作记录? 对象存储提供了 日志管理 功能,能够记录对于指定源存储桶的详细访问信息,并将这些信息以日志文件的形式保存在指定的存储桶中,以实现对存储桶更好的管理。如果需要获知文件的上传/下载/删除等操作记录,可以开启访问日志管理功能,记录文件的操作情况。 如何查询 COS 产生的外网流量主要集中在哪个文件上? 目…

    2023年12月9日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。