详情页标题前

阿里云日志服务SLS日志(Log)-云淘科技

详情页1

日志(Log)是系统运行过程中变化的一种抽象数据,其内容为指定对象的操作和其操作结果按时间的有序集合。

格式

文本日志(LogFile)、事件(Event)、数据库日志(BinLog)、时序数据(Metric)等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志,包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同,详细说明如下表所示。

数据域 说明 格式
日志主题 日志服务保留字段__topic__)用于标识日志主题。例如您可以根据日志类型为网站相关日志设置不同的日志主题(access_log、operation_log)。更多信息,请参见日志主题(Topic)。 包括空字符串在内的任意字符串,大小为0~128字节。

该字段值为空字符串时,表示未设置日志主题。

日志时间 日志服务保留字段(__time__)用于标识日志时间。更多信息,请参见保留字段。 Unix时间戳。
日志内容 日志的具体内容,由一个或多个内容项组成,内容项为Key:Value格式。

您通过Logtail极简模式(单行或多行)采集日志时,Logtail不会对日志内容进行解析。整条原始日志将被上传到content字段中。

Key:Value的详细说明如下:

  • Key为字段名称,需为UTF-8编码字符串(字母、下划线和数字但不以数字开头)。字符串大小为1~128字节。不可使用如下字段。
    • __time__
    • __source__
    • __topic__
    • __partition_time__
    • _extract_others_
    • __extract_others__
  • Value为字段值,可以为任意字符串,大小不超过1 MB。
日志来源 日志服务保留字段(__source__)用于标识日志来源,例如产生日志的服务器IP地址。 任意字符串,大小为0~128字节。
日志标签 日志标签。包括:

  • 自定义标签:通过PutLogs接口,在写入日志时添加标签。
  • 系统标签:日志服务为日志添加的标签,包括__client_ip__和__receive_time__。
字典格式,Key和Value均为字符串类型。在日志中以__tag__:为前缀进行展示。

示例

以下以一条网站访问日志为例,说明原始日志与日志服务中数据模型的映射关系。

  • 原始日志
    127.0.0.1 - - [01/Mar/2021:12:36:49  0800] "GET /index.html HTTP/1.1" 200 612 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36
  • 通过极简模式采集到日志服务后的日志

    整条原始日志将被上传到content字段中。

    阿里云日志服务SLS日志(Log)-云淘科技

  • 通过完整正则模式采集到日志服务后的日志

    Logtail将日志内容结构化,即根据您所设置的正则表达式将日志内容提取为多个键值对。

    阿里云日志服务SLS日志(Log)-云淘科技

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/161330.html

(0)
上一篇 2023年12月10日 上午3:18
下一篇 2023年12月10日 上午3:19
详情页2

相关推荐

  • 阿里云日志服务SLS使用前须知-云淘科技

    阿里云DDoS高防(新BGP)、DDoS高防(国际)联合日志服务推出全量日志分析功能,提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务,帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。本文介绍全量日志分析功能相关的资产详情、费用说明及使用限制等。 根据要接入DDoS高防进行防护的业务服务器的部署地域的不同,DDoS…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS概述-云淘科技

    告警监控系统负责产生告警,由告警监控规则和资源数据等组成。通过告警监控规则定期检查评估,根据监控编排逻辑评估查询和分析结果,触发告警或恢复通知,发送给告警管理系统。 相关操作和说明如下: 控制台基本操作 创建日志告警监控规则 告警监控规则相关操作 协同告警 多集合操作机制 监控规则编排 监控时效性说明 评估表达式语法 使用评估表达式设置触发条件 设置告警严重…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云大数据开发治理平台 DataWorksOSS数据源-云淘科技

    OSS数据源为您提供读取和写入OSS的双向通道,本文为您介绍DataWorks的OSS数据同步的能力支持情况。 支持的字段类型与使用限制 离线读 OSS Reader实现了从OSS读取数据并转为数据集成协议的功能,OSS本身是无结构化数据存储。对于数据集成而言,OSS Reader支持的功能如下。 支持 不支持 支持且仅支持读取TXT格式的文件,且要求TXT…

  • 阿里云云原生大数据计算服务 MaxCompute数据传输作业:数据集成-云淘科技

    MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute,数据集成作业主要有三种类型:离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。 离线同步 离线(批量)的数据通道通过定义数据来源和去向的数据源和数据集,提供一套抽象化的数据抽取插件(Reader)、数据写入插件(Write…

    2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云对象存储OSSPython设置对象标签-云淘科技

    OSS支持使用对象标签(Object Tagging)对存储空间(Bucket)中的文件(Object)进行分类,您可以针对相同标签的Object设置生命周期规则、访问权限等。 背景信息 设置对象标签时,请注意以下事项: 您可以在上传Object时设置对象标签,也可以对已上传Object设置对象标签。设置对象标签时,如果对象已有标签,则覆盖原标签。关于设置对…

    阿里云对象存储 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。