详情页标题前

阿里云日志服务SLS保留字段-云淘科技

详情页1

在采集日志或投递数据到其他云产品时,日志服务会将日志来源、时间戳等信息以Key-Value对的形式添加到日志中。这些字段是日志服务的保留字段。本文介绍日志服务的保留字段。

重要

  • 使用API写入日志数据或添加Logtail配置时,请不要将Key即字段名称设置为这些保留字段,否则可能会造成字段名称重复、查询不精确等问题。
  • 旧版投递任务不支持投递__tag__前缀的字段。
  • 若当前Logstore的计费模式为按写入数据量计费时,日志服务为日志数据增加的字段将不产生费用。具体内容,可参见按写入数据量计费。
  • 若当前Logstore的计费模式为按使用功能计费时,日志服务为日志数据增加的字段按照按使用功能计费方式正常收费,为其开启索引时也会产生少量索引流量及存储费用。更多信息,请参见按使用功能计费。
保留字段 数据格式 索引与统计设置 说明
__time__ 整型,Unix标准时间格式。
  • 索引设置:__time__通过API中的参数from和to选择,无需添加该字段的索引。
  • 统计设置:当您为任何一列开启统计后,日志服务默认为__time__开启统计。
写入日志数据时指定的日志时间。该字段可用于日志投递、查询、分析。
__source__ 字符串格式。
  • 索引设置:开启索引后,日志服务默认为__source__创建索引,索引数据类型为text类型,分词字符为空。查询时输入source:127.0.0.1 或者 __source__:127.0.0.1
  • 统计设置:当您为任何一列开启统计后,日志服务默认为__source__开启统计。
日志来源设备。该字段可用于日志投递、查询、分析、自定义消费。
__topic__ 字符串格式。
  • 索引设置:开启索引后,日志服务默认为__topic__创建索引,索引数据类型为text类型,分词字符为空。查询时输入__topic__:XXX
  • 统计设置:当您为任何一列开启统计后,日志服务默认为__topic__开启统计。
日志主题(Topic)。如果您设置了日志主题,日志服务会自动为您的日志添加日志主题字段,Key为__topic__,Value为您的主题内容。该字段可用于日志投递、查询、分析、自定义消费。更多信息,请参见日志主题。
__partition_time__ 字符串格式。 日志内容中不存在该字段,无需设置索引。 投递MaxCompute的日志分区时间列,由__time__计算得到。该字段可用于日志投递MaxCompute时设置日期格式分区列。更多信息,请参见投递日志到MaxCompute(旧版)。
__extract_others__ 字符串格式,可反序列化成JSON Map。 日志内容中不存在该字段,无需设置索引。 日志中投递MaxCompute的未配置字段组装为一个JSON Map。该字段可用于日志投递MaxCompute时打包其它未单独配置的字段。更多信息,请参见投递日志到MaxCompute(旧版)。
_extract_others_ 字符串格式,可反序列化成JSON Map。 日志内容中不存在该字段,无需设置索引。 __extract_others__相同,建议使用__extract_others__
__tag__:__client_ip__ 字符串格式。
  • 索引设置:开启索引后,日志服务默认为所有字段创建索引,索引数据类型为text类型,分词字符为空,在查询时要完全命中,或采用模糊查询。
  • 统计设置:默认没有为该列开启统计。如需开启统计,请手动添加__tag__:__client_ip__的索引,并开启统计功能。
日志来源设备的公网IP。该字段为系统标签(Tag)。开启记录外网IP功能后,服务端接收日志时为原始日志追加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时,需要给该字段加上双引号。更多信息,请参见标签(Tags)和记录外网IP。
__tag__:__receive_time__ 字符串,可转换为整型的Unix标准时间格式。
  • 索引设置:开启索引后,日志服务默认为所有标签(Tag)创建索引,索引数据类型为text类型,分词字符为空,在查询时要完全命中,或采用模糊查询。
  • 统计设置:默认没有为该列开启统计。如需开启统计,请手动添加__tag__:__receive_time__的索引,并开启统计功能。
日志到达服务端的时间,该字段为系统标签(Tag)。开启记录外网IP功能后,服务端接收日志时为原始日志追加该字段。该字段可用于日志查询、分析、自定义消费。更多信息,请参见标签(Tags)和记录外网IP。
__tag__:__path__ 字符串格式。
  • 索引设置:开启索引后,日志服务默认为__tag__:__path__创建索引,索引数据类型为text类型,分词字符为空。查询时输入__tag__:__path__:XXX
  • 统计设置:默认没有为该列开启统计。如需开启统计,请手动添加__tag__:__path__的索引,并开启统计功能。
Logtail采集的日志文件路径,Logtail为日志自动填加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时,需要给该字段加上双引号。
__tag__:__hostname__ 字符串格式。
  • 索引设置:开启索引后,日志服务默认为__tag__:__hostname__创建索引,索引数据类型为text类型,分词字符为空。查询时输入__tag__:__hostname__:XXX
  • 统计设置:默认没有为该列开启统计。如需开启统计,请手动添加__tag__:__hostname__的索引,并开启统计功能。
logtail采集数据的来源机器主机名。Logtail为日志自动填加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时,需要给该字段加上双引号。
__raw_log__ 字符串格式。 请手动添加并设置该字段的索引,索引数据类型为text,并根据需求选择是否开启统计。 解析失败的原始日志。关闭丢弃解析失败日志功能后,Logtail在解析日志失败时上传原始日志。其中Key为__raw_log__、Value为日志内容。该字段可用于日志投递、查询、分析、自定义消费。更多信息,请参见丢弃解析失败日志。
__raw__ 字符串格式。 请手动添加并设置该字段的索引,索引数据类型为text,并根据需求选择是否开启统计。 解析成功的原始日志。开启上传原始日志功能后,Logtail会将原始日志作为__raw__字段,和解析后的日志一并上传。该字段可用于审计、合规审查等场景。该字段可用于日志投递、查询、分析、自定义消费。更多信息,请参见上传原始日志。

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/160316.html

(0)
上一篇 2023年12月10日 上午2:19
下一篇 2023年12月10日
详情页2

相关推荐

  • 阿里云日志服务SLS新版任务监控大盘常见问题-云淘科技

    本文介绍新版任务的监控大盘的常见问题。新版任务包括OSS投递(新版)、MaxCompute投递(新版)、数据导入(新版)。 任务监控大盘报错时,如何处理? 异常描述 在目标Project下,打开目标任务的概览页面时,提示查询失败错误,统计报表中未展示任何统计数据。 异常原因 任务运行日志保存在指定Project下名为internal-diagnostic_l…

    2023年12月10日
  • 阿里云日志服务SLSWebhook集成-云淘科技

    Webhook集成用于管理Webhook通知渠道,您可以在行动策略中直接使用已创建的Webhook。目前,日志服务支持钉钉、企业微信、飞书、Slack以及自定义的通用Webhook。 操作步骤 登录日志服务控制台。 进入Webhook集成管理页面。 在Project列表区域,单击任意一个Project。 在左侧导航栏中,单击告警。 在告警中心页面,选择通知对…

    阿里云日志服务SLS 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云对象存储OSSRuby生命周期-云淘科技

    OSS支持设置Bucket生命周期(Lifecycle)规则,自动删除过期的文件(Object)和碎片,或将到期的文件转储为低频或归档存储类型,从而节省存储费用。本文介绍如何管理存储空间(Bucket)的生命周期规则。 设置生命周期规则 以下代码用于设置生命周期规则: require ‘aliyun/oss’ client = Aliyun::OSS::Cl…

    阿里云对象存储 2023年12月10日
  • 阿里云日志服务SLS配置多账号采集-云淘科技

    日志审计服务支持跨账号采集云产品日志(除K8s相关日志外)到当前账号下的Logstore中。本文介绍配置多账号采集的操作步骤。 前提条件 资源目录管理模式 (推荐) 已创建或邀请成员。具体操作,请参见创建成员或邀请阿里云账号加入资源目录。 已开启日志采集功能。具体操作,请参见开启日志采集功能。 自定义鉴权模式 已开启日志采集功能。具体操作,请参见开启日志采集…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLSGetIndex-云淘科技

    调用GetIndex接口查询指定Logstore的索引。 接口说明 请求语法中Host由Project名称和日志服务Endpoint构成,您需要在Host中指定Project。 已创建并获取AccessKey。更多信息,请参见访问密钥。 阿里云账号AccessKey拥有所有API的访问权限,风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维。R…

    阿里云日志服务SLS 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。