详情页标题前

阿里云日志服务SLS数据脱敏-云淘科技

详情页1

您在使用Logtail采集日志时,可以使用processor_desensitize插件,将日志中的敏感数据替换为指定字符串或MD5。本文介绍processor_desensitize插件的参数说明和配置示例。

重要

  • 表单配置方式:采集文本日志和容器标准输出时可用。

  • JSON配置方式:采集文本日志时不可用。

功能入口

当您需要使用Logtail插件处理日志时,您可以在创建或修改Logtail配置时,添加插件配置。具体操作,请参见功能入口。

配置说明

重要

Logtail 1.3.0及以上版本支持processor_desensitize插件。

表单配置方式

配置处理器类型数据脱敏,相关参数说明如下表所示。

  • 参数说明

    参数

    说明

    原始字段

    日志字段名称。

    脱敏方式

    脱敏方式。可选值:

    • 字符串替换:将敏感内容替换为字符串。您可以通过替换字符串参数指定目标字符串。

    • md5:将敏感内容替换为对应的MD5值。

    敏感数据内容

    指定提取敏感内容的方式。可选值:

    • 字段全文:全部提取,即替换目标字段值中的所有内容。

    • 正则指定:使用正则表达式提取敏感内容。

    替换字符串

    用于替换敏感内容的字符串。

    设置脱敏方式字符串替换时,必填。

    敏感内容前缀正则

    匹配敏感内容前缀的正则表达式。

    设置敏感数据内容正则指定时,必填。

    敏感内容正则

    匹配敏感内容的正则表达式。

    设置敏感数据内容正则指定时,必填。

  • 配置示例

    将目标字段值中的所有内容替换为字符串。

    • 原始日志

      "password" : "123abcdefg"
    • Logtail插件处理配置阿里云日志服务SLS数据脱敏-云淘科技

    • 处理结果

      "password":"********"

JSON配置方式

配置typeprocessor_desensitizedetail说明如下表所示。

  • 参数说明

    参数

    类型

    是否必选

    说明

    SourceKey

    String

    日志字段名称。

    Method

    String

    脱敏方式。可选值:

    • const:将敏感内容替换为字符串。您可以通过ReplaceString参数指定目标字符串。

    • md5:将敏感内容替换为对应的MD5值。

    Match

    String

    指定提取敏感内容的方式。可选值:

    • full(默认值):全部提取,即替换目标字段值中的所有内容。

    • regex:使用正则表达式提取敏感内容。

    ReplaceString

    String

    用于替换敏感内容的字符串。

    设置Methodconst时,必填。

    RegexBegin

    String

    匹配敏感内容前缀的正则表达式。

    设置Matchregex时,必填。

    RegexContent

    String

    匹配敏感内容的正则表达式。

    设置Matchregex时,必填。

  • 配置示例

    • 示例1

      将目标字段值中的所有内容替换为字符串,即设置MethodconstMatchfull

      • 原始日志

        "password" : "123abcdefg"
      • Logtail插件处理配置

        {
          "type" : "processor_desensitize",
          "detail" : {
            "SourceKey" : "password",
            "Method" : "const",
            "Match" : "full",
            "ReplaceString": "********"
          }
        }
      • 处理结果

        "password":"********"
    • 示例2

      使用正则表达式指定目标字段值中的敏感内容,并替换为对应的MD5值,即设置Methodmd5Matchregex

      • 原始日志

        "content" : "[{'account':'1234567890','password':'abc123'}]"
      • Logtail插件处理配置

        {
           "type" : "processor_desensitize",
           "detail" : {
              "SourceKey" : "content",
              "Method" : "md5",
              "Match" : "regex",
              "RegexBegin": "'password':'",
              "RegexContent": "[^']*"
           }
        }
      • 处理结果

        "content":"[{'account':'1234567890','password':'e99a18c428cb38d5f260853678922e03'}]"

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/160642.html

(0)
上一篇 2023年12月10日 上午2:38
下一篇 2023年12月10日 上午2:40
详情页2

相关推荐

  • 阿里云大数据开发治理平台 DataWorksHive数据源-云淘科技

    Hive数据源为您提供读取和写入Hive双向通道的功能,本文为您介绍DataWorks的Hive数据同步的能力支持情况。 背景信息 Hive是基于Hadoop的数据仓库工具,用于解决海量结构化日志的数据统计。Hive可以将结构化的数据文件映射为一张表,并提供SQL查询功能。Hive的本质是一个SQL解析引擎,其底层通过MapReduce实现数据分析,使用HD…

  • 阿里云对象存储OSS日志分析-云淘科技

    日志分析功能可用于分析目标存储空间(Bucket)的存储日志,帮助您快速完成OSS的操作审计、访问统计、异常事件回溯和问题定位等工作。 前提条件 日志分析已存在关联项目。 目前不允许通过创建新的关联项目来分析目标Bucket的存储日志。若日志分析未存在关联项目,建议您使用实时日志查询功能,可免费查询和分析OSS最近7天的访问日志。更多信息,请参见实时日志查询…

    阿里云对象存储 2023年12月10日
  • 阿里云容器服务ACK管理Nginx Ingress Controller组件-云淘科技

    容器服务ACK或ACK Serverless集群提供基于Nginx的Nginx Ingress Controller组件。本文介绍如何在ACK或ACK Serverless集群中安装、升级、配置和卸载Nginx Ingress Controller组件。 安装Nginx Ingress Controller组件 若未创建集群,可按照方式一安装Nginx In…

    2023年12月10日
  • 阿里云云原生大数据计算服务 MaxComputeREVERSE-云淘科技

    返回倒序字符串或数组。 命令格式 string|array reverse(string|array ) 参数说明 value:必填。STRING或ARRAY类型。如果输入为BIGINT、DOUBLE、DECIMAL或DATETIME等类型,则会隐式转换为STRING类型后参与运算。 返回值说明 返回STRING或ARRAY类型。返回规则如下: value为…

  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云对象存储OSS从HDFS迁移数据到OSS-HDFS-云淘科技

    本文介绍如何使用阿里云Jindo DistCp从HDFS迁移数据到OSS-HDFS。 前提条件 JDK 1.8及以上版本。 如果您使用的是自建ECS集群,需要具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。 如果您使用的是阿里云E-MapReduce,需使用EMR-5.6.0及后续版本或EMR-3.40.0及后续版本。 …

    阿里云对象存储 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。