帮助文档 Logo
平台使用
阿里云
百度云
移动云
智算服务
教育生态
登录 →
帮助文档 Logo
平台使用 阿里云 百度云 移动云 智算服务 教育生态
登录
  1. 首页
  2. 阿里云
  3. 日志服务
  4. 操作指南
  5. 数据采集
  6. Logtail采集
  7. Logtail进阶配置详解
  8. 处理插件
  9. 扩展插件:数据脱敏

扩展插件:数据脱敏

  • 处理插件
  • 发布于 2025-04-22
  • 0 次阅读
文档编辑
文档编辑

您在使用Logtail采集日志时,可以使用processor_desensitize插件,将日志中的敏感数据替换为指定字符串或MD5值。本文介绍processor_desensitize插件的参数说明和配置示例。

重要
  • 表单配置方式:采集文本日志和容器标准输出时可用。

  • JSON配置方式:采集文本日志时不可用。

功能入口

当您需要使用Logtail插件处理日志时,您可以在创建或修改Logtail配置时,添加插件配置。具体操作,请参见功能入口。

配置说明

重要

Logtail 1.3.0及以上版本支持processor_desensitize插件。

表单配置方式

配置处理器类型为数据脱敏,相关参数说明如下表所示。

  • 参数说明

    参数

    说明

    原始字段

    日志字段名称。

    脱敏方式

    脱敏方式。可选值:

    • 字符串替换:将敏感内容替换为字符串。您可以通过替换字符串参数指定目标字符串。

    • md5:将敏感内容替换为对应的MD5值。

    敏感数据内容

    指定提取敏感内容的方式。可选值:

    • 字段全文:全部提取,即替换目标字段值中的所有内容。

    • 正则指定:使用正则表达式提取敏感内容。

    替换字符串

    用于替换敏感内容的字符串。

    设置脱敏方式为字符串替换时,必填。

    敏感内容前缀正则

    匹配敏感内容前缀的正则表达式。

    设置敏感数据内容为正则指定时,必填。

    敏感内容正则

    匹配敏感内容的正则表达式。

    设置敏感数据内容为正则指定时,必填。

  • 配置示例

    将目标字段值中的所有内容替换为字符串。

    • 原始日志

      "password" : "123abcdefg"
    • Logtail插件处理配置image

    • 处理结果

      "password":"********"

JSON配置方式

配置type为processor_desensitize,detail说明如下表所示。

  • 参数说明

    参数

    类型

    是否必选

    说明

    SourceKey

    String

    是

    日志字段名称。

    Method

    String

    是

    脱敏方式。可选值:

    • const:将敏感内容替换为字符串。您可以通过ReplaceString参数指定目标字符串。

    • md5:将敏感内容替换为对应的MD5值。

    Match

    String

    否

    指定提取敏感内容的方式。可选值:

    • full(默认值):全部提取,即替换目标字段值中的所有内容。

    • regex:使用正则表达式提取敏感内容。

    ReplaceString

    String

    否

    用于替换敏感内容的字符串。

    设置Method为const时,必填。

    RegexBegin

    String

    否

    匹配敏感内容前缀的正则表达式。

    设置Match为regex时,必填。

    RegexContent

    String

    否

    匹配敏感内容的正则表达式。

    设置Match为regex时,必填。

  • 配置示例

    • 示例1

      将目标字段值中的所有内容替换为字符串,即设置Method为const,Match为full。

      • 原始日志

        "password" : "123abcdefg"
      • Logtail插件处理配置

        {
          "type" : "processor_desensitize",
          "detail" : {
            "SourceKey" : "password",
            "Method" : "const",
            "Match" : "full",
            "ReplaceString": "********"
          }
        }
      • 处理结果

        "password":"********"
    • 示例2

      使用正则表达式指定目标字段值中的敏感内容,并替换为对应的MD5值,即设置Method为md5,Match为regex。

      • 原始日志

        "content" : "[{'account':'1234567890','password':'abc123'}]"
      • Logtail插件处理配置

        {
           "type" : "processor_desensitize",
           "detail" : {
              "SourceKey" : "content",
              "Method" : "md5",
              "Match" : "regex",
              "RegexBegin": "'password':'",
              "RegexContent": "[^']*"
           }
        }
      • 处理结果

        "content":"[{'account':'1234567890','password':'e99a18c428cb38d5f260853678922e03'}]"

相关文章

原生插件:正则解析 2025-04-22 11:04

Logtail正则解析插件支持通过正则表达式提取日志字段,并将日志解析为键值对形式。 功能入口 当您需要使用Logtail插件处理日志时,您可以在创建或修改Logtail配置时,添加插件。具体操作,请参见处理插件概述。

原生插件:JSON解析 2025-04-22 11:04

Logtail JSON解析插件支持将Object类型的JSON日志结构化,解析为键值对形式。 使用限制 JSON日志构建于两种结构,包括Object类型(键值对的集合)和Array类型(值的有序列表)。 Logtail JSON解析插件是原生插件,支持解析Object类型的JSON日志,提取为键值

原生插件:分隔符模式解析 2025-04-22 11:04

Logtail分隔符模式解析插件支持通过分隔符将日志内容结构化,解析为多个键值对形式。 功能入口 当您需要使用Logtail插件处理日志时,您可以在创建或修改Logtail配置时,添加插件。具体操作,请参见处理插件概述。

原生插件:Nginx模式解析 2025-04-22 11:04

Logtail Nginx模式插件支持根据log_format中的定义将日志内容结构化,解析为多个键值对形式。 Nginx日志简介 Nginx服务器会根据log_format和access_log配置输出对应的Nginx访问日志,log_format和access_log的默认值如下所示。

原生插件:Apache模式解析 2025-04-22 11:04

Logtail Apache模式解析插件支持根据Apache日志配置文件中的定义将日志内容结构化,解析为多个键值对形式。 Apache日志简介 Apache服务器会根据Apache日志配置文件中指定的日志打印格式

原生插件:IIS模式解析 2025-04-22 11:04

Logtail IIS模式插件支持根据IIS日志格式定义将日志内容结构化,解析为多个键值对形式。 IIS日志简介 Windows服务器会根据您所选择的日志格式(IIS、NCSA和W3C)生成IIS日志。

目录
Copyright © 2025 your company All Rights Reserved. Powered by 博智数字服务平台.
闽ICP备08105208号-1