详情页标题前

阿里云日志服务SLSCSV格式-云淘科技

详情页1

日志服务将日志投递到OSS后,支持存储为不同的文件格式。本文介绍CSV格式。

参数配置

在配置投递规则时,如果选择存储格式为csv,对应的参数配置如下所示。

阿里云日志服务SLSCSV格式-云淘科技参数说明如下所示。更多信息,请参见CSV标准和postgresql CSV说明。

参数 说明
CSV字段 您可以在日志服务的原始日志页签中查看日志字段的Key,将您需要投递到OSS的字段名(Key)有序填入。 除了日志内容的Key和Value外,日志服务还提供保留字段__time__、__topic__、__source__,保留字段更多信息,请参见保留字段。


说明

  • 同一个Key在CSV字段中只能配置一次,不支持多次使用。
  • 如果您的日志中存在同名字段(例如都为request_time),则日志服务会将其中一个字段名显示为request_time_0,底层存储的字段名仍为request_time。因此您在投递时,只能使用原始字段名request_time。

    存在同名字段时,系统只随机投递其中一个字段的值。请尽量避免日志中使用同名字段。

分隔符 支持半角逗号(,)、竖线(|)、空格和制表符,用于分割不同字段。
转义符 当字段内出现分隔符时,需要使用转义符包裹该字段,避免读数据时造成字段错误分割。
无效字段内容 当CSV字段中指定的Key不存在时,投递此参数配置的内容。
投递字段名称 打开投递字段名称开关后,将字段名称写入到CSV文件。

OSS文件地址

投递到OSS后,OSS文件地址样例如下所示。

压缩类型 文件后缀 OSS文件地址举例 说明
无压缩 .csv oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.csv 未压缩的CSV文件可下载到本地,以文本方式打开查看。
Snappy .snappy.csv oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.snappy.csv Snappy压缩文件的打开方式,请参见打开Snappy压缩文件。

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/163257.html

(0)
上一篇 2023年12月10日 上午5:06
下一篇 2023年12月10日 上午5:07
详情页2

相关推荐

  • 阿里云日志服务SLSPHP SDK概述-云淘科技

    日志服务PHP SDK封装了日志服务的所有API接口。您可以通过日志服务PHP SDK方便地调用日志服务的所有API接口。 版本说明 更多信息,请参见Aliyun Log PHP Release。 示例代码 日志服务PHP SDK提供丰富的示例代码,方便您参考或直接使用。示例代码包括以下内容: GitHub源码 说明 loggerSample.php 写入日…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS解析函数-云淘科技

    本文介绍User-Agent解析函数的语法规则,包括参数解释、函数示例等。 函数列表 函数 说明 ua_parse_device 解析User-Agent中的设备信息。 ua_parse_os 解析User-Agent中的操作系统信息。 ua_parse_agent 解析User-Agent中的浏览器信息。 ua_parse_all 解析User-Agent…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS数据加工快速入门-云淘科技

    本文以网站访问日志为例,为您介绍完整的数据加工流程,帮助您快速熟悉数据加工功能及其操作。 前提条件 已创建名为web-project的Project。具体操作,请参见创建Project。 在Project(web-project)中创建名为website_log的源Logstore。具体操作,请参见创建Logstore。 已采集网站访问日志到源Logstor…

    2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云日志服务SLS应用场景-云淘科技

    日志服务的典型应用场景包括:数据采集与消费、数据清洗与流计算 (ETL/Stream Processing)、数据仓库对接(Data Warehouse)、日志实时查询与分析。 数据采集与消费 通过日志服务LogHub功能,可以大规模低成本接入各种实时日志数据(包括Metric、Event、BinLog、TextLog、Click等)。 方案优势: 使用便捷…

    2023年12月10日
  • 阿里云日志服务SLS从OSS获取IP2Location库进行IP地址数据富化-云淘科技

    日志服务数据加工功能支持从OSS获取IP2Location库数据,对日志中的IP地址进行富化,补充IP地址所属的国家、省、市等信息。 前提条件 已创建访问密钥(AccessKey),用于访问OSS Bucket。具体操作,请参见创建AccessKey。 推荐创建一个只读权限的AccessKey,用于从OSS获取文件;一个只写权限的AccessKey,用于上传…

    阿里云日志服务SLS 2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。