详情页标题前

阿里云日志服务SLS时间字段转换示例-云淘科技

详情页1

在查询分析中,往往需要对日志中的时间字段进行处理,例如将时间戳转换成指定格式等,本文档介绍时间字段的常用转换示例。

日志中可能有多个记录时间的字段,例如:

  • __time__:用API/SDK写入日志数据时指定的日志时间,该字段可用于日志投递、查询、分析。
  • 日志中原有的时间字段:日志在生成时,用于记录日志事件发生时间的字段,是原始日志的字段。

时间字段的格式可能不统一、或不便于查看和阅读,可以在查询分析中将其转换为指定格式。例如:

  1. 把__time__转化成时间戳
  2. 把__time__以固定格式打印
  3. 把timestamp转化成指定格式

把__time__转化成时间戳

把字段__time__转化成时间戳格式,建议使用from_unixtime函数。更多信息,请参见from_unixtime函数。

* | select from_unixtime(__time__) 

把__time__以固定格式打印

把字段__time__年-月-日 时:分:秒的形式打印下来,建议使用date_format函数。更多信息,请参见date_format函数。

* | select date_format(__time__, '%Y-%m-%d %H:%i:%S') 

把日志中的时间转换成指定格式

把日志中的时间字段转化成指定格式(年-月-日 时:分:秒),只取年-月-日部分,并做Group by处理,建议使用date_format函数。更多信息,请参见date_format函数。

  • 日志样例:
    __topic__:  
    body_byte_sent:  307
    hostname:  example.com
    http_user_agent:  Mozilla/5.0 (iPhone; CPU iPhone OS 10_3_3 like Mac OS X) AppleWebKit/603.3.8 (KHTML, like Gecko) Mobile/14G60 QQ/192.0.2.1 V1_IPH_SQ_7.1.8_1_APP_A Pixel/750 Core/UIWebView NetType/WIFI QBWebViewType/1
    method:  GET
    referer:  www.example.com
    remote_addr:  192.0.2.0
    request_length:  111
    request_time:  2.705
    status:  200
    upstream_response_time:  0.225582883754
    url:  /?k0=v9&
    time:2017-05-17 09:45:00
  • SQL语句样例:
    * | select date_format (date_parse(time,'%Y-%m-%d %H:%i:%S'), '%Y-%m-%d') as day, count(1) as uv group by day order by day asc

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家

阿里云企业补贴进行中: 马上申请

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心。

购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

转转请注明出处:https://www.yunxiaoer.com/165798.html

(0)
上一篇 2023年12月10日
下一篇 2023年12月10日
详情页2

相关推荐

  • 阿里云日志服务SLS基于访问日志的异常检测和分析实战-云淘科技

    本视频介绍访问日志的异常检测和分析实战。 内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家阿里云企业补贴进行中: 马上申请腾讯云限时活动1折起,即将结束: 马上收藏同尘科技为腾讯云授权服务中心。 购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS复杂JSON数据加工-云淘科技

    本文档主要为您介绍如何使用日志服务数据加工功能对复杂的JSON数据进行加工。 多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入,通常包含一个基础信息以及多个子健为数组的数据形式。例如一个服务器每隔1分钟写入一条日志,包含当前信息状态,以及相关服务器和客户端节点的统计状态信息。 日志样例 __source__: 192.0.…

    阿里云日志服务SLS 2023年12月10日
  • 阿里云日志服务SLS任务监控大盘异常处理-云淘科技

    本文通过具体案例介绍如何在CloudLens for SLS中解决Project任务监控大盘异常问题。 重要 阿里云账号具有所有资源的所有权,可以直接操作CloudLens for SLS。但是使用RAM用户操作时,需确保RAM用户具有CloudLens for SLS的只读权限或读写权限。授权操作,请参见授予RAM用户操作CloudLens for SLS…

    2023年12月10日
  • 阿里云日志服务SLS管理日志投递任务-云淘科技

    创建AnalyticDB MySQL投递任务后,您可以在日志服务控制台上管理数据投递任务,包括查看任务详情、修改投递配置以及启动、停止、删除任务等操作。 查看任务详情 登录日志服务控制台。 在Project列表区域,单击目标Project。 在日志存储 > 日志库页签中,依次展开目标Logstore下的数据处理 > 导出 > Analyti…

    阿里云日志服务SLS 2023年12月10日
  • 信息流广告,信息流部分建议宽度830px,只针对默认列表样式,顺序随机
  • 阿里云日志服务SLS分析-销售系统日志-云淘科技

    成交账单是电商公司的核心数据,是一系列营销和推广活动最终的转化成果。这些数据包含了很多有价值的信息,从这些数据出发,可以描绘出用户画像,为下一步的营销提供方向。账单数据还能提供货物的受欢迎程度,为下一步备货提供准备。 账单信息以日志的形式保存在阿里云日志服务上,日志服务能够提供快速的查询和SQL统计,在秒级别计算上亿条日志。本文将以几个例子来讲解如何挖掘有用…

    2023年12月10日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信
本站为广大会员提供阿里云、腾讯云、华为云、百度云等一线大厂的购买,续费优惠,保证底价,买贵退差。