linux批量計算時間差腳本——awk

今天碰到一個時間差批量計算的問題，弄好後就寫下來，方便積累和分享。

部分數據（一共有40多W條，gmail.csv ）如上圖所示，已經作過二次處理和排版。

第i行前兩列時間記做A[i],後兩列記做B[i],須要計算平均延遲∑（A[i]-B[i]） /I，以及最大延遲Max（A[i]-B[i]）

平均值：

[root[root@test01 test]# awk -F '[ :-]' '{a=strftime("%s",mktime($1" "$2" "$3" "$4" "$5" "$6));b=strftime("%s",mktime($7" "$8" "$9" "$10" "$11" "$12));c=a-b;sum+=c}END{print sum/NR}' gmail.csv

最大值：

[root@test01 test]# awk -F '[ :-]' '{a=strftime("%s",mktime($1" "$2" "$3" "$4" "$5" "$6));b=strftime("%s",mktime($7" "$8" "$9" "$10" "$11" "$12));c=a-b;if(c>max)max=c}END{print max}' gmail.csv

知識點：awk自帶的時間函數

函數名	說明
mktime( YYYY MM DD HH MM SS[ DST])	生成時間格式
strftime([format [, timestamp]])	格式化時間輸出，將時間戳轉爲時間字符串 具體格式，見下表.
systime()	獲得時間戳,返回從1970年1月1日開始到當前時間(不計閏年)的整秒數

建立指定時間(mktime使用）

[chengmo@centos5 ~]$ awk 'BEGIN{tstamp=mktime("2001 01 01 12 12 12");print strftime("%c",tstamp);}'
2001年01月01日 星期一 12時12分12秒

[chengmo@centos5 ~]$ awk 'BEGIN{tstamp1=mktime("2001 01 01 12 12 12");tstamp2=mktime("2001 02 01 0 0 0");print tstamp2-tstamp1;}'
2634468

求2個時間段中間時間差,介紹了strftime使用方法

[chengmo@centos5 ~]$ awk 'BEGIN{tstamp1=mktime("2001 01 01 12 12 12");tstamp2=systime();print tstamp2-tstamp1;}'
308201392

strftime日期和時間格式說明符

格式	描述
%a	星期幾的縮寫(Sun)
%A	星期幾的完整寫法(Sunday)
%b	月名的縮寫(Oct)
%B	月名的完整寫法(October)
%c	本地日期和時間
%d	十進制日期
%D	日期 08/20/99
%e	日期，若是隻有一位會補上一個空格
%H	用十進制表示24小時格式的小時
%I	用十進制表示12小時格式的小時
%j	從1月1日起一年中的第幾天
%m	十進制表示的月份
%M	十進制表示的分鐘
%p	12小時表示法(AM/PM)
%S	十進制表示的秒
%U	十進制表示的一年中的第幾個星期(星期天做爲一個星期的開始)
%w	十進制表示的星期幾(星期天是0)
%W	十進制表示的一年中的第幾個星期(星期一做爲一個星期的開始)
%x	從新設置本地日期(08/20/99)
%X	從新設置本地時間(12：00：00)
%y	兩位數字表示的年(99)
%Y	當前月份
%Z	時區(PDT)
%%	百分號(%)

今天又遇到個日誌問題，寫下來方便之後回頭看和積累：

原始數據相似：G,2013-09-28 00:00:16+0800,2013-09-27 20:05:27+0800,XASHKNWABASDBKW

我只須要標紅的各個字段，代碼以下：

awk -F '[,+]' '{gsub(/-|:/," ",$2);gsub(/-|:/," ",$4);print $2,$4}'

意思是：以,或+分割數據字段，同時將第2個字段中的-或：都替換爲空格；第四個字段也作了相同的操做，並輸出。

輸出格式爲：2013 09 28 00 00 16 2013 09 27 20 05 27