ab壓力測試工具-批量壓測腳本

ab(Apache benchmark)是一款經常使用的壓力測試工具。簡單易用，ab的命令行一次只能支持一次測試。若是想要批量執行不一樣的測試方式，並自動對指標進行分析，那麼單靠手工一條一條命令運行ab，估計會瘋的。so，那麼問題來了，批量模式怎麼實現。

1、腳本說明                                                                                             

本腳本支持ab大多經常使用參數，若是你須要更多參數，能夠經過修改本腳本，加入你想要的便可。本腳本的特點：

１，批量測試。注意，並非簡單的批量測試，你能夠定測測試輪數，間隔時間。

２，階梯併發增加定製測試，如併發從１００到１０００，每輪測５次等。

３，支持ab的post file模式，你只要在參數-P | --postfile中帶上你的數據文件便可。

４，壓測完指標分析顯示，本shell能夠將ab中經常使用的指示即時分析出來。

５，ab-test-tools.sh 腳本說明：

命令格式：

-N|--count 總請求數，缺省 : 5w

-C|--clients 併發數, 缺省 : 100

-R|--rounds 測試次數, 缺省 : 10 次

-S|-sleeptime 間隔時間, 缺省 : 10 秒

-I|--min 最小併發數,　缺省: 0

-X|--max 最大併發數，缺省: 0

-J|--step 次遞增併發數

-T|--runtime 整體運行時間,設置此項時最大請求數爲5w

-P|--postfile post數據文件路徑

-U|--url 測試地址

2、腳本代碼                                                                                              

#!/bin/bash
echo '*==========================================================*'
echo '|  本腳本工具基於ab(Apache benchmark)，請先安裝好ab, awk   |'
echo '|  注意：                                                  |'    
echo '|     shell默認最大客戶端數爲1024                          |'
echo '|     如超出此限制，請使用管理員執行如下命令：             |'
echo '|     ulimit -n 655350                                 |'
echo '*==========================================================*'

function usage() {
    echo '  命令格式：'
    echo '  ab-test-tools.sh'
    echo '      -N|--count 總請求數，缺省 : 5w'
    echo '      -C|--clients 併發數, 缺省 : 100'
    echo '      -R|--rounds 測試次數, 缺省 : 10 次'
    echo '      -S|-sleeptime 間隔時間, 缺省 : 10 秒'
    echo '      -I|--min 最小併發數,　缺省: 0'
    echo '      -X|--max 最大併發數，缺省: 0'
    echo '      -J|--step 次遞增併發數'
    echo '      -T|--runtime 整體運行時間,設置此項時最大請求數爲5w' 
    echo '      -P|--postfile post數據文件路徑'
    echo '      -U|--url 測試地址'
    echo ''
    echo '  測試輸出結果*.out文件'

    exit;
}


# 定義默認參數量
# 總請求數
count=50000
# 併發數
clients=100O
# 測試輪數
rounds=10
# 間隔時間
sleeptime=10
# 最小併發數
min=0
# 最大數發數
max=0
# 併發遞增數
step=0
# 測試地址
url=''
# 測試限制時間
runtime=0
# 傳輸數據
postfile=''


ARGS=`getopt -a -o N:C:R:S:I:X:J:U:T:P:h -l count:,client:,round:,sleeptime:,min:,max:,step:,runtime:,postfile:,help -- "$@"`
[ $? -ne 0 ] && usage
eval set -- "${ARGS}" 

while true 
do
    case "$1" in
    -N|--count)
        count="$2"
        shift
        ;;
        
    -C|--client)
        clients="$2"
        shift
        ;;

    -R|--round)
        rounds="$2"
        shift
        ;;

    -S|--sleeptime)
        sleeptime="$2"
        shift
        ;;

    -I|--min)
        min="$2"
        shift
        ;;

    -X|--max)
        max="$2"
        shift
        ;;

    -J|--step)
        step="$2"
        shift
        ;;

    -U|--url)
        url="$2"
        shift
        ;;

    -T|--runtime)
        runtime="$2"
        shift
        ;;

    -P|--postfile)
        postfile="$2"
        shift
        ;;

    -h|--help)
        usage
        ;;

    --)
        shift
        break
        ;;
    esac
shift
done

# 參數檢查
if [ x$url = x ]
then
    echo '請輸入測試url，非文件/覺得結束'
    exit
fi

flag=0
if [ $min != 0 -a $max != 0 ]
then 
    if [ $max -le $min ] 
    then
        echo '最大併發數不能小於最小併發數'
        exit
    fi

    if [ $step -le 0 ]
    then
        echo '併發遞增步長不能<=0'
        exit
    fi

    if [ $min -lt $max ]
    then
        flag=1
    fi
fi


# 生成ab命令串
cmd="ab -k -r"

#　數據文件
if [ x$postf != x ]
then
    cmd="$cmd -p $postf"
fi

if [ x$tl != x -a $tl != 0 ]
then 
    max=50000;
    cmd="$cmd -t$tl"
fi
cmd="$cmd -n$count"

echo '-----------------------------';
echo '測試參數';
echo "  總請求數：$count";
echo "  併發數：$clients";
echo "  重複次數：$rounds 次";
echo "  間隔時間：$sleeptime 秒";
echo "  測試地址：$url";

if [ $min != 0 ];then
echo "  最小併發數：$min";
fi

if [ $max != 0 ];then
echo "  最大併發數：$max";
fi

if [ $step != 0 ];then
echo " 每輪併發遞增：$step" 
fi


# 指定輸出文件名
datestr=`date +%Y%m%d%H%I%S`
outfile="$datestr.out";

# runtest $cmd $outfile $rounds $sleeptime
function runtest() {
    # 輸出命令
    echo "";
    echo '  當前執行命令：'
    echo "  $cmd"
    echo '------------------------------'

    # 開始執行測試
    cnt=1
    while [ $cnt -le $rounds ];
    do
        echo "第 $cnt 輪 開始"
        $cmd >> $outfile 
        echo "\n\n" >> $outfile
        echo "第 $cnt 輪 結束"
        echo '----------------------------'

        cnt=$(($cnt+1))

        if [ $cnt -le $rounds ]; then
            echo "等待 $sleeptime 秒"
            sleep $sleeptime
        fi 
    done
}


temp=$cmd;
if [ $flag != 0 ]; then
    cur=$min
    over=0
    while [ $cur -le $max ]
    do
        cmd="$temp -c$cur $url"
        runtest $cmd $outfile $rounds $sleeptime 

        cur=$(($cur+$step))
        if [ $cur -ge $max -a $over != 1 ]; then
           cur=$max 
           over=1
        fi
    done
else 
    cmd="$cmd -c$clients $url"
    runtest $cmd $outfile $rounds $sleeptime 
fi


# 分析結果
if [ -f $outfile ]; then
echo '本次測試結果以下：'
echo '+------+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'
echo '| 序號 | 總請求數 |  併發數  |   失敗請求數  |   每秒事務數  |  平均事務(ms) | 併發平均事務數(ms) |　  整體傳輸字節數  |'
echo '+------+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'

comp=(`awk '/Complete requests/{print $NF}' $outfile`) 
concur=(`awk '/Concurrency Level:/{print $NF}' $outfile`)
fail=(`awk '/Failed requests/{print $NF}' $outfile`)
qps=(`awk '/Requests per second/{print $4F}' $outfile`)
tpr=(`awk '/^Time per request:(.*)\(mean\)$/{print $4F}' $outfile`)
tpr_c=(`awk '/Time per request(.*)(mean, across all concurrent requests)/{print $4F}' $outfile`)
trate=(`awk '/Transfer rate/{print $3F}' $outfile`)

for ((i=0; i<${#comp[@]}; i++))
do
    echo -n "|"
    printf '%6s' $(($i+1)) 
    printf "|"

    printf '%10s' ${comp[i]}
    printf '|'
    
    printf '%10s' ${concur[i]}
    printf '|'

    printf '%15s' ${fail[i]}
    printf '|'

    printf '%15s' ${qps[i]}
    printf '|'

    printf '%15s' ${tpr[i]}
    printf '|'

    printf '%20s' ${tpr_c[i]}
    printf '|'

    printf '%20s' ${trate[i]}
    printf '|'

    echo '';
    echo '+-----+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'
done
echo ''
fi

3、測試示例                                                                                             

sh ab-test-tool.sh -N 100000 -C 100 -R 2 -I 100 -X 500 -J 80 -S 5 -U 'http://...'

4、注意事項                                                                                                                  

１，每次測試結果以「yymmddhhiiss.out"存放在腳本所在目錄，所以請保持腳本目錄可寫。

２，ab的全部輸出結果都可在.out中查到。測試結果只是展現部份指標，須要詳細的能夠在.out文件中查看

３，查看使用幫助可以使用-h/–help。

４，linux終端默認1024限制，如需大於此數，請使用管理員執行："ulimit -n 655350"

5、ab信息說明                                                                                        

Server Software:        web服務器軟件及版本
Server Hostname:        表示請求的URL中的主機部分名稱
Server Port:            被測試的Web服務器的監聽端口
 
Document Path:          請求的頁面路徑
Document Length:        頁面大小
 
Concurrency Level:      併發數
Time taken for tests:   測試總共花費的時間
Complete requests:      完成的請求數
Failed requests:        失敗的請求數，這裏的失敗是指請求的鏈接服務器、發送數據、接收數據等環節發生異常，以及無響應後超時的狀況。對於超時時間的設置能夠用ab的-t參數。若是接受到的http響應數據的頭信息中含有2xx之外的狀態碼，則會在測試結果顯示另外一個名爲「Non-2xx responses」的統計項，用於統計這部分請求數，這些請求並不算是失敗的請求。
Write errors:           寫入錯誤
Total transferred:      總共傳輸字節數，包含http的頭信息等。使用ab的-v參數便可查看詳細的http頭信息。
HTML transferred:       html字節數，實際的頁面傳遞字節數。也就是減去了Total transferred中http響應數據中頭信息的長度。
Requests per second:    每秒處理的請求數，服務器的吞吐量，等於：Complete requests / Time taken for tests
Time per request:       平均數，用戶平均請求等待時間
Time per request:       服務器平均處理時間
Transfer rate:          平均傳輸速率（每秒收到的速率）。能夠很好的說明服務器在處理能力達到限制時，其出口帶寬的需求量。
 
Connection Times (ms) 壓力測試時的鏈接處理時間。
              min  mean[+/-sd] median   max
Connect:        0   67 398.4      9    3009 
Processing:    49 2904 2327.2   2755   12115
Waiting:       48 2539 2075.1   2418   12110
Total:         53 2972 2385.3   2789   12119

Failed requests緣由分析

Failed requests: 2303
(Connect: 0, Length: 2303, Exceptions: 0)
只要出現Failed requests就會多一行數據來統計失敗的緣由，分別有Connect、Length、Exceptions。
Connect 沒法送出要求、目標主機鏈接失敗、要求的過程當中被中斷。
Length 響應的內容長度不一致 ( 以 Content-Length 頭值爲判斷依據 )。
Exception 發生沒法預期的錯誤。

 

參考：文章中有一部份內容來源網絡，之後補充

因爲本人經驗有限，文章中不免會有錯誤，請瀏覽文章的您指正或有不一樣的觀點共同探討！