ab壓力測試工具-批量壓測腳本


ab(Apache benchmark)是一款常用的壓力測試工具。簡單易用,ab的命令行一次只能支持一次測試。如果想要批量執行不同的測試方式,並自動對指標進行分析,那么單靠手工一條一條命令運行ab,估計會瘋的。so,那么問題來了,批量模式怎么實現。

一、腳本說明                                                                                             
本腳本支持ab大多常用參數,如果你需要更多參數,可以通過修改本腳本,加入你想要的即可。本腳本的特色:
1,批量測試。注意,並不是簡單的批量測試,你可以定測測試輪數,間隔時間。
2,階梯並發增長定制測試,如並發從100到1000,每輪測5次等。
3,支持ab的post file模式,你只要在參數-P | --postfile中帶上你的數據文件即可。
4,壓測完指標分析顯示,本shell可以將ab中常用的指示即時分析出來。
5,ab-test-tools.sh 腳本說明:
命令格式:
-N|--count 總請求數,缺省 : 5w
-C|--clients 並發數, 缺省 : 100
-R|--rounds 測試次數, 缺省 : 10 次
-S|-sleeptime 間隔時間, 缺省 : 10 秒
-I|--min 最小並發數, 缺省: 0
-X|--max 最大並發數,缺省: 0
-J|--step 次遞增並發數
-T|--runtime 總體運行時間,設置此項時最大請求數為5w
-P|--postfile post數據文件路徑
-U|--url 測試地址

二、腳本代碼                                                                                              

#!/bin/bash
echo '*==========================================================*'
echo '|  本腳本工具基於ab(Apache benchmark),請先安裝好ab, awk   |'
echo '|  注意:                                                  |'    
echo '|     shell默認最大客戶端數為1024                          |'
echo '|     如超出此限制,請使用管理員執行以下命令:             |'
echo '|     ulimit -n 655350                                 |'
echo '*==========================================================*'

function usage() {
    echo '  命令格式:'
    echo '  ab-test-tools.sh'
    echo '      -N|--count 總請求數,缺省 : 5w'
    echo '      -C|--clients 並發數, 缺省 : 100'
    echo '      -R|--rounds 測試次數, 缺省 : 10 次'
    echo '      -S|-sleeptime 間隔時間, 缺省 : 10 秒'
    echo '      -I|--min 最小並發數, 缺省: 0'
    echo '      -X|--max 最大並發數,缺省: 0'
    echo '      -J|--step 次遞增並發數'
    echo '      -T|--runtime 總體運行時間,設置此項時最大請求數為5w' 
    echo '      -P|--postfile post數據文件路徑'
    echo '      -U|--url 測試地址'
    echo ''
    echo '  測試輸出結果*.out文件'

    exit;
}


# 定義默認參數量
# 總請求數
count=50000
# 並發數
clients=100O
# 測試輪數
rounds=10
# 間隔時間
sleeptime=10
# 最小並發數
min=0
# 最大數發數
max=0
# 並發遞增數
step=0
# 測試地址
url=''
# 測試限制時間
runtime=0
# 傳輸數據
postfile=''


ARGS=`getopt -a -o N:C:R:S:I:X:J:U:T:P:h -l count:,client:,round:,sleeptime:,min:,max:,step:,runtime:,postfile:,help -- "$@"`
[ $? -ne 0 ] && usage
eval set -- "${ARGS}" 

while true 
do
    case "$1" in
    -N|--count)
        count="$2"
        shift
        ;;
        
    -C|--client)
        clients="$2"
        shift
        ;;

    -R|--round)
        rounds="$2"
        shift
        ;;

    -S|--sleeptime)
        sleeptime="$2"
        shift
        ;;

    -I|--min)
        min="$2"
        shift
        ;;

    -X|--max)
        max="$2"
        shift
        ;;

    -J|--step)
        step="$2"
        shift
        ;;

    -U|--url)
        url="$2"
        shift
        ;;

    -T|--runtime)
        runtime="$2"
        shift
        ;;

    -P|--postfile)
        postfile="$2"
        shift
        ;;

    -h|--help)
        usage
        ;;

    --)
        shift
        break
        ;;
    esac
shift
done

# 參數檢查
if [ x$url = x ]
then
    echo '請輸入測試url,非文件/以為結束'
    exit
fi

flag=0
if [ $min != 0 -a $max != 0 ]
then 
    if [ $max -le $min ] 
    then
        echo '最大並發數不能小於最小並發數'
        exit
    fi

    if [ $step -le 0 ]
    then
        echo '並發遞增步長不能<=0'
        exit
    fi

    if [ $min -lt $max ]
    then
        flag=1
    fi
fi


# 生成ab命令串
cmd="ab -k -r"

# 數據文件
if [ x$postf != x ]
then
    cmd="$cmd -p $postf"
fi

if [ x$tl != x -a $tl != 0 ]
then 
    max=50000;
    cmd="$cmd -t$tl"
fi
cmd="$cmd -n$count"

echo '-----------------------------';
echo '測試參數';
echo "  總請求數:$count";
echo "  並發數:$clients";
echo "  重復次數:$rounds 次";
echo "  間隔時間:$sleeptime 秒";
echo "  測試地址:$url";

if [ $min != 0 ];then
echo "  最小並發數:$min";
fi

if [ $max != 0 ];then
echo "  最大並發數:$max";
fi

if [ $step != 0 ];then
echo " 每輪並發遞增:$step" 
fi


# 指定輸出文件名
datestr=`date +%Y%m%d%H%I%S`
outfile="$datestr.out";

# runtest $cmd $outfile $rounds $sleeptime
function runtest() {
    # 輸出命令
    echo "";
    echo '  當前執行命令:'
    echo "  $cmd"
    echo '------------------------------'

    # 開始執行測試
    cnt=1
    while [ $cnt -le $rounds ];
    do
        echo "第 $cnt 輪 開始"
        $cmd >> $outfile 
        echo "\n\n" >> $outfile
        echo "第 $cnt 輪 結束"
        echo '----------------------------'

        cnt=$(($cnt+1))

        if [ $cnt -le $rounds ]; then
            echo "等待 $sleeptime 秒"
            sleep $sleeptime
        fi 
    done
}


temp=$cmd;
if [ $flag != 0 ]; then
    cur=$min
    over=0
    while [ $cur -le $max ]
    do
        cmd="$temp -c$cur $url"
        runtest $cmd $outfile $rounds $sleeptime 

        cur=$(($cur+$step))
        if [ $cur -ge $max -a $over != 1 ]; then
           cur=$max 
           over=1
        fi
    done
else 
    cmd="$cmd -c$clients $url"
    runtest $cmd $outfile $rounds $sleeptime 
fi


# 分析結果
if [ -f $outfile ]; then
echo '本次測試結果如下:'
echo '+------+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'
echo '| 序號 | 總請求數 |  並發數  |   失敗請求數  |   每秒事務數  |  平均事務(ms) | 並發平均事務數(ms) |   總體傳輸字節數  |'
echo '+------+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'

comp=(`awk '/Complete requests/{print $NF}' $outfile`) 
concur=(`awk '/Concurrency Level:/{print $NF}' $outfile`)
fail=(`awk '/Failed requests/{print $NF}' $outfile`)
qps=(`awk '/Requests per second/{print $4F}' $outfile`)
tpr=(`awk '/^Time per request:(.*)\(mean\)$/{print $4F}' $outfile`)
tpr_c=(`awk '/Time per request(.*)(mean, across all concurrent requests)/{print $4F}' $outfile`)
trate=(`awk '/Transfer rate/{print $3F}' $outfile`)

for ((i=0; i<${#comp[@]}; i++))
do
    echo -n "|"
    printf '%6s' $(($i+1)) 
    printf "|"

    printf '%10s' ${comp[i]}
    printf '|'
    
    printf '%10s' ${concur[i]}
    printf '|'

    printf '%15s' ${fail[i]}
    printf '|'

    printf '%15s' ${qps[i]}
    printf '|'

    printf '%15s' ${tpr[i]}
    printf '|'

    printf '%20s' ${tpr_c[i]}
    printf '|'

    printf '%20s' ${trate[i]}
    printf '|'

    echo '';
    echo '+-----+----------+----------+---------------+---------------+---------------+--------------------+--------------------+'
done
echo ''
fi

三、測試示例                                                                                             

sh ab-test-tool.sh -N 100000 -C 100 -R 2 -I 100 -X 500 -J 80 -S 5 -U 'http://...'

四、注意事項                                                                                                                  

1,每次測試結果以“yymmddhhiiss.out"存放在腳本所在目錄,因此請保持腳本目錄可寫。

2,ab的所有輸出結果均可在.out中查到。測試結果只是展示部份指標,需要詳細的可以在.out文件中查看

3,查看使用幫助可使用-h/–help。

4,linux終端默認1024限制,如需大於此數,請使用管理員執行:"ulimit -n 655350"

五、ab信息說明                                                                                        

Server Software:        web服務器軟件及版本
Server Hostname:        表示請求的URL中的主機部分名稱
Server Port:            被測試的Web服務器的監聽端口
 
Document Path:          請求的頁面路徑
Document Length:        頁面大小
 
Concurrency Level:      並發數
Time taken for tests:   測試總共花費的時間
Complete requests:      完成的請求數
Failed requests:        失敗的請求數,這里的失敗是指請求的連接服務器、發送數據、接收數據等環節發生異常,以及無響應后超時的情況。對於超時時間的設置可以用ab的-t參數。如果接受到的http響應數據的頭信息中含有2xx以外的狀態碼,則會在測試結果顯示另一個名為“Non-2xx responses”的統計項,用於統計這部分請求數,這些請求並不算是失敗的請求。
Write errors:           寫入錯誤
Total transferred:      總共傳輸字節數,包含http的頭信息等。使用ab的-v參數即可查看詳細的http頭信息。
HTML transferred:       html字節數,實際的頁面傳遞字節數。也就是減去了Total transferred中http響應數據中頭信息的長度。
Requests per second:    每秒處理的請求數,服務器的吞吐量,等於:Complete requests / Time taken for tests
Time per request:       平均數,用戶平均請求等待時間
Time per request:       服務器平均處理時間
Transfer rate:          平均傳輸速率(每秒收到的速率)。可以很好的說明服務器在處理能力達到限制時,其出口帶寬的需求量。
 
Connection Times (ms) 壓力測試時的連接處理時間。
              min  mean[+/-sd] median   max
Connect:        0   67 398.4      9    3009 
Processing:    49 2904 2327.2   2755   12115
Waiting:       48 2539 2075.1   2418   12110
Total:         53 2972 2385.3   2789   12119

Failed requests原因分析

Failed requests: 2303
(Connect: 0, Length: 2303, Exceptions: 0)
只要出現Failed requests就會多一行數據來統計失敗的原因,分別有Connect、Length、Exceptions。
Connect 無法送出要求、目標主機連接失敗、要求的過程中被中斷。
Length 響應的內容長度不一致 ( 以 Content-Length 頭值為判斷依據 )。
Exception 發生無法預期的錯誤。

 

參考:文章中有一部分內容來源網絡,以后補充

由於本人經驗有限,文章中難免會有錯誤,請瀏覽文章的您指正或有不同的觀點共同探討!


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM