YCSB的使用測驗MySQL協議類資料庫

一、工具介紹

YCSB 于 2010 年開源，YCSB是雅虎開源的NoSQL測驗工具，通常用來對noSQL資料庫進行性能，注意此工具僅支持varchar和text型別，且列的長度可以增加，默認是10列，可以根據自己的需要增加列長，運行一個壓力測驗需要 6 步：

• 配置需要測驗的資料庫
• 選擇合適的資料庫介面層
• 選擇合適的 workload
• 選擇合適的運行時引數
• 裝載資料（loading phase）   （ycsb主要就是這2步驟）
• 運行測驗（transaction phase）

二、工具使用

1、下載

curl -O --location https://github.com/brianfrankcooper/YCSB/releases/download/0.17.0/ycsb-0.17.0.tar.gz
tar xfvz ycsb-0.17.0.tar.gz
cd ycsb-0.17.0

2、修改配置

（1）進入ycsb-0.17.0/jdbc-binding/conf 修改db.properties

db.driver=com.mysql.jdbc.Driver
# jdbc.fetchsize=20
db.url=jdbc:mysql://192.168.30.128:33306/ycsb?useSSL=false&autoReconnect=true&characterEncoding=utf8
db.user=root
db.passwd=123456

（2）進入ycsb-0.17.0/jdbc-binding/lib，下載mysql-connector-java-5.1.46.jar并放入lib目錄下

3、創建測驗的庫與表

create database ycsb;
use ycsb;

#必須是這個表結構，負責插入資料將報錯，可以將text改為varchar型別
CREATE TABLE usertable (
    YCSB_KEY VARCHAR(255) PRIMARY KEY,
    FIELD0 TEXT, FIELD1 TEXT,
    FIELD2 TEXT, FIELD3 TEXT,
    FIELD4 TEXT, FIELD5 TEXT,
    FIELD6 TEXT, FIELD7 TEXT,
    FIELD8 TEXT, FIELD9 TEXT
);

#或者是如下的表結構

CREATE TABLE usertable (
YCSB_KEY VARCHAR(255) PRIMARY KEY,
FIELD0 VARCHAR(255), FIELD1 VARCHAR(255),
FIELD2 VARCHAR(255), FIELD3 VARCHAR(255),
FIELD4 VARCHAR(255), FIELD5 VARCHAR(255),
FIELD6 VARCHAR(255), FIELD7 VARCHAR(255),
FIELD8 text, FIELD9 text
);

4、資料寫入

cd ycsb-0.17.0   #進入此目錄下，然后執行load命令
./bin/ycsb load jdbc -s -P workloads/workloadd -P /syw_test/ycsb-0.17.0/jdbc-binding/conf/db.properties -cp /syw_test/ycsb-0.17.0/jdbc-binding/lib/mysql-connector-java-5.1.46.jar -p recordcount=1000 -p threads=5 -p operationcount=1000 -p table=usertable

options選項：
-P file ：指定workload檔案，相對路徑或者絕對路徑，
-cp path ：指定額外的Java classpath，
-jvm-args args ：指定額外的JVM引數，
-p key=value ：設定ycsb配置項，會覆寫workload檔案的配置項，
-s ：運行時的中間狀態列印到stderr中，
-target n ：表示1s中總共的操作次數，
-threads n ：設定ycsb client的并發測驗執行緒數，默認是1，單執行緒，

5、執行測驗

加載好資料之后，即可執行作業負載

#將load改為run即可
./bin/ycsb run jdbc -s -P workloads/workloadd -P /syw_test/ycsb-0.17.0/jdbc-binding/conf/db.properties -cp /syw_test/ycsb-0.17.0/jdbc-binding/lib/mysql-connector-java-5.1.46.jar -p recordcount=1000 -p threads=5 -p operationcount=1000 -p table=usertable

三、YCSB測驗引數決議

（1）workloads目錄里面下包含自帶了6種壓力測驗場景：

workloada:讀寫均衡型，50%/50%,Reads/Writes

workloadb:讀多寫少型，95%/5%,Reads/Writes

workloadc:只讀型，100%,Reads

workloadd:讀最近寫入記錄型,95%/5%,Reads/insert

workloade:掃描小區間型,95%/5%,scan/insert

workloadf:讀寫入記錄均衡型,50%/50%,Reads/insert

（2）workload引數介紹

四、測驗結果的解讀

[OVERALL], RunTime(ms), 8001                       #運行總時間（毫秒）   【測驗指標】
[OVERALL], Throughput(ops/sec), 124.9843769528809    #吞吐量，每秒運算元    【測驗指標】
[TOTAL_GCS_G1_Young_Generation], Count, 1   
[TOTAL_GC_TIME_G1_Young_Generation], Time(ms), 152    
[TOTAL_GC_TIME_%_G1_Young_Generation], Time(%), 1.8997625296837894
[TOTAL_GCS_G1_Old_Generation], Count, 0
[TOTAL_GC_TIME_G1_Old_Generation], Time(ms), 0
[TOTAL_GC_TIME_%_G1_Old_Generation], Time(%), 0.0
[TOTAL_GCs], Count, 1         #全域GC次數
[TOTAL_GC_TIME], Time(ms), 152   #全域GC時間
[TOTAL_GC_TIME_%], Time(%), 1.8997625296837894     #全域GC時間百分比
[READ], Operations, 954            #讀總運算元
[READ], AverageLatency(us), 3428.7201257861634    #平均延遲（微秒）
[READ], MinLatency(us), 1889      #最小延遲（微秒）
[READ], MaxLatency(us), 163071      #最大延遲（微秒）
[READ], 95thPercentileLatency(us), 5395     #95%的樣本延遲低于該值      【測驗指標】
[READ], 99thPercentileLatency(us), 10007   #99%的樣本延遲低于該值
[READ], Return=OK, 954
[CLEANUP], Operations, 1
[CLEANUP], AverageLatency(us), 9964.0
[CLEANUP], MinLatency(us), 9960
[CLEANUP], MaxLatency(us), 9967
[CLEANUP], 95thPercentileLatency(us), 9967
[CLEANUP], 99thPercentileLatency(us), 9967
[INSERT], Operations, 46    #寫入總運算元
[INSERT], AverageLatency(us), 11757.478260869566
[INSERT], MinLatency(us), 6932
[INSERT], MaxLatency(us), 36159
[INSERT], 95thPercentileLatency(us), 19951
[INSERT], 99thPercentileLatency(us), 36159
[INSERT], Return=OK, 46

 五、測驗指標

運行時間、吞吐量、時延

標籤：其他

上一篇：MySQL錯誤ERROR 2003 (HY000) Can't connect to MySQL server .' (111)

下一篇：選擇KV資料庫最重要的是什么