Qt數(shù)據(jù)庫(kù)應(yīng)用之實(shí)現(xiàn)通用數(shù)據(jù)生成器
一、前言
有兩種應(yīng)用場(chǎng)景需要用到數(shù)據(jù)生成器,一種是需要測(cè)試數(shù)據(jù)庫(kù)性能,比如在100萬條和1000萬條記錄的時(shí)候?qū)Ρ炔樵兓蚋抡Z句執(zhí)行耗時(shí),一種是隨機(jī)模擬生成一堆數(shù)據(jù),用來測(cè)試程序的性能,看下程序中到了百萬千萬級(jí)別的數(shù)據(jù)量的時(shí)候,程序的代碼執(zhí)行是否受影響,影響有大等。很多人覺得sqlite數(shù)據(jù)庫(kù)性能超過幾十萬就不行,于是親自用這個(gè)數(shù)據(jù)發(fā)生器隨機(jī)模擬生成了一億條記錄,測(cè)試下來發(fā)現(xiàn)性能有損失,但是不像傳說中的垃圾,起碼還是完全可用的,只要注意索引要建好,文件體積比較大就是,文件體積膨脹到了1.2GB,估計(jì)性能損耗很大程度上在磁盤讀寫。
通過對(duì)各種數(shù)據(jù)庫(kù)(sqlite、postgres、mysql、sqlserver等)不同數(shù)據(jù)量階段(1萬條、100萬條、1000萬條等)做不同的sql語句處理(查詢、插入、刪除、更新),Qt內(nèi)置了sqlite數(shù)據(jù)庫(kù),所以對(duì)sqlite的支持是最快最友好的,其次是postgresql數(shù)據(jù)庫(kù)、然后是mysql,支持最差的性能最低的是ODBC模式連接的數(shù)據(jù)庫(kù),比如sqlserver數(shù)據(jù)庫(kù)必須用odbc的形式連接,由于odbc是一個(gè)中間層,理論上性能也是肯定沒有直接連接處理快,不過縱觀各種用Qt寫的項(xiàng)目的場(chǎng)景,很少是需要千萬級(jí)別億級(jí)別的數(shù)據(jù)量的,真的到了這個(gè)程度可以考慮分庫(kù)分表來解決。
關(guān)于Qt數(shù)據(jù)庫(kù)相關(guān)開發(fā)的一些經(jīng)驗(yàn)總結(jié)
二、功能特點(diǎn)
同時(shí)支持多種數(shù)據(jù)庫(kù)比如odbc、sqlite、mysql、postgresql、sqlserver、oracle、人大金倉(cāng)等。
一個(gè)數(shù)據(jù)庫(kù)類即可管理本地?cái)?shù)據(jù)庫(kù)通信,也支持遠(yuǎn)程數(shù)據(jù)庫(kù)通信等。
數(shù)據(jù)庫(kù)線程支持執(zhí)行各種sql語句,包括單條和批量。
組件中的所有類打印信息、錯(cuò)誤信息、執(zhí)行結(jié)果都信號(hào)發(fā)出去。
集成數(shù)據(jù)庫(kù)通用翻頁(yè)類(負(fù)責(zé)具體處理邏輯),搭配分頁(yè)導(dǎo)航控件(負(fù)責(zé)外觀),形成超級(jí)牛逼的翻頁(yè)控件。
集成數(shù)據(jù)庫(kù)自動(dòng)清理類,設(shè)定最大記錄數(shù)后臺(tái)自動(dòng)清理早期數(shù)據(jù)。
集成自定義委托類,支持復(fù)選框、文本框、下拉框、日期框、微調(diào)框、進(jìn)度條等。
同時(shí)支持Qt4-Qt6,親測(cè)Qt4.6到Qt6.3任意版本,任意系統(tǒng)和編譯器。
本組件無故障 360天7乘24小時(shí) 運(yùn)行在至少上萬個(gè)現(xiàn)場(chǎng),商業(yè)級(jí)別品質(zhì)保證。
每個(gè)類都對(duì)應(yīng)完整詳細(xì)的使用示例,注釋詳細(xì),非常適合閱讀學(xué)習(xí)。
可以作為獨(dú)立的程序運(yùn)行,比如自動(dòng)清理早期數(shù)據(jù),同步數(shù)據(jù)到云端。
全部線程處理,不卡界面,自動(dòng)重連數(shù)據(jù)庫(kù)。
普通測(cè)試情況,sqlite數(shù)據(jù)庫(kù),數(shù)據(jù)庫(kù)發(fā)生器每秒鐘插入1000條記錄約0.003秒鐘,同時(shí)自動(dòng)清理數(shù)據(jù)類每秒鐘刪除1000條記錄約0.13秒,不同線程互不干擾。
三、體驗(yàn)地址
體驗(yàn)地址:https://pan.baidu.com/s/15ZKAlptW-rDcNq8zlzdYLg 提取碼:uyes 文件名:bin_dbtool.zip
國(guó)內(nèi)站點(diǎn):https://gitee.com/feiyangqingyun
國(guó)際站點(diǎn):https://github.com/feiyangqingyun
四、效果圖
五、相關(guān)代碼
void frmDbCreat::on_btnOpen_clicked() { if (ui->btnOpen->text() == "打開數(shù)據(jù)庫(kù)") { DbInfo dbInfo; dbInfo.connName = this->objectName(); dbInfo.dbName = AppConfig::DbName2; dbInfo.hostName = AppConfig::HostName2; dbInfo.hostPort = AppConfig::HostPort2; dbInfo.userName = AppConfig::UserName2; dbInfo.userPwd = AppConfig::UserPwd2; QString dbType = AppConfig::DbType2.toUpper(); if (dbType == "SQLITE") { dbInfo.dbName = DbHelper::getDbDefaultFile(); } dbConn->setConnInfo(DbHelper::getDbType(dbType), dbInfo); if (dbConn->openDb()) { dbConn->start(); ui->btnOpen->setText("關(guān)閉數(shù)據(jù)庫(kù)"); } else { QString error = dbConn->getDatabase().lastError().text(); QUIHelper::showMessageBoxError("打開數(shù)據(jù)庫(kù)失敗!\n" + error, 3); } } else { dbConn->stop(); dbConn->closeDb(); ui->btnOpen->setText("打開數(shù)據(jù)庫(kù)"); on_btnClear_clicked(); } QTimer::singleShot(100, this, SLOT(getMaxID())); QTimer::singleShot(1000, this, SLOT(on_btnStart_clicked())); } void frmDbCreat::on_btnCopy_clicked() { //將數(shù)據(jù)庫(kù)設(shè)置參數(shù)一鍵粘貼過來 ui->cboxDbType->setCurrentIndex(ui->cboxDbType->findText(AppConfig::LocalDbType)); ui->txtDbName->setText(AppConfig::LocalDbName); ui->txtHostName->setText(AppConfig::LocalHostName); ui->txtHostPort->setText(QString::number(AppConfig::LocalHostPort)); ui->txtUserName->setText(AppConfig::LocalUserName); ui->txtUserPwd->setText(AppConfig::LocalUserPwd); } void frmDbCreat::getMaxID() { if (!dbConn->getOk()) { return; } //根據(jù)插入sql語句取出對(duì)應(yīng)的表名和自增字段 QString sqlColumn = AppConfig::SqlColumn2; QString sqlValue = AppConfig::SqlValue2; if (sqlValue.contains("AUTO_INCREMENT")) { sqlColumn.replace("insert into ", ""); sqlValue.replace("values", ""); QString tableName = sqlColumn.split("(").first(); sqlColumn.replace(tableName, ""); sqlColumn.replace("(", ""); sqlColumn.replace(")", ""); sqlValue.replace("(", ""); sqlValue.replace(")", ""); QStringList listColumn = sqlColumn.split(","); QStringList listValue = sqlValue.split(","); int index = listValue.indexOf("'AUTO_INCREMENT'"); QString columnName = listColumn.at(index); //取出最大記錄數(shù) maxID = DbHelper::getMaxID(tableName, columnName, dbConn->getDatabase()); } } void frmDbCreat::on_btnDo_clicked() { if (!dbConn->getOk()) { return; } QString sql = AppConfig::SqlColumn2 + " " + AppConfig::SqlValue2; //qDebug() << TIMEMS << sql; QStringList sqls; for (int i = 0; i < AppConfig::Count2; ++i) { QString temp = sql; //替換自增ID maxID++; temp.replace("AUTO_INCREMENT", QString::number(maxID)); //替換時(shí)間 temp.replace("DATETIME", DATETIME); sqls << temp; } dbConn->append(sqls); } void frmDbCreat::on_btnCount_clicked() { dbConn->selectCount("LogInfo", "LogID", "where 1=1"); } void frmDbCreat::on_btnStart_clicked() { if (ui->btnStart->text() == "啟動(dòng)服務(wù)") { on_btnDo_clicked(); timer->start(); ui->btnStart->setText("停止服務(wù)"); } else { timer->stop(); ui->btnStart->setText("啟動(dòng)服務(wù)"); } }
以上就是Qt數(shù)據(jù)庫(kù)應(yīng)用之實(shí)現(xiàn)通用數(shù)據(jù)生成器的詳細(xì)內(nèi)容,更多關(guān)于Qt數(shù)據(jù)生成器的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!
- Qt數(shù)據(jù)庫(kù)應(yīng)用之實(shí)現(xiàn)數(shù)據(jù)圖文混排
- Qt數(shù)據(jù)庫(kù)應(yīng)用之實(shí)現(xiàn)數(shù)據(jù)打印到紙張
- Qt數(shù)據(jù)庫(kù)應(yīng)用之?dāng)?shù)據(jù)打印到pdf
- Qt數(shù)據(jù)庫(kù)應(yīng)用之實(shí)現(xiàn)數(shù)據(jù)的導(dǎo)入與導(dǎo)出
- C/C++?Qt數(shù)據(jù)庫(kù)SqlRelationalTable關(guān)聯(lián)表詳解
- C/C++?Qt數(shù)據(jù)庫(kù)與SqlTableModel組件應(yīng)用教程
- C/C++?Qt?數(shù)據(jù)庫(kù)與TreeView組件綁定詳解
- C/C++?Qt?數(shù)據(jù)庫(kù)QSql增刪改查組件應(yīng)用教程
相關(guān)文章
C語言實(shí)現(xiàn)時(shí)間戳轉(zhuǎn)日期的算法(推薦)
下面小編就為大家?guī)硪黄狢語言實(shí)現(xiàn)時(shí)間戳轉(zhuǎn)日期的算法(推薦)。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2016-06-06C++基于Boost.Asio實(shí)現(xiàn)端口映射器的過程詳解
Boost.Asio 是一個(gè)功能強(qiáng)大的 C++ 庫(kù),用于異步編程和網(wǎng)絡(luò)編程,它提供了跨平臺(tái)的異步 I/O 操作,在這篇文章中,我們將深入分析一個(gè)使用 Boost.Asio 實(shí)現(xiàn)的簡(jiǎn)單端口映射服務(wù)器,文中有詳細(xì)的代碼講解,需要的朋友可以參考下2023-11-11Reactor反應(yīng)器的實(shí)現(xiàn)方法詳解
本篇文章是對(duì)Reactor反應(yīng)器的實(shí)現(xiàn)方法進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-05-05Qt學(xué)習(xí)教程之對(duì)話框消失動(dòng)畫效果
這篇文章主要給大家介紹了關(guān)于Qt學(xué)習(xí)教程之對(duì)話框消失動(dòng)畫效果的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-07-07c++的glog與spdlog的性能對(duì)比測(cè)試分析
這篇文章主要為大家介紹了c++的glog與spdlog的性能對(duì)比測(cè)試分析,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-05-05