golang操作連接數(shù)據(jù)庫實現(xiàn)mysql事務(wù)示例
MySQL是業(yè)界常用的關(guān)系型數(shù)據(jù)庫,本文介紹了database/sql庫以及Go語言如何操作MySQL數(shù)據(jù)庫。
mysql驅(qū)動
_ "github.com/go-sql-driver/mysql"
posgre驅(qū)動
_ "github.com/lib/pq"
連接postgres
Go語言中的database/sql
包提供了保證SQL或類SQL數(shù)據(jù)庫的泛用接口,并不提供具體的數(shù)據(jù)庫驅(qū)動。使用database/sql
包時必須注入(至少)一個數(shù)據(jù)庫驅(qū)動。
我們常用的數(shù)據(jù)庫基本上都有完整的第三方實現(xiàn)。例如:MySQL驅(qū)動
func Open(driverName, dataSourceName string) (*DB, error) import ( "database/sql" "fmt" _ "github.com/lib/pq" ) Db, _ := sql.Open("postgres", "postgres://postgres:iLoveShark@127.0.0.1:3432/master?sslmode=disable&fallback_application_name=bikesvc")
連接mysql
Open打開一個dirverName指定的數(shù)據(jù)庫,dataSourceName指定數(shù)據(jù)源,一般至少包括數(shù)據(jù)庫文件名和其它連接必要的信息。
import ( "database/sql" _ "github.com/go-sql-driver/mysql" ) func main() { // DSN:Data Source Name dsn := "user:password@tcp(127.0.0.1:3306)/dbname" db, err := sql.Open("mysql", dsn) if err != nil { panic(err) } defer db.Close() // 注意這行代碼要寫在上面err判斷的下面 }
初始化連接
Open函數(shù)可能只是驗證其參數(shù)格式是否正確,實際上并不創(chuàng)建與數(shù)據(jù)庫的連接。如果要檢查數(shù)據(jù)源的名稱是否真實有效,應(yīng)該調(diào)用Ping方法。
返回的DB對象可以安全地被多個goroutine并發(fā)使用,并且維護(hù)其自己的空閑連接池。因此,Open函數(shù)應(yīng)該僅被調(diào)用一次,很少需要關(guān)閉這個DB對象。
// 定義一個全局對象db var db *sql.DB // 定義一個初始化數(shù)據(jù)庫的函數(shù) func initDB() (err error) { // DSN:Data Source Name dsn := "user:password@tcp(127.0.0.1:3306)/sql_test?charset=utf8mb4&parseTime=True" // 不會校驗賬號密碼是否正確 // 注意!?。∵@里不要使用:=,我們是給全局變量賦值,然后在main函數(shù)中使用全局變量db db, err = sql.Open("mysql", dsn) if err != nil { return err } // 嘗試與數(shù)據(jù)庫建立連接(校驗dsn是否正確) err = db.Ping() if err != nil { return err } return nil } func main() { err := initDB() // 調(diào)用輸出化數(shù)據(jù)庫的函數(shù) if err != nil { fmt.Printf("init db failed,err:%v\n", err) return } }
其中sql.DB
是表示連接的數(shù)據(jù)庫對象(結(jié)構(gòu)體實例),它保存了連接數(shù)據(jù)庫相關(guān)的所有信息。它內(nèi)部維護(hù)著一個具有零到多個底層連接的連接池,它可以安全地被多個goroutine同時使用。
SetMaxOpenConns
func (db *DB) SetMaxOpenConns(n int)
SetMaxOpenConns
設(shè)置與數(shù)據(jù)庫建立連接的最大數(shù)目。 如果n大于0且小于最大閑置連接數(shù),會將最大閑置連接數(shù)減小到匹配最大開啟連接數(shù)的限制。 如果n<=0,不會限制最大開啟連接數(shù),默認(rèn)為0(無限制)。
SetMaxIdleConns
func (db *DB) SetMaxIdleConns(n int)
SetMaxIdleConns設(shè)置連接池中的最大閑置連接數(shù)。 如果n大于最大開啟連接數(shù),則新的最大閑置連接數(shù)會減小到匹配最大開啟連接數(shù)的限制。 如果n<=0,不會保留閑置連接。
CRUD
查詢
為了方便查詢,我們事先定義好一個結(jié)構(gòu)體來存儲user表的數(shù)據(jù)。
type Info struct { Id int `json:"id"` Code string `json:"code"` HwCode string `json:"hw_code"` Name string `json:"name"` Des string `json:"des"` Created int64 `json:"created"` Updated int64 `json:"updated"` BrandId int64 `json:"brand_id"` }
單行查詢QueryRow
單行查詢db.QueryRow()
執(zhí)行一次查詢,并期望返回最多一行結(jié)果(即Row)。QueryRow總是返回非nil的值,直到返回值的Scan方法被調(diào)用時,才會返回被延遲的錯誤。(如:未找到結(jié)果)
func (db *DB) QueryRow(query string, args ...interface{}) *Row
具體示例代碼:
func (o object) QueryInfo(id int) *Info { r := new(Info) var qstr string switch { case id > 0: qstr += fmt.Sprintf(" and id = %d", id) default: o.Log.Error("invalid param") return nil } sqlstr := ` select coalesce(id,0) as id, coalesce(code,'') as code, coalesce(hw_code,'') as hw_code, coalesce(name,'') as name, coalesce(des,'') as des, coalesce(created,0) as created, coalesce(updated,0) as updated, coalesce(brand_id,0) as brand_id from test_table where 1=1 ` sqlstr += qstr err := o.DbRo.QueryRow(sqlstr).Scan(&r.Id, &r.Code, &r.HwCode, &r.Name, &r.Des, &r.Created, &r.Updated, &r.BrandId) if err != nil { fmt.Println(err) o.Log.Errorf("param=%d,sql=%s,err=%v", id, sqlstr, err) return nil } return r }
多行查詢Query-rows
多行查詢db.Query()
執(zhí)行一次查詢,返回多行結(jié)果(即Rows),一般用于執(zhí)行select命令。參數(shù)args表示query中的占位參數(shù)。
func (db *DB) Query(query string, args ...interface{}) (*Rows, error)
具體示例代碼:
func (o object) QueryList(brandId int) (list []Info) { list = make([]Info, 0) var qstr string switch { case brandId > 0: qstr += fmt.Sprintf(" and brand_id = %d", brandId) default: o.Log.Error("invalid param") return nil } sqlstr := ` select coalesce(id,0) as id, coalesce(code,'') as code, coalesce(hw_code,'') as hw_code, coalesce(name,'') as name, coalesce(des,'') as des, coalesce(created,0) as created, coalesce(updated,0) as updated, coalesce(brand_id,0) as brand_id from bike_color where 1=1 ` sqlstr += qstr rows, err := o.DbRo.Query(sqlstr) if err != nil { o.Log.Error(err) return } defer rows.Close() // rows.Next()獲取下一條結(jié)果 for rows.Next() { var r = new(Info) err = rows.Scan(&r.Id, &r.Code, &r.HwCode, &r.Name, &r.Des, &r.Created, &r.Updated, &r.BrandId) if err != nil { o.Log.Error(err, brandId) continue } list = append(list, *r) } return }
插入和更新和刪除Exec
插入、更新和刪除操作都使用Exec
方法。
func (db *DB) Exec(query string, args ...interface{}) (Result, error)
Exec執(zhí)行一次命令(包括查詢、刪除、更新、插入等),返回的Result是對已執(zhí)行的SQL命令的總結(jié)。參數(shù)args表示query中的占位參數(shù)。
影響的行數(shù)
sqlStr := "update user set age=? where id = ?" ret, _:= db.Exec(sqlStr, 39, 3) n, _ := ret.RowsAffected() // 操作影響的行數(shù)
插入
具體插入數(shù)據(jù)示例代碼如下:
func (o object) Insert(i *Info) (r int) { sqlstr := `insert into bike_model(name,ctrl_tmpl,batt_support,bike_class,pics,code,brand_id,hw_code) values('%v',%d,%d,%d,'%v','%v',%d,'%v') returning id` sqlstr = fmt.Sprintf(sqlstr, i.Name, i.CtrlTmpl, i.BattSupport, i.BikeClass, i.Pics, i.Code, i.BrandId, i.HwCode) fmt.Println(sqlstr) err := o.Db.QueryRow(sqlstr).Scan(&r) if err != nil { fmt.Println(err) o.Log.Errorf("param=%+v,sql=%s,err=%v", i, sqlstr, err) return } return }
更新
具體更新數(shù)據(jù)示例代碼如下:
func (o object) Update(i *Info) (r int) { sqlstr := fmt.Sprintf("update bike_model set ") if i.Id <= 0 { o.Log.Error("invalid param") return } if len(i.Name) > 0 { sqlstr += fmt.Sprintf("name = '%v',", i.Name) } if i.CtrlTmpl > 0 { sqlstr += fmt.Sprintf("ctrl_tmpl = '%d',", i.CtrlTmpl) } if i.BattSupport > 0 { sqlstr += fmt.Sprintf("batt_support = '%d',", i.BattSupport) } if i.BikeClass > 0 { sqlstr += fmt.Sprintf("bike_class = '%d',", i.BikeClass) } if len(i.Pics) > 0 { sqlstr += fmt.Sprintf("hw_code = '%v',", i.Pics) } if len(i.Code) > 0 { sqlstr += fmt.Sprintf("code = '%v',", i.Code) } if i.BrandId > 0 { sqlstr += fmt.Sprintf("brand_id = %d,", i.BrandId) } if len(i.HwCode) > 0 { sqlstr += fmt.Sprintf("hw_code = '%v',", i.HwCode) } // 拼接sql字符串 sqlstr = strings.TrimRight(sqlstr, ",") sqlstr += fmt.Sprintf("where id = %d returning id", i.Id) err := o.Db.QueryRow(sqlstr).Scan(&r) if err != nil { o.Log.Errorf("param=%+v,sql=%s,err=%v", i, sqlstr, err) return } return }
刪除
具體刪除數(shù)據(jù)的示例代碼如下:
func (o object) Delete(id int) (r int) { sqlstr := `delete from bike_model where id = $1` res, err := o.Db.Exec(sqlstr, id) if err != nil { o.Log.Errorf("param=%d,sql=%s,err=%v", id, sqlstr, err) return } // 影響的行數(shù) ra, _ := res.RowsAffected() if ra != 1 { o.Log.Warnf("param=%d,sql=%s,rowsAftected=%d", id, sqlstr, ra) return int(ra) } return }
MySQL預(yù)處理
普通SQL語句執(zhí)行過程:
- 客戶端對SQL語句進(jìn)行占位符替換得到完整的SQL語句。
- 客戶端發(fā)送完整SQL語句到MySQL服務(wù)端
- MySQL服務(wù)端執(zhí)行完整的SQL語句并將結(jié)果返回給客戶端。
預(yù)處理執(zhí)行過程:
- 把SQL語句分成兩部分,命令部分與數(shù)據(jù)部分。
- 先把命令部分發(fā)送給MySQL服務(wù)端,MySQL服務(wù)端進(jìn)行SQL預(yù)處理。
- 然后把數(shù)據(jù)部分發(fā)送給MySQL服務(wù)端,MySQL服務(wù)端對SQL語句進(jìn)行占位符替換。
- MySQL服務(wù)端執(zhí)行完整的SQL語句并將結(jié)果返回給客戶端。
為什么要預(yù)處理?
- 優(yōu)化MySQL服務(wù)器重復(fù)執(zhí)行SQL的方法,可以提升服務(wù)器性能,提前讓服務(wù)器編譯,一次編譯多次執(zhí)行,節(jié)省后續(xù)編譯的成本。
- 避免SQL注入問題。
Go實現(xiàn)MySQL預(yù)處理
database/sql
中使用下面的Prepare
方法來實現(xiàn)預(yù)處理操作。
func (db *DB) Prepare(query string) (*Stmt, error)
Prepare
方法會先將sql語句發(fā)送給MySQL服務(wù)端,返回一個準(zhǔn)備好的狀態(tài)用于之后的查詢和命令。返回值可以同時執(zhí)行多個查詢和命令。
查詢操作的預(yù)處理示例代碼如下:
// 預(yù)處理查詢示例 func prepareQueryDemo() { sqlStr := "select id, name, age from user where id > ?" stmt, err := db.Prepare(sqlStr) if err != nil { fmt.Printf("prepare failed, err:%v\n", err) return } defer stmt.Close() rows, err := stmt.Query(0) if err != nil { fmt.Printf("query failed, err:%v\n", err) return } defer rows.Close() // 循環(huán)讀取結(jié)果集中的數(shù)據(jù) for rows.Next() { var u user err := rows.Scan(&u.id, &u.name, &u.age) if err != nil { fmt.Printf("scan failed, err:%v\n", err) return } fmt.Printf("id:%d name:%s age:%d\n", u.id, u.name, u.age) } }
插入、更新和刪除操作的預(yù)處理十分類似,這里以插入操作的預(yù)處理為例:
// 預(yù)處理插入示例 func prepareInsertDemo() { sqlStr := "insert into user(name, age) values (?,?)" stmt, err := db.Prepare(sqlStr) if err != nil { fmt.Printf("prepare failed, err:%v\n", err) return } defer stmt.Close() _, err = stmt.Exec("小王子", 18) if err != nil { fmt.Printf("insert failed, err:%v\n", err) return } _, err = stmt.Exec("沙河娜扎", 18) if err != nil { fmt.Printf("insert failed, err:%v\n", err) return } fmt.Println("insert success.") }
SQL注入問題
我們?nèi)魏螘r候都不應(yīng)該自己拼接SQL語句!
這里我們演示一個自行拼接SQL語句的示例,編寫一個根據(jù)name字段查詢user表的函數(shù)如下:
// sql注入示例 func sqlInjectDemo(name string) { sqlStr := fmt.Sprintf("select id, name, age from user where name='%s'", name) fmt.Printf("SQL:%s\n", sqlStr) var u user err := db.QueryRow(sqlStr).Scan(&u.id, &u.name, &u.age) if err != nil { fmt.Printf("exec failed, err:%v\n", err) return } fmt.Printf("user:%#v\n", u) }
此時以下輸入字符串都可以引發(fā)SQL注入問題:
sqlInjectDemo("xxx' or 1=1#") sqlInjectDemo("xxx' union select * from user #") sqlInjectDemo("xxx' and (select count(*) from user) <10 #")
補(bǔ)充:不同的數(shù)據(jù)庫中,SQL語句使用的占位符語法不盡相同。
數(shù)據(jù)庫 | 占位符語法 |
---|---|
MySQL | ? |
PostgreSQL | $1, ???????$2等 |
SQLite | ? 和$1 |
Oracle | :name |
Go實現(xiàn)MySQL事務(wù)
什么是事務(wù)?
事務(wù):一個最小的不可再分的工作單元;通常一個事務(wù)對應(yīng)一個完整的業(yè)務(wù)(例如銀行賬戶轉(zhuǎn)賬業(yè)務(wù),該業(yè)務(wù)就是一個最小的工作單元),同時這個完整的業(yè)務(wù)需要執(zhí)行多次的DML(insert、update、delete)語句共同聯(lián)合完成。A轉(zhuǎn)賬給B,這里面就需要執(zhí)行兩次update操作。
在MySQL中只有使用了Innodb
數(shù)據(jù)庫引擎的數(shù)據(jù)庫或表才支持事務(wù)。事務(wù)處理可以用來維護(hù)數(shù)據(jù)庫的完整性,保證成批的SQL語句要么全部執(zhí)行,要么全部不執(zhí)行。
事務(wù)的ACID
通常事務(wù)必須滿足4個條件(ACID):原子性(Atomicity,或稱不可分割性)、一致性(Consistency)、隔離性(Isolation,又稱獨立性)、持久性(Durability)。
條件 | 解釋 |
---|---|
原子性 | 一個事務(wù)(transaction)中的所有操作,要么全部完成,要么全部不完成,不會結(jié)束在中間某個環(huán)節(jié)。事務(wù)在執(zhí)行過程中發(fā)生錯誤,會被回滾(Rollback)到事務(wù)開始前的狀態(tài),就像這個事務(wù)從來沒有執(zhí)行過一樣。 |
一致性 | 在事務(wù)開始之前和事務(wù)結(jié)束以后,數(shù)據(jù)庫的完整性沒有被破壞。這表示寫入的資料必須完全符合所有的預(yù)設(shè)規(guī)則,這包含資料的精確度、串聯(lián)性以及后續(xù)數(shù)據(jù)庫可以自發(fā)性地完成預(yù)定的工作。 |
隔離性 | 數(shù)據(jù)庫允許多個并發(fā)事務(wù)同時對其數(shù)據(jù)進(jìn)行讀寫和修改的能力,隔離性可以防止多個事務(wù)并發(fā)執(zhí)行時由于交叉執(zhí)行而導(dǎo)致數(shù)據(jù)的不一致。事務(wù)隔離分為不同級別,包括讀未提交(Read uncommitted)、讀提交(read committed)、可重復(fù)讀(repeatable read)和串行化(Serializable)。 |
持久性 | 事務(wù)處理結(jié)束后,對數(shù)據(jù)的修改就是永久的,即便系統(tǒng)故障也不會丟失。 |
事務(wù)相關(guān)方法
Go語言中使用以下三個方法實現(xiàn)MySQL中的事務(wù)操作。 開始事務(wù)
func (db *DB) Begin() (*Tx, error)
提交事務(wù)
func (tx *Tx) Commit() error
回滾事務(wù)
func (tx *Tx) Rollback() error
事務(wù)示例
下面的代碼演示了一個簡單的事務(wù)操作,該事物操作能夠確保兩次更新操作要么同時成功要么同時失敗,不會存在中間狀態(tài)。
// 事務(wù)操作示例 func transactionDemo() { tx, err := db.Begin() // 開啟事務(wù) if err != nil { if tx != nil { tx.Rollback() // 回滾 } fmt.Printf("begin trans failed, err:%v\n", err) return } sqlStr1 := "Update user set age=30 where id=?" ret1, err := tx.Exec(sqlStr1, 2) if err != nil { tx.Rollback() // 回滾 fmt.Printf("exec sql1 failed, err:%v\n", err) return } affRow1, err := ret1.RowsAffected() if err != nil { tx.Rollback() // 回滾 fmt.Printf("exec ret1.RowsAffected() failed, err:%v\n", err) return } sqlStr2 := "Update user set age=40 where id=?" ret2, err := tx.Exec(sqlStr2, 3) if err != nil { tx.Rollback() // 回滾 fmt.Printf("exec sql2 failed, err:%v\n", err) return } affRow2, err := ret2.RowsAffected() if err != nil { tx.Rollback() // 回滾 fmt.Printf("exec ret1.RowsAffected() failed, err:%v\n", err) return } fmt.Println(affRow1, affRow2) if affRow1 == 1 && affRow2 == 1 { fmt.Println("事務(wù)提交啦...") tx.Commit() // 提交事務(wù) } else { tx.Rollback() fmt.Println("事務(wù)回滾啦...") } fmt.Println("exec trans success!") }
以上就是golong操作連接數(shù)據(jù)庫實現(xiàn)mysql事務(wù)示例的詳細(xì)內(nèi)容,更多關(guān)于golong操作實現(xiàn)mysql事務(wù)的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
Go語言基礎(chǔ)結(jié)構(gòu)體用法及示例詳解
這篇文章主要為大家介紹了Go語言基礎(chǔ)結(jié)構(gòu)體的用法及示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步2021-11-11Golang使用channel實現(xiàn)數(shù)據(jù)匯總的方法詳解
這篇文章主要為大家詳細(xì)介紹了在并發(fā)編程中數(shù)據(jù)匯總的問題,并探討了在并發(fā)環(huán)境下使用互斥鎖和通道兩種方式來保證數(shù)據(jù)安全性的方法,需要的可以參考一下2023-05-05