zoukankan      html  css  js  c++  java
  • Go原生sql操作MySQL

    MySQL是业界常用的关系型数据库,Go语言如何操作MySQL数据库之一的方法。

    连接

    Go语言中的database/sql包提供了保证SQL或类SQL数据库的泛用接口,并不提供具体的数据库驱动。使用database/sql包时必须注入(至少)一个数据库驱动:github.com/go-sql-driver/mysql

    下载依赖

    go get -u database/sql
    go get -u github.com/go-sql-driver/mysql
    

    配置mysql驱动

    func Open(driverName, dataSourceName string) (*DB, error)
    
    Open打开一个dirverName指定的数据库,dataSourceName指定数据源,一般至少包括数据库文件名和其它连接地址端口等必要信息。
    
    import (
    	"database/sql"
    
    	_ "github.com/go-sql-driver/mysql" // 需要匿名加载初始化驱动
    )
    
    func main() {
       // dsn:dataSourceName指定数据源
    	dsn := "user:password@tcp(127.0.0.1:3306)/DBname"
    	db, err := sql.Open("mysql", dsn)
    	if err != nil {
    		panic(err)
    	}
    	defer db.Close()  // 注意这行代码要写在上面err判断的下面, 需要先判断是否连接异常,再进行关闭连接
    }
    

    初始化连接(函数)

    Open函数可能只是验证其参数格式是否正确,实际上并不创建与数据库的连接

    Ping方法可以检查数据源的名称是否真实有效

    使用DB对象,可以让Open函数应该仅被调用一次,很少关闭DB对象,这样可以有效goroutine并发使用,并且维护其自己的空闲连接池。

    package main
    
    import (
    	"database/sql"
    	"fmt"
    
    	_ "github.com/go-sql-driver/mysql"
    )
    
    // 定义一个全局对象db
    var db *sql.DB
    
    // 定义一个初始化数据库的函数
    func initDB() (err error) {
    	dsn := "root:root1234@tcp(127.0.0.1:13306)/sql_demo"
    	// 不会校验账号密码是否正确
    	// 注意!!!这里不要使用:=,我们是给全局变量赋值,然后在main函数中使用全局变量db
    	db, err = sql.Open("mysql", dsn)
    	if err != nil {
    		return err
    	}
    	// 尝试与数据库建立连接(校验dsn是否正确)
    	err = db.Ping()
    	if err != nil {
    		return err
    	}
    	return nil
    }
    
    func main() {
    	err := initDB() // 调用输出化数据库的函数
    	if err != nil {
    		fmt.Printf("init db failed,err:%v
    ", err)
    		return
    	}
    }
    

    sql.DB是表示连接的数据库对象(结构体实例),它保存了连接数据库相关的所有信息。它内部维护着一个具有零到多个底层连接的连接池,它可以安全地被多个goroutine同时使用。

    SetConnMaxLifetime最长连接时间

    SetMaxOpenConns最大开启连接数

    设置与数据库建立连接的最大数目。

    如果大于0且小于最大空闲连接数,会将最大空闲连接数减小到匹配最大开启连接数的限制。

    如果<=0,不会限制最大开启连接数,默认为0(无限制)。

    SetMaxIdleConns 最大空闲连接数

    设置连接池中的最大空闲连接数。

    如果大于最大开启连接数,则新的最大空闲连接数会减小到匹配最大开启连接数的限制。

    如果<=0,不会保留空闲连接。

    package main
    
    import (
    	"database/sql"
    	"fmt"
    
    	_ "github.com/go-sql-driver/mysql"
    )
    
    var db *sql.DB
    
    func initDB() (err error) {
    	dsn := "root:root1234@tcp(127.0.0.1:13306)/sql_demo?charset=utf8mb4&parseTime=True"
    	db, err = sql.Open("mysql", dsn)
    	if err != nil {
    		return err
    	}
    	// 数值需要业务具体情况来确定
    	//db.SetConnMaxLifetime(time.Second*10)
    	db.SetMaxOpenConns(100) // 最大连接数
    	db.SetMaxIdleConns(10)  // 最大空闲连接数
    	return nil
    }
    
    func main() {
    	err := initDB()
    	if err != nil {
    		fmt.Printf("init db failed,err:%v
    ", err)
    		return
    	}
    }
    

    CURD

    增改查删(增删改查)

    建库建表

    CREATE DATABASE demo;
    
    use demo;
    
    CREATE TABLE `user` (
        `id` BIGINT(20) NOT NULL AUTO_INCREMENT,
        `name` VARCHAR(20) DEFAULT '',
        `age` INT(11) DEFAULT '0',
        PRIMARY KEY(`id`)
    )ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8mb4;
    

    增-插入数据

    插入、更新和删除操作都使用Exec方法。

    func (db *DB) Exec(query string, args ...interface{}) (Result, error)
    

    Exec执行一次命令(包括查询、删除、更新、插入等),返回的Result是对已执行的SQL命令的总结。参数args表示query中的占位参数。

    // 插入数据
    func insertRowDemo() {
    	sqlStr := "insert into user(name, age) values (?,?)"
    	ret, err := db.Exec(sqlStr, "xx", 23)
    	if err != nil {
    		fmt.Printf("insert failed, err:%v
    ", err)
    		return
    	}
    	var theID int64
    	theID, err = ret.LastInsertId() // 新插入数据的id
    	if err != nil {
    		fmt.Printf("get lastinsert ID failed, err:%v
    ", err)
    		return
    	}
    	fmt.Printf("insert success, the id is %d.
    ", theID)
    }
    

    删-删除数据

    插入、更新和删除操作都使用Exec方法。

    func (db *DB) Exec(query string, args ...interface{}) (Result, error)
    

    Exec执行一次命令(包括查询、删除、更新、插入等),返回的Result是对已执行的SQL命令的总结。参数args表示query中的占位参数。

    // 删除数据
    func deleteRowDemo() {
    	sqlStr := "delete from user where id = ?"
    	ret, err := db.Exec(sqlStr, 0)
    	if err != nil {
    		fmt.Printf("delete failed, err:%v
    ", err)
    		return
    	}
    	var n int64
    	n, err = ret.RowsAffected() // 操作影响的行数
    	if err != nil {
    		fmt.Printf("get RowsAffected failed, err:%v
    ", err)
    		return
    	}
    	fmt.Printf("delete success, affected rows:%d
    ", n)
    }
    

    改-更新数据

    插入、更新和删除操作都使用Exec方法。

    func (db *DB) Exec(query string, args ...interface{}) (Result, error)
    

    Exec执行一次命令(包括查询、删除、更新、插入等),返回的Result是对已执行的SQL命令的总结。参数args表示query中的占位参数。

    // 更新数据
    func updateRowDemo() {
    	sqlStr := "update user set age=? where id = ?"
    	ret, err := db.Exec(sqlStr, 39, 3)
    	if err != nil {
    		fmt.Printf("update failed, err:%v
    ", err)
    		return
    	}
    	var n int64
    	n, err = ret.RowsAffected() // 操作影响的行数
    	if err != nil {
    		fmt.Printf("get RowsAffected failed, err:%v
    ", err)
    		return
    	}
    	fmt.Printf("update success, affected rows:%d
    ", n)
    }
    

    查-查询数据

    为了方便查询,事先定义好一个结构体来存储user表的数据。

    type user struct {
       id   int // 同类型放一起对使用内存地址更好,更有顺序
       age  int
       name string
    }
    

    单行查询db.QueryRow()执行一次查询,并期望返回一行结果(即Row)。QueryRow总是返回非nil的值,直到返回值的Scan方法被调用时,才会返回被延迟的错误。(如:未找到结果)

    func (db *DB) QueryRow(query string, args ...interface{}) *Row
    
    // 查询单条数据示例
    func queryRowDemo() {
       sqlStr := "select id, name, age from user where id=?"
       var u user
       // 非常重要:确保QueryRow之后调用Scan方法,否则持有的数据库链接不会被释放
       // row := db.QueryRow(sqlStr, 1) // 并没有对其做scan操作
    
       err := db.QueryRow(sqlStr, 2).Scan(&u.id, &u.name, &u.age)
       if err != nil {
          fmt.Printf("scan failed, err:%v
    ", err)
          return
       }
       fmt.Printf("id:%d name:%s age:%d
    ", u.id, u.name, u.age)
    }
    

    多行查询db.Query()执行一次查询,返回多行结果(即Rows),一般用于执行select命令。参数args表示query中的占位参数。

    func (db *DB) Query(query string, args ...interface{}) (*Rows, error)
    
    // 查询多条数据示例
    func queryMultiRowDemo() {
       sqlStr := "select id, name, age from user where id > ?"
       rows, err := db.Query(sqlStr, 0)
       if err != nil {
          fmt.Printf("query failed, err:%v
    ", err)
          return
       }
       // 非常重要:关闭rows释放持有的数据库链接
       defer rows.Close()
    
       // 循环读取结果集中的数据,直到没有
       for rows.Next() {
          var u user
          err := rows.Scan(&u.id, &u.name, &u.age)
          if err != nil {
             fmt.Printf("scan failed, err:%v
    ", err)
             return
          }
          fmt.Printf("id:%d name:%s age:%d
    ", u.id, u.name, u.age)
       }
    }
    

    Mysql预处理

    普通SQL语句执行过程:

    1. 客户端对SQL语句进行占位符替换得到完整的SQL语句。
    2. 客户端发送完整SQL语句到MySQL服务端
    3. MySQL服务端执行完整的SQL语句并将结果返回给客户端。

    预处理执行过程:

    1. 把SQL语句分成两部分,命令部分与数据部分。
    2. 先把命令部分发送给MySQL服务端,MySQL服务端进行SQL预处理。
    3. 然后把数据部分发送给MySQL服务端,MySQL服务端对SQL语句进行占位符替换。
    4. MySQL服务端执行完整的SQL语句并将结果返回给客户端。

    为什么要预处理?

    1. 优化MySQL服务器重复执行SQL的方法,既可以提升服务器性能,提前让服务器编译,一次编译多次执行,节省后续编译的成本.
    2. 避免SQL注入问题.
    

    Go实现Mysql预处理

    database/sql中使用下面的Prepare方法来实现预处理操作。

    func (db *DB) Prepare(query string) (*Stmt, error)
    

    Prepare方法过程:Prepare方法会先将sql语句发送给MySQL服务端,返回一个准备好的状态用于之后的查询和命令。返回值可以同时执行多个查询和命令。

    预处理查询

    // 预处理查询示例
    func prepareQueryDemo() {
    	sqlStr := "select id, name, age from user where id > ?"
    	stmt, err := db.Prepare(sqlStr)
    	if err != nil {
                fmt.Printf("prepare failed, err:%v
    ", err)
    		return
    	}
    	defer stmt.Close()
    	rows, err := stmt.Query(3)
    	if err != nil {
    		fmt.Printf("query failed, err:%v
    ", err)
    		return
    	}
    	defer rows.Close()
    	// 循环读取结果集中的数据
    	for rows.Next() {
    		var u user
    		err := rows.Scan(&u.id, &u.name, &u.age)
    		if err != nil {
    			fmt.Printf("scan failed, err:%v
    ", err)
    			return
    		}
    		fmt.Printf("id:%d name:%s age:%d
    ", u.id, u.name, u.age)
    	}
    }
    

    预处理插入

    // 预处理插入示例
    func prepareInsertDemo() {
    	sqlStr := "insert into user(name, age) values (?,?)"
    	stmt, err := db.Prepare(sqlStr)
    	if err != nil {
    		fmt.Printf("prepare failed, err:%v
    ", err)
    		return
    	}
    	defer stmt.Close()
    	_, err = stmt.Exec("kk", 18)
    	if err != nil {
    		fmt.Printf("insert failed, err:%v
    ", err)
    		return
    	}
    	_, err = stmt.Exec("xx", 23)
    	if err != nil {
    		fmt.Printf("insert failed, err:%v
    ", err)
    		return
    	}
    	fmt.Println("insert success.")
    }
    

    预处理更新

    // 预处理更新示例
    func prepareUpdateDemo() {
    	sqlStr := "update user set age=? where id = ?"
    	stmt, err := db.Prepare(sqlStr)
    	if err != nil {
    		fmt.Printf("prepare failed err:%v
    ", err)
    	}
    	defer stmt.Close()
    	_, err = stmt.Exec(18, 5)
    	if err != nil {
    		fmt.Printf("update failed, err:%v
    ", err)
    		return
    	}
    	fmt.Println("update success.")
    }
    

    预处理删除

    // 预处理删除
    func prepareDeleteDemo() {
    	sqlStr := "delete from user where id = ?"
    	stmt, err := db.Prepare(sqlStr)
    	if err != nil {
    		fmt.Printf("prepare failed err:%v
    ", err)
    	}
    	defer stmt.Close()
    	_, err = stmt.Exec(5)
    	if err != nil {
    		fmt.Printf("delete failed, err:%v
    ", err)
    		return
    	}
    	fmt.Println("delete success.")
    }
    

    SQL注入问题

    任何时候都不应该自己拼接SQL语句!

    SQL注入示例

    // sql注入示例
    func sqlInjectDemo(name string) {
    	sqlStr := fmt.Sprintf("select id, name, age from user where name='%s'", name)
    	fmt.Printf("SQL:%s
    ", sqlStr)
    	var u user
    	err := db.QueryRow(sqlStr).Scan(&u.id, &u.name, &u.age)
    	if err != nil {
    		fmt.Printf("exec failed, err:%v
    ", err)
    		return
    	}
    	fmt.Printf("user:%#v
    ", u)
    }
    

    输入字符串都可以引发SQL注入问题

    sqlInjectDemo("xxx' or 1=1#")
    sqlInjectDemo("xxx' union select * from user #")
    

    不同数据库占位符语法

    MySQL事务

    什么是事务?

    事务:一个最小的不可再分的工作单元;通常一个事务对应一个完整的业务(例如银行账户转账业务,该业务就是一个最小的工作单元),同时这个完整的业务需要执行多次的DML(insert、update、delete)语句共同联合完成。A转账给B,这里面就需要执行两次update操作。

    在MySQL中只有使用了Innodb数据库引擎的数据库或表才支持事务。事务处理可以用来维护数据库的完整性,保证成批的SQL语句要么全部执行,要么全部不执行。
    Transaction生命周期.png

    事务ACID

    A:atomicity原子性;整个事务中的所有操作要么全部成功执行,要么全部失败后回滚
    C:consistency一致性;数据库总是从一个一致性状态转换为另一个一致性状态
    I:Isolation隔离性;一个事务所做出的操作在提交之前,是不能为其它事务所见;隔离有多种隔离级别,实现并发
    D:durability持久性;一旦事务提交,其所做的修改会永久保存于数据库中
    

    事务相关方法

    开始事务

    func (db *DB) Begin() (*Tx, error)
    
    MySQL:begin;
    

    提交事务

    func (tx *Tx) Commit() error
    
    MySQL:commit;
    

    回滚事务

    func (tx *Tx) Rollback() error
    
    MySQL:rollback;
    

    事务示例

    // 事务操作示例
    func transactionDemo() {
    	tx, err := db.Begin() // 开启事务
    	if err != nil {
    		if tx != nil {
    			tx.Rollback() // 回滚
    		}
    		fmt.Printf("begin trans failed, err:%v
    ", err)
    		return
    	}
    	sqlStr1 := "Update user set age=23 where id=?"
    	ret1, err := tx.Exec(sqlStr1, 2)
    	if err != nil {
    		tx.Rollback() // 回滚
    		fmt.Printf("exec sql1 failed, err:%v
    ", err)
    		return
    	}
    	affRow1, err := ret1.RowsAffected()
    	if err != nil {
    		tx.Rollback() // 回滚
    		fmt.Printf("exec ret1.RowsAffected() failed, err:%v
    ", err)
    		return
    	}
    
    	sqlStr2 := "Update user set age=23 where id=?"
    	ret2, err := tx.Exec(sqlStr2, 3)
    	if err != nil {
    		tx.Rollback() // 回滚
    		fmt.Printf("exec sql2 failed, err:%v
    ", err)
    		return
    	}
    	affRow2, err := ret2.RowsAffected()
    	if err != nil {
    		tx.Rollback() // 回滚
    		fmt.Printf("exec ret1.RowsAffected() failed, err:%v
    ", err)
    		return
    	}
    
    	// 当affRow1 == 1 && affRow2 == 1, 两个都成功才提交事务,否则回滚
    	fmt.Println(affRow1, affRow2)
    	if affRow1 == 1 && affRow2 == 1 {
    		fmt.Println("事务提交啦...")
    		tx.Commit() // 提交事务
    	} else {
    		tx.Rollback()
    		fmt.Println("事务回滚啦...")
    	}
    
    	fmt.Println("exec trans success!")
    }
    
    每天进步一点点
  • 相关阅读:
    UDP——python网络编程笔记
    2018.7计划
    二叉树
    第7.5章:类——Cookbook笔记
    网络编程 Cookbook
    网络编程 csapp
    第5.5章 迭代器与生成器——CookBook笔记
    第3.5章 数据结构与算法——CookBook笔记
    关于排序
    关于搜索
  • 原文地址:https://www.cnblogs.com/Otiger/p/14653962.html
Copyright © 2011-2022 走看看