当前位置:首页 > 文章列表 > 数据库 > MySQL > go database/sql -- 连接的申请与释放

go database/sql -- 连接的申请与释放

来源:SegmentFault 2023-01-12 20:12:45 0浏览 收藏

小伙伴们对数据库编程感兴趣吗?是否正在学习相关知识点?如果是,那么本文《go database/sql -- 连接的申请与释放》,就很适合你,本篇文章讲解的知识点主要包括MySQL、go、数据库。在之后的文章中也会多多分享相关知识点,希望对大家的知识积累有所帮助!

database/sql是go自带的操作sql的库,它维护了sql的连接池,包括连接的申请和释放。

连接池

datebase/sql维护了连接池,其配置:

db.SetMaxIdleConns(10)        //设置空闲连接池中的最大idle连接数
db.SetMaxOpenConns(100)       //设置数据库连接最大打开数
db.SetConnMaxLifetime(time.Hour)    //设置可重用连接的最长时间

操作MySQL的示例程序:

import (
    "database/sql"
    _ "github.com/go-sql-driver/mysql"
)

func main() {
    db, _ := db.Open("mysql", "root:rootroot@/dqm?charset=utf8&parseTime=True&loc=Local")    
    defer db.Close()
    db.SetMaxOpenConns(10)
    if err := db.Ping(); err != nil {
        fmt.Println("connect to MySQL failed, err:", err)
        return
    }
    rows, err := db.Query("select * from test where name = 'jackie' limit 10")
    if err != nil {
        fmt.Println("query error")
    }
    defer rows.Close()
    for rows.Next() {
        fmt.Println("close")
    }
    row, _ := db.Query("select * from test")
    fmt.Println(row, rows)
}

db.Open(“mysql”, dsn)并不会真正连接MySQL,也不会校验数据库用户名/密码,仅校验了dsn格式。

只有在Ping()或者实际的Query()操作时才会建立连接。

故项目中一般在InitDB()时,除了Open(),还要Ping()以确认连接OK。

使用MySQL

database/sql用于操作数据库的CRUD,当操作mysql时使用驱动:

import (    
    _ "github.com/go-sql-driver/mysql"
) 

它会自动注册mysql的驱动:

//github.com/go-sql-driver/mysql/driver.go
func init() {
    sql.Register("mysql", &MySQLDriver{})
}

源码分析:

初始化DB

// Open may just validate its arguments without creating a connection
// to the database. To verify that the data source name is valid, call
// Ping.
func Open(driverName, dataSourceName string) (*DB, error) {
   driversMu.RLock()
   driveri, ok := drivers[driverName]
   driversMu.RUnlock()
   if !ok {
      return nil, fmt.Errorf("sql: unknown driver %q (forgotten import?)", driverName)
   }
   if driverCtx, ok := driveri.(driver.DriverContext); ok {
      connector, err := driverCtx.OpenConnector(dataSourceName)
      if err != nil {
         return nil, err
      }
      return OpenDB(connector), nil
   }
   return OpenDB(dsnConnector{dsn: dataSourceName, driver: driveri}), nil
}

初始化DB仅构造了DB的结构,并没有创建真正的连接:

func OpenDB(c driver.Connector) *DB {
   ctx, cancel := context.WithCancel(context.Background())
   db := &DB{
      connector:    c,
      openerCh:     make(chan struct{}, connectionRequestQueueSize),
      resetterCh:   make(chan *driverConn, 50),
      lastPut:      make(map[*driverConn]string),
      connRequests: make(map[uint64]chan connRequest),
      stop:         cancel,
   }
   go db.connectionOpener(ctx)      //goroutine用于创建连接
   go db.connectionResetter(ctx)    //goroutine用于重置session
   return db
}

获取连接

获取连接都是在具体的sql被执行的时候,如Query、Exec;

func (db *DB) Query(query string, args ...interface{}) (*Rows, error) {
   return db.QueryContext(context.Background(), query, args...)
}

func (db *DB) query(ctx context.Context, query string, args []interface{}, strategy connReuseStrategy) (*Rows, error) {
   dc, err := db.conn(ctx, strategy)   //在这里获取连接:创建新的 或 使用cache的
   if err != nil {
      return nil, err
   }
    //传入dc.releaseConn,query完毕后回调该函数
   return db.queryDC(ctx, nil, dc, dc.releaseConn, query, args)   
}

通过db.conn()获取连接,先尝试从freeConn中拿,拿到就返回;否则看是否超过maxConn,没超就创建,否则进队列等待:

func (db *DB) conn(ctx context.Context, strategy connReuseStrategy) (*driverConn, error) {
    ......
    // 尝试从连接池中拿
    numFree := len(db.freeConn)
    if strategy == cachedOrNewConn && numFree > 0 {
       conn := db.freeConn[0]
        ...
        return conn, nil
    }
    // 如果超过最大连接数,要阻塞等待
    if db.maxOpen > 0 && db.numOpen >= db.maxOpen {
        ......
    }
    //创建一个新的连接
    db.numOpen++ // optimistically  
    ci, err := db.connector.Connect(ctx)
    dc := &driverConn{
       db:        db,
       createdAt: nowFunc(),
       ci:        ci,
       inUse:     true,
    }
    db.addDepLocked(dc, dc)    
    return dc, nil
}

释放连接

释放连接在query的db.releaseConn进行,释放连接实际是将连接放入连接池db.freeConn:

func (dc *driverConn) releaseConn(err error) {
   dc.db.putConn(dc, err, true)
}

// putConn adds a connection to the db's free pool.
// err is optionally the last error that occurred on this connection.
func (db *DB) putConn(dc *driverConn, err error, resetSession bool) {
    ......
    added := db.putConnDBLocked(dc, nil)
    ......
}

// Satisfy a connRequest or put the driverConn in the idle pool and return true
// or return false.
func (db *DB) putConnDBLocked(dc *driverConn, err error) bool {
    ......
    db.freeConn = append(db.freeConn, dc)
    ......
}

查询时连接的释放

query的结果返回到Rows结构中,同时它把releaseConn传递给Row;

func (db *DB) queryDC(ctx, txctx context.Context, dc *driverConn, releaseConn func(error), query string, args []interface{}) (*Rows, error) {
    ......
    rows := &Rows{
       dc:          dc,
       releaseConn: releaseConn,    //传递relaseConn函数
       rowsi:       rowsi,
    }
    rows.initContextClose(ctx, txctx)
    return rows, nil
    ......
}

而在Rows.Next()函数中:

func (rs *Rows) Next() bool {
   var doClose, ok bool
   withLock(rs.closemu.RLocker(), func() {
      doClose, ok = rs.nextLocked()
   })
   if doClose {    //发现没有记录了,就释放连接
      rs.Close()
   }
   return ok
}

func (rs *Rows) Close() error {
   return rs.close(nil)
}

func (rs *Rows) close(err error) error {
    rs.closemu.Lock()
    defer rs.closemu.Unlock()

    if rs.closed {
       return nil
    }
    rs.closed = true    //置关闭标志位
    ......
    rs.releaseConn(err)   //释放连接
    return err
}

也就是说,用Rows.Next()来释放连接;但是,如果在使用时没有遍历到最后,它不会自动释放连接。

建议最好使用defer rows.Close()手动确认关闭,从代码可以看出,rows.Close()是可重入的(置closed标志位,下次调用直接return)。

以上就是《go database/sql -- 连接的申请与释放》的详细内容,更多关于mysql的资料请关注golang学习网公众号!

版本声明
本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
go database/sql -- 连接的申请与释放:超过最大连接数go database/sql -- 连接的申请与释放:超过最大连接数
上一篇
go database/sql -- 连接的申请与释放:超过最大连接数
MySQL数据库基础知识,mysql基础入门的最佳教程
下一篇
MySQL数据库基础知识,mysql基础入门的最佳教程
评论列表
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    542次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    508次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    497次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    484次学习
查看更多
AI推荐
  • SEO标题魔匠AI:高质量学术写作平台,毕业论文生成与优化专家
    魔匠AI
    SEO摘要魔匠AI专注于高质量AI学术写作,已稳定运行6年。提供无限改稿、选题优化、大纲生成、多语言支持、真实参考文献、数据图表生成、查重降重等全流程服务,确保论文质量与隐私安全。适用于专科、本科、硕士学生及研究者,满足多语言学术需求。
    12次使用
  • PPTFake答辩PPT生成器:一键生成高效专业的答辩PPT
    PPTFake答辩PPT生成器
    PPTFake答辩PPT生成器,专为答辩准备设计,极致高效生成PPT与自述稿。智能解析内容,提供多样模板,数据可视化,贴心配套服务,灵活自主编辑,降低制作门槛,适用于各类答辩场景。
    27次使用
  • SEO标题Lovart AI:全球首个设计领域AI智能体,实现全链路设计自动化
    Lovart
    SEO摘要探索Lovart AI,这款专注于设计领域的AI智能体,通过多模态模型集成和智能任务拆解,实现全链路设计自动化。无论是品牌全案设计、广告与视频制作,还是文创内容创作,Lovart AI都能满足您的需求,提升设计效率,降低成本。
    27次使用
  • 美图AI抠图:行业领先的智能图像处理技术,3秒出图,精准无误
    美图AI抠图
    美图AI抠图,依托CVPR 2024竞赛亚军技术,提供顶尖的图像处理解决方案。适用于证件照、商品、毛发等多场景,支持批量处理,3秒出图,零PS基础也能轻松操作,满足个人与商业需求。
    35次使用
  • SEO标题PetGPT:智能桌面宠物程序,结合AI对话的个性化陪伴工具
    PetGPT
    SEO摘要PetGPT 是一款基于 Python 和 PyQt 开发的智能桌面宠物程序,集成了 OpenAI 的 GPT 模型,提供上下文感知对话和主动聊天功能。用户可高度自定义宠物的外观和行为,支持插件热更新和二次开发。适用于需要陪伴和效率辅助的办公族、学生及 AI 技术爱好者。
    36次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码