当前位置:首页 > 文章列表 > Golang > Go问答 > 数据库连接为何会自动关闭?

数据库连接为何会自动关闭?

来源:stackoverflow 2024-02-28 09:09:23 0浏览 收藏

大家好,我们又见面了啊~本文《数据库连接为何会自动关闭?》的内容中将会涉及到等等。如果你正在学习Golang相关知识,欢迎关注我,以后会给大家带来更多Golang相关文章,希望我们能一起进步!下面就开始本文的正式内容~

问题内容

我在使用 gorm / psql 时遇到问题,数据库连接自动关闭。

我从来没有在 main.go 中调用 defer dbinstance.close() (现在不再调用,我已经删除了它,因为这是我的代码中唯一一个我认为连接可能被错误关闭的地方)也不是任何其他地方。

我初始化数据库的方式是使用“db”包,如下所示:

package db

import (
    "fmt"
    "github.com/jinzhu/gorm"
    _ "github.com/jinzhu/gorm/dialects/postgres"
)

var dbinstance *gorm.db

func init() *gorm.db {
    if dbinstance != nil {
        return dbinstance
    }
    fmt.println("opening db")
    db, err := gorm.open("postgres", "host=localhost port=5432 user=admin dbname=dbname sslmode=disable password=")
    if err != nil {
        fmt.println(err)
        panic("failed to connect database")
    }
    return db
}

然后我在 main.go 中调用 db.init() ,然后仅从程序的其余部分调用“db.dbinstance”中的数据库。

正如我之前提到的,我曾经从 main.go 调用 defer db.dbinstance.close() 但尝试将其删除以查看是否解决了问题,但没有解决。

奇怪的是,数据库连接将在许多不同的调用/函数中工作数小时,但总是在某个时刻关闭。

据我了解,它应该有效:

gorm.open() 使用 https://golang.org/pkg/database/sql/,即 线程安全并为您处理连接池。不要打电话 gorm.open() 每个请求。设置时调用一次 应用程序,并确保使用 defer db.close() 以便连接 当你的程序退出时干净地结束。

最后我需要补充一点,似乎(我不是 100% 确定)在我进行批量插入后它正在关闭,但 .close() 函数在我的程序中的任何地方都不会被调用.

我有点迷茫,不知道会发生什么?垃圾收集器(var 是全局的没有意义)? psql 驱动程序在后台关闭?配置问题?

我添加批处理函数以供参考,以防万一:

func insertwithpostgreslimitsizev2(db *gorm.db, array []interface{}) {
    if len(array) == 0 {
        return
    }
    numberofparams := len(db.newscope(array[0]).fields())
    // postgres is limited to 65535 params.
    maxstructperbulk := int(65535 / numberofparams)
    currentindex := 0
    if len(array) > maxstructperbulk {
        for len(array) > currentindex {
            if (maxstructperbulk + currentindex) < len(array) {
                slice := array[currentindex:(currentindex + maxstructperbulk)]
                currentindex += maxstructperbulk
                _, err := db.batchinsert(slice)
                log.println(err)
            } else {

                slice := array[currentindex:len(array)]
                currentindex = len(array)
                _, err := db.batchinsert(slice)
                log.println(err)
            }
        }
    } else {
        _, err := db.batchinsert(array)
        log.println(err)
    }
}

func batchinsert(db *gorm.db,objarr []interface{}) (int64, error) {
    if len(objarr) == 0 {
        return 0, errors.new("insert a slice length of 0")
    }

    mainobj := objarr[0]
    mainscope := db.newscope(mainobj)
    mainfields := mainscope.fields()
    quoted := make([]string, 0, len(mainfields))
    for i := range mainfields {
        if (mainfields[i].isprimarykey && mainfields[i].isblank) || (mainfields[i].isignored) {
            continue
        }
        quoted = append(quoted, mainscope.quote(mainfields[i].dbname))
    }

    placeholdersarr := make([]string, 0, len(objarr))

    for _, obj := range objarr {
        scope := db.newscope(obj)
        fields := scope.fields()
        placeholders := make([]string, 0, len(fields))
        for i := range fields {
            if (fields[i].isprimarykey && fields[i].isblank) || (fields[i].isignored) {
                continue
            }
            var vars interface{}
            if (fields[i].name == "createdat" || fields[i].name == "updatedat") && fields[i].isblank {
                vars = gorm.nowfunc()
            } else {
                vars = fields[i].field.interface()
            }
            placeholders = append(placeholders, mainscope.addtovars(vars))
        }
        placeholdersstr := "(" + strings.join(placeholders, ", ") + ")"
        placeholdersarr = append(placeholdersarr, placeholdersstr)

        mainscope.sqlvars = append(mainscope.sqlvars, scope.sqlvars...)
    }
    mainscope.raw(fmt.sprintf("insert into %s (%s) values %s",
        mainscope.quotedtablename(),
        strings.join(quoted, ", "),
        strings.join(placeholdersarr, ", "),
    ))
    if err := mainscope.exec().db().error; err != nil {
        return 0, err
    }
    return mainscope.db().rowsaffected, nil
}

最后一件事是,我正在考虑通过调用我的数据库来“修复”问题,但 ping 会减慢我的每个调用:

func getDb() *gorm.DB {
    err := DbInstance.DB().Ping()
    if err != nil {
        fmt.Println("Connection to db closed opening a new one")
        return Init()
    }
    return DbInstance
}

解决方案


您可以全局搜索 dbinstance.close() 以确保永远不会调用它来自行关闭它。 如果没有,您可以将数据库超时设置得更长并增加空闲数据库连接数。

最后,最重要的是支持自动重连数据库数据源。

这是我的自动重新连接部分,您可以参考:

var db *gorm.db
func init() {
    dbconfig = fmt.sprintf("host=%s user=%s dbname=%s sslmode=%s password=%s",
        "localhost",
        "postgres",
        "dbname",
        "disable",
        "password",
    )
    db, err := gorm.open("postgres",
        dbconfig,
    )
    db.singulartable(true)
    db.logmode(true)
    db.db().setconnmaxlifetime(10 * time.second)
    db.db().setmaxidleconns(30)
    db = db
    // auto-connect,ping per 60s, re-connect on fail or error with intervels 3s, 3s, 15s, 30s, 60s, 60s ...
    go func(dbconfig string) {
        var intervals = []time.duration{3 * time.second, 3 * time.second, 15 * time.second, 30 * time.second, 60 * time.second,
        }
        for {
            time.sleep(60 * time.second)
            if e := db.db().ping(); e != nil {
            l:
                for i := 0; i < len(intervals); i++ {
                    e2 := retryhandler(3, func() (bool, error) {
                        var e error
                        db, e = gorm.open("postgres", dbconfig)
                        if e != nil {
                            return false, errorx.wrap(e)
                        }
                        return true, nil
                    })
                    if e2 != nil {
                        fmt.println(e.error())
                        time.sleep(intervals[i])
                        if i == len(intervals)-1 {
                            i--
                        }
                        continue
                    }
                    break l
                }

            }
        }
    }(dbconfig)
}

顺便说一下:

// Try f() n times on fail and one time on success 
func RetryHandler(n int, f func() (bool, error)) error {
    ok, er := f()
    if ok && er == nil {
        return nil
    }
    if n-1 > 0 {
        return RetryHandler(n-1, f)
    }
    return er
}

终于介绍完啦!小伙伴们,这篇关于《数据库连接为何会自动关闭?》的介绍应该让你收获多多了吧!欢迎大家收藏或分享给更多需要学习的朋友吧~golang学习网公众号也会发布Golang相关知识,快来关注吧!

版本声明
本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
将 objectid 切换为 objectidhex 后,Mongodb 无法正确读取将 objectid 切换为 objectidhex 后,Mongodb 无法正确读取
上一篇
将 objectid 切换为 objectidhex 后,Mongodb 无法正确读取
将字符串传递给Go语言系统调用的参数
下一篇
将字符串传递给Go语言系统调用的参数
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    375次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    446次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    454次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    399次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    226次使用