golang中TCPListener连接数超过60 / 260时的错误处理

在 Go 中使用 net.TCPListener 时，如果连接数超过 60/260，可能会遇到错误。在处理传入请求时，当连接数超过 59/258 时，会发生意外套接字关闭问题。目前尚不清楚这些限制是由于 net 包中的限制还是系统限制造成的。代理与 Vertica 数据库之间的连接方式可能是影响因素之一，因为 Vertica 默认最多允许 50 个普通用户连接到一个节点。

我正在构建 TCP 代理： client <-> proxy <-> Vertica

我有一个 net.TCPListener，它接受 AcceptTCP() 的传入请求并创建连接，然后通过 net.DialTCP("tcp", nil, raddr) 与目标套接字建立连接。看起来像一座桥。默认代理模型。

首先，在第一个版本中，我遇到了一个麻烦：如果我有 59 个并行传入请求，则一切都很好。但如果我还有一个（60），我就会遇到麻烦：1-59 连接没问题，但 60 及更新的连接就出问题了。我无法正确捕获错误。看起来某些套接字意外关闭

其次，我尝试为侦听器设置队列。它对我帮助很大：但如果我有超过 258 个请求，我会再次收到错误。

我的问题：net 包中的连接数有限制吗？可能是系统限制？

对于外部信息：Vertica在docker容器中运行，硬件/系统：macbook，vertica限制连接池：5，但池逻辑实现到代理中。 我还尝试设置没有池逻辑的“原始”代理（这就是为什么我为侦听器设置队列：我不能超过 Vertica 用户池的阈值），结果是 258 个请求..

更新：（2020 年 4 月 5 日）

看起来这是系统限制错误。我是否在任何地方提到过我试图在一台 PC 上运行整个系统？

所以，我拥有的是：

• 300 个并行进程作为请求（由 multiprocessing.Pool 制作） Python）（300 个套接字）
• 创建 300 个连接的监听器（一次 超过 300 个插座）
• 以及一系列快速创建/关闭套接字 代理深度（根据队列和Vertica池）

我现在拥有的：

• 从本地网络中的另一台电脑（在 Windows 上）发出 300 个 Python 请求
• 代理工作正常
• 但我在 Windows PC 上遇到了几个错误，这些错误向我的代理创建了请求。诸如“交换文件”内存不足之类的错误。

我还需要对代理进行一些压力测试。为交换文件添加更少的内存并不能解决我在 Windows PC 上的问题。我将不胜感激任何建议和想法。谢谢！

解决方案

代理如何连接到 vertica？ 默认情况下，任一时间最多有 50 个普通用户连接到一个 vertica 节点。除此之外，超级用户“dbadmin”始终有 5 个连接。

因此，如果我尝试以 dbadmin 身份连接 60 次，我会在默认 vertica 配置中得到此信息：

Connection attempt failed: FATAL 4060:  New session rejected due to limit, already 55 sessions active

您可以增加 vertica 配置项 maxclientsessions 的默认值（每个节点 50 个）。

例如，命令为：alter node <_node_name_> set maxclientsessions = 100。

我想您始终连接到同一个 vertica 节点，并且您已将 connectionloadbalancing 设置为 false。所以你总是连接到同一个节点，很快就达到默认的最大值 50。

希望这就是找到的原因......

好了，本文到此结束，带大家了解了《golang中TCPListener连接数超过60 / 260时的错误处理》，希望本文对你有所帮助！关注golang学习网公众号，给大家分享更多Golang知识！