当前位置:首页 > 文章列表 > 文章 > python教程 > 如何在Python中处理高并发WebSocket连接_基于FastAPI与Uvicorn部署

如何在Python中处理高并发WebSocket连接_基于FastAPI与Uvicorn部署

2026-05-02 15:15:43 0浏览 收藏

学习文章要努力,但是不要急!今天的这篇文章《如何在Python中处理高并发WebSocket连接_基于FastAPI与Uvicorn部署》将会介绍到等等知识点,如果你想深入学习文章,可以关注我!我会持续更新相关文章的,希望对大家都能有所帮助!

单机支撑5000+ WebSocket连接需避开三大坑:连接管理(用set+心跳+异常移除)、消息广播(asyncio.gather并发发送+分批+过滤)、阻塞调用(全程异步+线程池+异步DB/HTTP)。

如何在Python中处理高并发WebSocket连接_基于FastAPI与Uvicorn部署

单机撑住 5000+ 活跃 WebSocket 连接,不是靠堆硬件,而是避开连接管理、消息广播、阻塞调用这三个坑。FastAPI + Uvicorn 组合本身足够强,但默认写法极易掉进同步陷阱。

async def websocket_endpoint() 必须全程异步

常见错误是:在 websocket.receive_text() 和 websocket.send_text() 之间插入 time.sleep()、requests.get()、未加 await 的数据库查询,或直接用 json.loads() 解析大 JSON 字符串。这些操作会卡死整个事件循环,所有连接一起变卡。

  • HTTP 调用必须换 httpx.AsyncClient,不能用 requests
  • 数据库必须用异步驱动:asyncpg(PostgreSQL)、aiomysql(MySQL),而非 psycopg2 或 pymysql
  • CPU 密集型操作(如大 JSON 解析、加密)要丢进线程池:await asyncio.to_thread(json.loads, data)
  • Pydantic 校验默认同步,高频场景建议关掉或改用 model_validate_json() 避免重复解析

别用 list 存连接,set + try/except 才安全

用 active_connections = [] 然后遍历发送,看似简单,但客户端异常断开(比如关浏览器、网络中断)时,websocket.send_text() 会抛出异常,若没捕获,连接就永远留在列表里 → 内存持续上涨 → OOM。

  • 改用 set 而非 list,天然去重且增删快
  • 每次广播前必须对每个连接做 try/except,捕获 WebSocketDisconnect 和通用 Exception,失败后立即从 set 中移除
  • 加心跳检测:在 while True: 循环里定期 await websocket.ping(),超时主动 close()
  • 生产环境务必用 psutil.Process().memory_info().rss 定期打点监控连接数与内存增长

Uvicorn worker 数和并发限制必须手动配

gunicorn main:app -k uvicorn.workers.UvicornWorker -w 4 是常见配置,但盲目加 -w 反而降低性能 —— Uvicorn 本身是单线程异步,每个 worker 独占一个事件循环;过多 worker 会导致 CPU 上下文切换激增、内存冗余、甚至文件描述符耗尽。

  • worker 数推荐值:CPU 核心数 × 1~1.5(例如 4 核机器设 -w 4 或 -w 6)
  • 必须加 --limit-concurrency 100,防止单个 worker 接收过多连接压垮内存
  • 启用 --ws-per-message-deflate 开启 WebSocket 压缩,文本消息体积可减小 40%+
  • 生产环境禁用 --reload,它会 fork 多个进程导致连接状态不同步

广播不能 for-loop + await 逐个发

当有 2000 个连接时,for conn in connections: 然后 await conn.send_text(...) 是串行的,总延迟爆炸。正确做法是并发发起所有 send,再统一等待完成。

  • 用 asyncio.gather(*[conn.send_json(msg) for conn in connections], return_exceptions=True)
  • 不要用 return_exceptions=False,否则一个连接失败整个广播就中断
  • 如果连接数极大(>3000),建议分批 gather,每批 100~200 个,避免 event loop 负载过重
  • 广播前先过滤掉已关闭连接(靠心跳标记或 try/except 捕获结果判断),减少无效调用

最易被忽略的是连接泄漏和广播异常处理 —— 它们不会立刻报错,但会在几小时后让服务缓慢崩塌。上线前务必压测并观察 psutil 内存曲线和连接数变化趋势。

好了,本文到此结束,带大家了解了《如何在Python中处理高并发WebSocket连接_基于FastAPI与Uvicorn部署》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多文章知识!

如何设置文本域的行数和列数如何设置文本域的行数和列数
上一篇
如何设置文本域的行数和列数
115网盘资源访问通道_115网盘资源便捷获取链接
下一篇
115网盘资源访问通道_115网盘资源便捷获取链接
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    297次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    352次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    353次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    318次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    136次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码