Python json.loads 解析超大整数时如何限制输入风险
处理外部 JSON 时,别把“JSON 文档有多大”和“某个整数有多少位”混成一个限制。json.loads() 负责语法解析,Python 3.11 起默认的 parse_int=int 会受解释器整数字符串长度限制;但一旦传入自定义 parse_int,业务代码就应该自己检查数字 token。更稳妥的做法是:入口先限制请求体或文件大小,再用 parse_int 限制单个整数的十进制位数。
- 默认整数转换的限制不等于整个 JSON 的大小限制。
parse_int收到的是每个 JSON 整数字面量的字符串,可以在转成int前拒绝超长值。- 生产接口应同时设置请求体上限、整数位数上限,并把拒绝原因记录为可区分的输入错误。
先分开文档大小和整数位数
一个 200 KB 的 JSON 可能包含很多正常数字,也可能只含一个几千位的整数。前者主要消耗请求读取和对象构造资源,后者会进入十进制整数转换。因此建议先把边界写成两个名字清楚的配置:MAX_JSON_BYTES 控制原始输入,MAX_INT_DIGITS 控制单个整数。
| 边界 | 检查位置 | 超过后的处理 |
|---|---|---|
| JSON 文档字节数 | 调用 json.loads 前 | 直接拒绝,不进入解析 |
| 整数十进制位数 | parse_int 内部 | 抛出 ValueError,不创建超大 int |
| JSON 语法 | json.loads 内部 | 捕获 JSONDecodeError |
为什么只调解释器限制还不够
Python 文档说明,json.loads 的 parse_int 默认等价于 int(num_str)。从 Python 3.11 开始,这个默认转换会使用解释器的整数字符串长度限制,默认值通常是 4300 位,具体应以当前解释器的 sys.int_info 为准。它解决的是十进制整数转换的通用成本问题,不会限制整个请求体,也不会替你制定业务字段的更小上限。
更容易漏掉的是自定义解析器:如果直接写成 parse_int=lambda value: int(value),你就重新接管了这条路径;如果换成字符串或其他数值类型,也不能假设默认 int 限制仍然存在。解释器级配置适合统一约束进程,接口级规则仍要在输入入口明确表达。

用 parse_int 建立业务级数字边界
下面的解析器把负号排除在位数统计之外,再调用 int(token) 完成真正转换。ValueError 不是模糊的“解析失败”,而是可以在接口层映射为“整数过长”的输入错误。示例没有把上限调成 0,也没有为了兼容超大 ID 把所有数字转换成浮点数;ID 是否应该用字符串,应由接口协议决定。
import json
MAX_JSON_BYTES = 1_000_000
MAX_INT_DIGITS = 100
def bounded_int(token: str) -> int:
# 负号不是数字位,按绝对值的十进制位数判断。
digits = token[1:] if token.startswith("-") else token
if len(digits) > MAX_INT_DIGITS:
# 在创建大整数前拒绝,避免把策略交给默认配置。
raise ValueError("integer literal is too long")
# 合法的小整数仍保持 Python int,方便后续业务计算。
return int(token)
def loads_safely(body: bytes):
# 请求体大小和单个整数大小是两条独立边界。
if len(body) > MAX_JSON_BYTES:
raise ValueError("JSON document is too large")
# parse_int 会接收每个 JSON 整数字面量的字符串。
return json.loads(body, parse_int=bounded_int)
这里的关键顺序不是“先把数字转出来再检查”,而是把位数判断放在 int(token) 之前。对一个正常请求,payload 中的普通整数仍是 int;对超限请求,异常在解析边界处结束,不会继续进入业务层。

把限制放到输入入口并检查异常
HTTP 框架通常还应在 Web 服务器或中间件设置请求体上限;函数内的 len(body) 是最后一道清晰的应用边界,不是替代网络层限流的方案。对文件输入也一样,尽量先取得受控的 bytes,再传给解析器。
import json
def decode_payload(body: bytes):
# 先区分请求体过大,再进入 JSON 语法与数字策略。
try:
return loads_safely(body)
except ValueError as exc:
# 统一处理整数过长、文档过大等业务输入边界。
raise ValueError(f"JSON input rejected: {exc}") from exc
except json.JSONDecodeError as exc:
# 语法错误单独保留,便于返回 400 或记录字段位置。
raise ValueError(f"invalid JSON at position {exc.pos}") from exc
如果需要更严格的 API 错误码,可以把两个 ValueError 换成自定义异常,例如 PayloadTooLarge 和 IntegerTooLong。这样监控能区分客户端发送了过大文档,还是某个字段的数字超出协议约定。
解释器级配置应该放在哪里
sys.get_int_max_str_digits() 可以查看当前进程的解释器级限制,sys.set_int_max_str_digits() 可以调整它。这个设置影响进程中的通用整数字符串转换,过低还可能影响包含超长十进制整数字面量的源码导入,所以不建议为了一个接口在任意业务函数里全局修改。
如果确实需要统一策略,把设置放在明确的启动入口,并在测试环境覆盖边界值。对单个 JSON 字段,优先使用 bounded_int 这样的局部规则;对请求体大小,则由网关、框架和应用三层协同限制。这样既能保留 Python 默认保护,也不会把业务协议写成一个隐含的全局副作用。
相关问题
Python 3.10 能直接依赖默认的 json.loads 限制吗?
不能把跨版本行为当成业务规则。若要兼容旧版本,使用显式的 parse_int 位数检查,并在部署矩阵中测试超限输入。
把 parse_int 改成 decimal.Decimal 能解决风险吗?
它改变的是数值类型,不等于限制输入长度。仍应在自定义解析函数中先检查 token,另外为小数和指数形式定义单独策略。
把超大 ID 全部改成字符串可以吗?
可以,但要让接口协议、序列化格式和数据库字段保持一致。字符串化是语义选择,不应作为无条件绕过输入边界的办法。
Go runtime.SetFinalizer 遇到引用环时为什么不执行
- 上一篇
- Go runtime.SetFinalizer 遇到引用环时为什么不执行
- 下一篇
- SkildArt Agent模式如何提高效率?复用任务简报与审核节点
-
- 文章 · python教程 | 2小时前 |
- Python zoneinfo 处理夏令时重复小时要看 fold 吗
- 102浏览 收藏
-
- 文章 · python教程 | 3小时前 |
- Python Fraction 从浮点数构造为什么得到很长分数
- 411浏览 收藏
-
- 文章 · python教程 | 4小时前 | python · decimal · 数值计算 · context Python Decimal quantize localcontext
- Python decimal 局部精度和全局上下文如何隔离
- 346浏览 收藏
-
- 文章 · python教程 | 1天前 | csv · python · csv DictReader restkey restval
- csv DictReader 缺列怎么配置或排查
- 434浏览 收藏
-
- 文章 · python教程 | 1天前 | 包管理 · python · 排错 · Python版本 pyproject.toml importlib.metadata
- importlib.metadata 版本怎么配置或排查
- 287浏览 收藏
-
- 文章 · python教程 | 1天前 | 命令行 · 编码 · python · subprocess · encoding subprocess TEXT stdout stderr
- subprocess 文本输出怎么配置或排查
- 444浏览 收藏
-
- 文章 · python教程 | 1天前 | python · logging · QueueListener · QueueHandler ·
- logging QueueHandler怎么配置或排查
- 303浏览 收藏
-
- 文章 · python教程 | 1天前 |
- sqlite3 autocommit怎么配置或排查
- 488浏览 收藏
-
- 文章 · python教程 | 1天前 |
- cache 与 lru_cache怎么配置或排查
- 377浏览 收藏
-
- 文章 · python教程 | 1天前 |
- enum.StrEnum 值怎么配置或排查
- 298浏览 收藏
-
- 文章 · python教程 | 1天前 |
- dataclasses.replace怎么配置或排查
- 282浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 22次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 125次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 50次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 20次使用
-
- OpenCompass
- OpenCompass是上海AI实验室推出的开源大模型评测平台,提供CompassKit、CompassHub和CompassRank三大核心组件,支持LLM及多模态模型的一站式标准化评估与排行榜查询。
- 71次使用
-
- Python sqlite3 Connection serialize 怎么导出数据库快照:备份窗口、内存占用与恢复校验
- 2026-08-26 501浏览
-
- Python监控网页状态:requests异常处理实战
- 2026-05-29 501浏览
-
- TensorFlow模型部署为API的TF Serving方法
- 2026-05-26 501浏览
-
- Python字符串编码转换:encode与decode详解
- 2026-05-16 501浏览
-
- TensorFlow裁剪无用算子方法详解
- 2026-05-15 501浏览

