Pandasconcat合并df1和df2方法详解
本文深入解析了Pandas中`pd.concat()`的核心用法与关键边界,强调它本质是“物理拼接”而非“逻辑关联”——仅按轴(axis=0纵向堆叠行、axis=1横向对齐索引拼列)机械组合DataFrame,不依赖键值匹配、不校验业务一致性,也完全不支持`on`参数;文章直击高频痛点:列名冲突报错、索引重复导致后续操作异常、横向拼接因索引不齐产生大量NaN,同时清晰划清与`merge()`的使用分界线:有明确语义关联(如按ID匹配)必须用`merge()`,无逻辑关系的纯粹叠加或并列展示才属`concat()`的主场,帮你避开90%的误用陷阱。
![Pandas怎么拼接两张表_concat([df1,df2], axis)纵向与横向拼接详解](/uploads/20260428/177736938569f08129a09d0.png)
什么时候该用 pd.concat(),而不是 merge() 或 join()
当你只是想把表“摞起来”或“并排摆”,不关心逻辑关联(比如没有主键、没有语义匹配),就该用 pd.concat()。它不做任何键值对齐,只按轴堆叠——像把两叠纸直接粘成一叠,或并排放到一张大桌子上。
常见错误现象:pd.concat([df1, df2], on='id') 报错 TypeError: concat() got an unexpected keyword argument 'on' ——因为 concat() 根本不认 on 参数,那是 merge() 的专属。
- 纵向拼接(
axis=0):适合合并结构相同、记录类型一致的多批数据,比如不同月份的销售流水 - 横向拼接(
axis=1):适合把两个表按行索引对齐后“并列展示”,比如同一组用户的基础信息 + 行为统计指标 - 如果两张表索引不一致,
axis=1会自动用NaN填缺失位置;不加干预时默认join='outer',即保留所有索引
axis=0 和 axis=1 的真实行为差异
axis=0 是按行堆叠,结果行数 = len(df1) + len(df2);axis=1 是按列拼接,结果列数 = len(df1.columns) + len(df2.columns),但行数取决于索引对齐方式。
容易踩的坑:pd.concat([df1, df2], axis=1) 看似简单,但如果 df1.index 和 df2.index 不完全重合,就会出现大量 NaN,且默认保留全部索引(join='outer'),可能让结果比预期宽得多、稀疏得多。
- 要严格只保留共有的索引行?加
join='inner' - 想重置最终索引避免重复编号?加
ignore_index=True(仅对axis=0有效) - 横向拼接时若列名冲突(如都有
'name'),concat()不会自动加后缀,而是直接报错ValueError: Columns overlap;此时需提前重命名列或改用merge()
列名重复、索引混乱、内存暴涨——三个高频实际问题
拼接不是“点一下就完事”,尤其在真实项目中,原始表往往没那么规整。
- 列名重复:用
pd.concat(..., keys=['left', 'right'])可生成多级列索引,避免冲突;或手动改列名:df2.columns = [f'new_{c}' for c in df2.columns] - 索引混乱:若原始表是读 Excel 得来的,默认索引是
0, 1, 2...,axis=0拼接后会出现重复索引;建议加ignore_index=True,否则后续.groupby()或.loc[]可能出错 - 内存暴涨:大表拼接时,
pd.concat()默认复制数据;若确定原表不再修改,可加copy=False(Pandas ≥ 2.0 支持,旧版无效)
和 merge() 混用的边界场景
有些需求表面像拼接,实则需要语义对齐——比如你有「学生名单」和「考试成绩」,都带 'student_id',但你想把成绩“贴”到对应学生后面,而不是简单按顺序堆叠。这时 concat() 无能为力,必须用 merge()。
一个典型误用:pd.concat([students, scores], axis=1) 依赖两者索引顺序一致,一旦中间有人被删/排序变动,成绩就全错位了。而 pd.merge(students, scores, on='student_id') 才真正按逻辑关联。
- 判断依据很简单:是否需要“根据某个字段查匹配”?需要 → 用
merge();不需要 → 用concat() - 横向拼接前先问一句:这两张表的第 0 行,是不是天然就该是一条记录的两部分?如果是,
concat(axis=1)合理;如果不是,大概率该用merge()
最常被忽略的一点:concat() 不校验数据一致性,它只管形状。哪怕 df1 有 1000 行、df2 有 500 行,axis=0 后就是 1500 行——至于这 1500 行有没有业务意义,它不管。
今天关于《Pandasconcat合并df1和df2方法详解》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
百度网盘修改下载路径方法
- 上一篇
- 百度网盘修改下载路径方法
- 下一篇
- LocalSend无法接收文件怎么解决
-
- 文章 · python教程 | 6小时前 | python · Python tarfile extraction_filter data_filter
- Python tarfile extraction_filter 怎么阻止危险路径
- 232浏览 收藏
-
- 文章 · python教程 | 8小时前 |
- Python pathlib.Path.walk 怎么剪枝目录遍历
- 159浏览 收藏
-
- 文章 · python教程 | 11小时前 | python · SQLite · Python sqlite3 autocommit isolation_level SQLite事务
- Python sqlite3 autocommit 与 isolation_level 怎么配合
- 378浏览 收藏
-
- 文章 · python教程 | 16小时前 | 并发 · 异步编程 · Python教程 · Python 任务调度 asyncio eager_task_factory
- Python asyncio eager task factory 什么时候会改变执行顺序
- 497浏览 收藏
-
- 文章 · python教程 | 19小时前 |
- Python zoneinfo部署时区数据缺失的兼容处理
- 378浏览 收藏
-
- 文章 · python教程 | 1天前 |
- Python functools.cache与lru_cache按场景选择的参数清单
- 211浏览 收藏
-
- 文章 · python教程 | 2天前 | python ·
- Python multiprocessing共享状态与进程安全队列的选择
- 316浏览 收藏
-
- 文章 · python教程 | 3天前 |
- Python re用分组字典解析可选日志字段的实现
- 470浏览 收藏
-
- 文章 · python教程 | 3天前 | JSON · python · Python NaN json.loads Infinity parse_constant
- Python json.loads解析非标准数字的容错边界
- 267浏览 收藏
-
- 文章 · python教程 | 6天前 |
- Python csv.DictReader处理缺失列与额外列的办法
- 105浏览 收藏
-
- 文章 · python教程 | 6天前 |
- Python logging按请求注入上下文字段的过滤器方案
- 324浏览 收藏
-
- 文章 · python教程 | 6天前 | Python教程 · Python 泛型 callable typing.Protocol 结构化子类型
- Python typing.Protocol配合泛型描述可调用对象的方式
- 355浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 234次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 278次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 247次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 229次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 29次使用
-
- Python sqlite3 Connection serialize 怎么导出数据库快照:备份窗口、内存占用与恢复校验
- 2026-08-26 501浏览
-
- Python监控网页状态:requests异常处理实战
- 2026-05-29 501浏览
-
- TensorFlow模型部署为API的TF Serving方法
- 2026-05-26 501浏览
-
- Python字符串编码转换:encode与decode详解
- 2026-05-16 501浏览
-
- TensorFlow裁剪无用算子方法详解
- 2026-05-15 501浏览
