当前位置:首页 > 文章列表 > 文章 > php教程 > PHP 大 CSV 文件怎么逐行导入并跳过空行

PHP 大 CSV 文件怎么逐行导入并跳过空行

来源:17golang原创 2026-09-05 12:32:17 0浏览 收藏

PHP 处理大 CSV 时,推荐用 fopen() 打开流,再用 fgetcsv() 一次读取一条记录。不要先调用 file() 把整文件装进数组;空行要按 [null] 单独跳过,而不是用没有边界的真假判断。下面的写法保留合法的 0 值,也能处理字段内部带换行的标准 CSV。

核心做法:用 while (($row = fgetcsv($fp, null, ',', '"', '')) !== false) 流式读取,先识别空记录,再校验列数,最后把当前行交给导入逻辑。

先记住三个判断:内存由当前行决定;空 CSV 行通常是单个 null;PHP 8.4 起应显式传入 escape,需要兼容 RFC 4180 时可传空字符串。

打开文件并让 fgetcsv 逐条读取

fopen($path, 'rb') 返回文件资源或 false。读取循环应直接判断 fgetcsv() 的返回值,这样最后一行不会被重复处理,也不会把 feof() 的状态误当成“下一条数据已存在”。

CSV 文件、fopen 文件句柄、fgetcsv 解析器、当前记录、字段数组与业务处理的静态关系
图1:从 CSV 文件到字段数组的静态结构,说明流式读取只保留当前记录。

这里把长度参数写成 null,表示不限制最大行长,适合无法预估列内容的导入任务;如果业务能确定最长记录,也可以传一个足够大的整数。逗号、双引号和空转义字符应与文件协议保持一致,不能只依赖默认值。

识别空行并跳过无效记录

官方手册明确说明,CSV 中的空行会返回只含一个 null 的数组。因此,先判断 $row === [null]。如果某些文件会出现“逗号很多但每个字段都是空白”的记录,再做一次字段级检查。不要直接写 if (!$row),否则无法表达字段语义,也容易把合法的零值处理错。

function isBlankCsvRow(array $row): bool
{
    if ($row === [null]) {
        return true;
    }

    foreach ($row as $value) {
        if ($value !== null && trim((string) $value) !== '') {
            return false;
        }
    }

    return true;
}

while (($row = fgetcsv($fp, null, ',', '"', '')) !== false) {
    if (isBlankCsvRow($row)) {
        continue;
    }
    // 空记录之外,0、0.00 和 "0" 都会继续保留
}
fgetcsv 返回值、单 null 空行、trim 空白判断、字段数组、列数校验和可导入记录的静态关系
图2:空记录过滤与列数校验的静态关系,避免把合法 0 值误删。

把表头映射到字段并处理数据

如果第一行是表头,可以只保存这一行,后续用 array_combine() 生成关联数组。调用前必须检查列数,否则缺列时会得到错误或错位数据。大文件场景下,处理完一行就写入数据库、消息队列或批量缓冲区,不要再把所有行追加到 $rows

$header = null;
$line = 0;

while (($row = fgetcsv($fp, null, ',', '"', '')) !== false) {
    $line++;
    if (isBlankCsvRow($row)) {
        continue;
    }

    if ($header === null) {
        $header = array_map(
            static fn ($value) => trim((string) $value),
            $row
        );
        continue;
    }

    if (count($row) !== count($header)) {
        error_log("第 {$line} 行列数不一致");
        continue;
    }

    $record = array_combine($header, $row);
    // 例如:导入 $record['order_id'],完成后释放本行引用
}

表头带 UTF-8 BOM 时,第一列名称可能多出不可见字节,可在读取第一行后针对首字段移除 BOM。编码转换也应放在文件边界处理,不要把 CSV 语法拆成 explode(',');被双引号包住的字段可能包含逗号,甚至包含换行。

处理 CSV 的边界情况

情况建议原因
文件不存在或无权限检查 fopen() 是否为 false避免把无效句柄传给读取函数
空行判断 $row === [null],必要时再做 trim空行不是读取失败
字段内有逗号或换行使用 fgetcsv(),不要用 explode()CSV 包围符需要由解析器处理
PHP 8.4+显式传入 escape,兼容性要求高时使用 ''默认 escape 的依赖已被弃用
循环结束fgetcsv() !== false 为主条件feof() 只表示指针状态,不提供下一行

如果生产文件的分隔符不是逗号,只需同步替换第三个参数;分隔符、包围符和 escape 都必须是单字节字符或符合手册要求的空字符串。导入失败行建议记录行号和原因,继续处理后续数据,是否回滚由业务事务边界决定。

常见问题

为什么不用 file() 读取大 CSV?

file() 会先建立包含整文件行内容的数组,数据量大时内存压力明显。fopen()fgetcsv() 只保留当前记录,更适合边读边处理。

空行能不能用 array_filter($row) 过滤?

不建议把它作为整行规则。array_filter() 默认会移除 PHP 认为为空的值,其中包括 0'0' 和空字符串;CSV 导入应先识别单 null 空行,再按业务决定空字段是否合法。

fgetcsv 会不会把引号内换行拆成多条记录?

符合 CSV 包围规则时,解析器会继续读取直到字段包围结束;因此应让 fgetcsv() 负责解析,不要用按换行切割的方式替代它。

参考资料:PHP fgetcsv 手册PHP fopen 手册PHP feof 手册PHP array_filter 手册

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go append 后原切片也变了是什么原因Go append 后原切片也变了是什么原因
上一篇
Go append 后原切片也变了是什么原因
下一篇
下一篇
暂无
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • SuperCLUE中文大模型评测基准:功能、能力维度与应用指南
    SuperCLUE
    SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
    146次使用
  • C-Eval中文评测基准:大语言模型多学科能力评估指南
    C-Eval
    深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
    68次使用
  • ClickPrompt:AI提示词生成与优化工具,支持Stable Diffusion、ChatGPT及代码辅助
    ClickPrompt
    ClickPrompt是一款专为AI提示词编写者设计的开源在线工具,支持Stable Diffusion绘图、ChatGPT对话及GitHub Copilot代码辅助。提供Prompt自动生成、一键运行、社区分享及可视化优化功能,帮助用户高效获取精准AI输出。
    35次使用
  • PromptHero官网:AI提示词搜索、优化与学习平台,支持Midjourney/Stable Diffusion
    PromptHero
    PromptHero是专业的AI提示词搜索引擎与优化平台,支持Stable Diffusion、Midjourney等主流模型。提供海量提示词库、分类搜索、在线课程及社区互动,助力用户高效生成高质量AI图像与文本。
    15次使用
  • OpenArt免费开源指南:Stable Diffusion Prompt Book提示词手册详解
    Stable Diffusion Prompt Book
    深入解析OpenArt推出的Stable Diffusion Prompt Book,这本免费的开源提示词指南涵盖从基础语法到高级技巧,提供风格化词库与参数建议,助您优化AI绘画生成效果。
    21次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码