PHP str_word_count 的附加字符列表怎样改变单词识别
我第一次用 str_word_count() 处理带编号的英文标签时,最容易误判的地方不是“怎么计数”,而是“哪些字符算在单词里”。这个函数的第三个参数 characters 就是调整边界的入口:它把指定的附加字符视为单词字符,但不会把函数变成通用的 Unicode 分词器。
官方地址:https://www.php.net/manual/en/function.str-word-count.php
实际使用时,可以先用 format=1 看清单词数组,再决定是否把数字、连字符或其他 ASCII 字符加入 characters。如果只需要数量,用 format=0;如果还要原文位置,用 format=2。
先看默认边界,再加入附加字符
PHP 手册把 word 定义为与 locale 有关的字母字符串,也允许单词内部出现撇号和连字符,但这两个字符不能出现在开头。数字并不自动等同于字母,所以像 v2alpha 这样的标识符,最好不要凭直觉猜结果。
这里的重点是第三个参数只描述“额外允许的字符”。字母仍按函数原本的规则识别;加入 0123456789- 后,版本号和短横线可以参与单词边界判断。不要把 characters 当作“允许字符白名单”,也不要把它写成正则表达式。

characters 扩大单词字符集合的静态说明图,不是 PHP 控制台截图,也不是运行证据。把字符列表当作输入契约的一部分
如果数据来自版本标签、文件名或简单英文标识,建议把字符列表写成有名字的变量,并在代码旁说明业务约定。这样别人看到 0123456789- 时,知道它服务于“版本号和短横线”,而不是随手放开的字符集合。
这里还要注意顺序:先确认原始数据的语义,再决定是否允许符号。若原文是自然语言而不是标识符,盲目加入短横线可能让统计口径和读者理解不一致。
根据结果用途选择 format
format 决定函数返回什么:0 返回整数计数,1 返回按出现顺序排列的单词数组,2 返回“原字符串中的位置 => 单词”的关联数组。调试字符列表时我通常先用 1;需要把结果映射回原文时再用 2。
第三种结果适合做高亮、索引或截取前几个词,但位置是原字符串中的偏移,不是数组下标。characters 改变了边界,位置映射也会随之改变,所以这两个参数应该作为同一个解析契约保存。

format 返回形态与多字节边界的静态说明图,不是运行结果截图。多字节文本和异常边界不要忽略
官方说明明确指出,str_word_count() 不支持多字节 locale。因此中文、日文或包含复杂 Unicode 组合的文本,不适合直接用它做可靠分词;应根据文本语言改用面向 Unicode 的方案。characters 也不能弥补这个限制,它只是在该函数的识别规则上增加字符。
另外,format 只能是 0、1 或 2。PHP 8 及以后传入其他值会抛出 ValueError,不要把非法值当成“返回空数组”的控制分支。
最后用一张表固定选择
| 目标 | format | 是否需要 characters |
|---|---|---|
| 只统计数量 | 0 | 按业务边界决定 |
| 拿到单词数组 | 1 | 调试和展示时优先明确 |
| 保留原文位置 | 2 | 与同一字符契约一起保存 |
| 处理中文等多字节文本 | 不建议直接使用 | 改用 Unicode 友好方案 |
这次的经验是:先用 format=1 看边界,再决定 characters,最后才选择只计数还是保留位置。这样不会因为一个数字或短横线导致统计口径悄悄变化。
常见问题
characters 可以直接写正则表达式吗?
不可以。它是附加字符列表,不是正则表达式模式;需要按字面提供要纳入识别的字符。
format=2 返回的数字是什么?
它表示单词在原字符串中的位置键,值才是对应的单词。字符列表改变边界后,这些位置也可能变化。
spaCy Span 的字符偏移与词元索引有什么区别
- 上一篇
- spaCy Span 的字符偏移与词元索引有什么区别
- 下一篇
- Go snowflake 怎样配置节点并生成Snowflake编号
-
- 文章 · php教程 | 1小时前 |
- PHP str_word_count 怎样取得英文单词的位置索引
- 492浏览 收藏
-
- 文章 · php教程 | 2小时前 |
- PHP similar_text 的调用参数顺序为什么可能影响结果
- 387浏览 收藏
-
- 文章 · php教程 | 3小时前 | PHP · 字符串处理 · php similar_text 字符串相似度
- PHP similar_text 怎样计算两个字符串的相似百分比
- 319浏览 收藏
-
- 文章 · php教程 | 3小时前 |
- PHP metaphone 与 soundex 的结果形态有什么区别
- 412浏览 收藏
-
- 文章 · php教程 | 4小时前 | PHP · 字符串处理 · PHP metaphone max_phonemes 语音键
- PHP metaphone 怎样限制语音键的长度
- 291浏览 收藏
-
- 文章 · php教程 | 6小时前 |
- PHP grapheme_strpos 的偏移量为什么不按字节计算
- 139浏览 收藏
-
- 文章 · php教程 | 7小时前 |
- PHP grapheme_strstr 怎样从匹配位置截取字素字符串
- 333浏览 收藏
-
- 文章 · php教程 | 8小时前 | PHP · 时区 · php IntlTimeZone hasSameRules 时区规则
- PHP IntlTimeZone 怎样判断两个时区规则是否一致
- 335浏览 收藏
-
- 文章 · php教程 | 12小时前 |
- PHP IntlBreakIterator 的边界偏移为什么不能直接当字符序号
- 269浏览 收藏
-
- 文章 · php教程 | 12小时前 |
- PHP IntlChar 的 digit 与 charDigitValue 怎样处理不同进制
- 382浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 804次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 795次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 885次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 853次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 683次使用
-
- golang实现PHP数组特性的方法
- 2023-02-16 371浏览
-
- 详解Go语言Slice作为函数参数的使用
- 2023-01-07 353浏览
-
- PHP与Go语言之间的通信详解
- 2023-01-07 347浏览
-
- php和go语言的区别有哪些
- 2023-03-04 112浏览
-
- Go strings.Lines 怎么处理末尾换行:迭代语义、空输入与测试边界
- 2026-08-26 470浏览

