0

0

PHP 字符串去重算法实战

舞姬之光

舞姬之光

发布时间:2026-03-10 20:21:11

|

800人浏览过

|

来源于php中文网

原创

php字符串去重需保序且按语义定义重复:单字节用遍历+关联数组;utf-8中文须用mb_substr;分词去重需正则提取汉字块与英文单词;柔性去重应标准化键值映射原始字符。

php 字符串去重算法实战

PHP 字符串去重,核心是保留字符的首次出现顺序、剔除重复项,不是简单去重数组。常见需求包括:纯字符去重(如 "aabbcc""abc")、按字(中文/英文单词)去重、忽略大小写或空白符等。关键不在“有没有函数”,而在于“怎么保序、怎么定义重复”。

单字节字符(英文字母/数字)保序去重

array_unique() 配合 str_split() 最直接,但要注意它不保原顺序(PHP 5.6+ 已默认保序,但早期版本需手动重建键):

  • 安全写法:$chars = str_split($str); $unique = array_values(array_unique($chars)); echo implode('', $unique);
  • 更高效(尤其长字符串):遍历 + 关联数组判重,天然保序:
    php
    $result = '';
    $seen = [];
    for ($i = 0; $i   $char = $str[$i];
      if (!isset($seen[$char])) {
        $result .= $char;
        $seen[$char] = true;
      }
    }
    ?>

中文或 UTF-8 多字节字符去重

str_split() 对中文会截断乱码,必须用 mb_ 系列函数:

X Detector
X Detector

最值得信赖的多语言 AI 内容检测器

下载
  • 先用 mb_strlen($str, 'UTF-8') 获取真实长度
  • mb_substr($str, $i, 1, 'UTF-8') 逐个取字符
  • 判重逻辑同上,但键用 mb_substr 结果,不能直接用 $str[$i]
  • 示例:$char = mb_substr($str, $i, 1, 'UTF-8'); 再检查是否已存在

按“词”去重(非单字),支持中英文混合

需先分词,再去重。简单场景可用空格/标点切分,复杂场景建议用正则:

立即学习PHP免费学习笔记(深入)”;

  • 基础分词:$words = preg_split('/[\s\p{P}]+/u', $str, -1, PREG_SPLIT_NO_EMPTY);\p{P} 匹配任意 Unicode 标点)
  • 去重并保序:
    $seen = []; $uniqueWords = [];<br>foreach ($words as $word) {<br>  if (!in_array($word, $seen)) {<br>    $uniqueWords[] = $word;<br>    $seen[] = $word;<br>  }<br>}
  • 注意:中文词需预分词(如用 preg_match_all('/\p{Han}+|\w+/u', $str, $matches) 抽出汉字块和英文单词)

忽略大小写、空白、标点的柔性去重

实际业务常需“语义去重”,比如 "Hello, hello!" 视为重复:

  • 预处理统一格式:$normalized = strtolower(trim(preg_replace('/[\s\p{P}]+/u', '', $str)));
  • 但原始输出仍要返回未处理的字符 —— 所以得用映射:把标准化值作键,存原始片段(如小写"hello" → 原始"Hello"
  • 代码要点:遍历分词后,对每个词生成标准键;若键未出现,存入结果并记录该键;否则跳过

相关文章

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

846

2023.08.22

php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

245

2025.12.04

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

760

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

220

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1564

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

649

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

1208

2024.03.22

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

1184

2024.04.29

Go高并发任务调度与Goroutine池化实践
Go高并发任务调度与Goroutine池化实践

本专题围绕 Go 语言在高并发任务处理场景中的实践展开,系统讲解 Goroutine 调度模型、Channel 通信机制以及并发控制策略。内容包括任务队列设计、Goroutine 池化管理、资源限制控制以及并发任务的性能优化方法。通过实际案例演示,帮助开发者构建稳定高效的 Go 并发任务处理系统,提高系统在高负载环境下的处理能力与稳定性。

4

2026.03.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PHP课程
PHP课程

共137课时 | 13.2万人学习

JavaScript ES5基础线上课程教学
JavaScript ES5基础线上课程教学

共6课时 | 11.3万人学习

PHP新手语法线上课程教学
PHP新手语法线上课程教学

共13课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号