0

0

将制表符分隔的多行字符串(含嵌套换行)安全转换为标准 CSV 格式

聖光之護

聖光之護

发布时间:2026-01-31 08:48:02

|

362人浏览过

|

来源于php中文网

原创

将制表符分隔的多行字符串(含嵌套换行)安全转换为标准 CSV 格式

本文详解如何在 java 中准确解析含内嵌换行、混合空白(tab/space/newline)和固定行尾标记(如 `"test2222"`)的非标准文本,并将其健壮地转换为合规的 csv 字符串,避免因简单 `split("\t")` 或 `csvparser` 误判导致字段错位。

在实际数据集成场景中,我们常遇到「伪 TSV」格式:表面以 Tab 分隔,但字段值本身含换行符(\n)、多空格或制表符,且每行由特定终结符(如 "test2222")而非 \n 真正界定。此时直接按行分割(String#lines())或依赖通用 CSV 解析器(如 Apache Commons CSV)极易失败——因为它们默认将换行视作记录边界,而本例中换行是字段内容的一部分

核心解决思路是:绕过“逐行读取”范式,改用基于自定义记录分隔符(record delimiter)的流式切分。Java 的 Scanner 类天然支持此模式:通过 useDelimiter(String) 指定逻辑行终止符(如 "\"test2222\""),再对每个完整逻辑记录进行字段提取。

以下为完整、可运行的解决方案(已针对原始字符串优化):

import java.util.Arrays;
import java.util.stream.Collectors;

public class TsvToCsvConverter {

    // 行终结符(注意:需转义双引号)
    private static final String RECORD_DELIMITER = "\"test2222\"";

    public static String convertToCsv(String input) {
        if (input == null || input.trim().isEmpty()) {
            return "";
        }

        // 使用 Scanner 按终结符切分逻辑行(兼容内嵌 \n)
        java.util.Scanner scanner = new java.util.Scanner(input);
        scanner.useDelimiter(RECORD_DELIMITER);

        return Arrays.stream(scanner
                        .tokens()                 // 获取所有逻辑记录(不含终结符)
                        .map(String::trim)        // 去首尾空白
                        .filter(s -> !s.isEmpty())// 过滤空记录
                        .map(TsvToCsvConverter::parseAndJoinFields)  // 解析单行 → CSV
                        .toArray(String[]::new))
                .collect(Collectors.joining("\n")); // 用换行连接各 CSV 行
    }

    // 对单个逻辑记录(如:"\"abc\"\t\"cde\"\t...\"test2222\"")提取字段并转为 CSV
    private static String parseAndJoinFields(String record) {
        // 正则匹配带引号的字段(支持内部含 \n、\t、空格)
        // 匹配模式:以 " 开头,后接任意字符(包括 \n,非贪婪),以 " 结尾
        java.util.regex.Pattern FIELD_PATTERN = 
            java.util.regex.Pattern.compile("\"([^\"]*?)\"\\s*");

        java.util.List fields = new java.util.ArrayList<>();
        java.util.regex.Matcher matcher = FIELD_PATTERN.matcher(record);

        while (matcher.find()) {
            String field = matcher.group(1).replace("\n", " ").replace("\t", " ").trim();
            // 严格 CSV 规范:含逗号、引号或换行的字段必须用双引号包裹,且内部引号需转义
            if (field.contains(",") || field.contains("\"") || field.contains("\n")) {
                field = "\"" + field.replace("\"", "\"\"") + "\"";
            }
            fields.add(field);
        }

        return String.join(",", fields);
    }

    // 示例用法
    public static void main(String[] args) {
        String test = "\"abc\"\t\"cde\"\t\"fhg\"\t\"ijk\"\t\"17/01/23 10:09:50 am\"\t\"test111\"\t\"test2\"\t\"Individual\"\t\"Enclosure of Work Areas\"\t\t\"Highlight aluminium personnel lanyarded into the Haulotte boom lift with a spotter. All tools observed to be lanyarded including protection gear. \n" +
                "Blue glue asset card observed to be attached to the machinery, 10 year inspection of plant not required due to it being only 3yrs old. Last annual inspection august 2022 and logbook was subsequently observed. \n" +
                "Plant registration was all observed and the weight loads were all abided by.\"\t\"test2222\"\n" +
                "\"abc\"\t\"cde\"\t\"fhg\"\t\"ijk\"\t\"17/01/23 10:09:50 am\"\t\"test111\"\t\"test2\"\t\"Individual\"\t\"Enclosure of Work Areas\"\t\t\"1\"\t\"0\"\t\"Level 79\"\t\"16/01/23 11:12:50 pm\"\t\"Logistics - Construction Personnel & Material Lifts\"\t\t\t\t\t\"Schindler lift cages were observed to be free of any loose debris or material that may pose a risk of falling into the lift shaft below. L80 and L79 were observed to be compliant on both sides of the shaft.\"\t\"test2222\"";

        System.out.println("=== 转换后的 CSV ===");
        System.out.println(convertToCsv(test));
    }
}

关键设计说明:

HaiSnap
HaiSnap

一站式AI应用开发和部署工具

下载
  • 精准分界:Scanner 以 "test2222" 为 delimiter,确保跨多行的长文本字段不被错误截断;
  • 字段安全提取:使用正则 \"([^\"]*?)\" 精确捕获成对双引号内的内容(支持内嵌 \n/\t),避免 split("\\s+") 将字段内空格误切;
  • CSV 合规性:自动检测需转义的字段(含 ,、" 或 \n),执行 RFC 4180 标准转义(" → "")并包裹双引号;
  • 健壮预处理:对提取的字段统一替换内嵌换行为空格、制表符为空格,消除格式干扰。

⚠️ 注意事项:

  • 若终结符本身可能出现在字段值中(如 "test2222" 是业务数据),需改用更可靠的分隔策略(如固定长度、XML/JSON 封装);
  • 生产环境建议使用成熟的 CSV 库(如 OpenCSV 或 Apache Commons CSV)生成最终 CSV,本方案聚焦于前置解析阶段
  • 大文件处理时,应改用 Files.lines() + 自定义 Spliterator 流式处理,避免内存溢出。

该方案直击问题本质:在非标准数据结构上构建语义正确的解析层,为后续标准化处理奠定可靠基础。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

420

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

536

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

312

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

77

2025.09.10

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

483

2023.08.02

pdf怎么转换成xml格式
pdf怎么转换成xml格式

将 pdf 转换为 xml 的方法:1. 使用在线转换器;2. 使用桌面软件(如 adobe acrobat、itext);3. 使用命令行工具(如 pdftoxml)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1903

2024.04.01

xml怎么变成word
xml怎么变成word

步骤:1. 导入 xml 文件;2. 选择 xml 结构;3. 映射 xml 元素到 word 元素;4. 生成 word 文档。提示:确保 xml 文件结构良好,并预览 word 文档以验证转换是否成功。想了解更多xml的相关内容,可以阅读本专题下面的文章。

2093

2024.08.01

xml是什么格式的文件
xml是什么格式的文件

xml是一种纯文本格式的文件。xml指的是可扩展标记语言,标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。想了解更多相关的内容,可阅读本专题下面的相关文章。

1083

2024.11.28

2026赚钱平台入口大全
2026赚钱平台入口大全

2026年最新赚钱平台入口汇总,涵盖任务众包、内容创作、电商运营、技能变现等多类正规渠道,助你轻松开启副业增收之路。阅读专题下面的文章了解更多详细内容。

8

2026.01.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 3万人学习

C# 教程
C# 教程

共94课时 | 8万人学习

Java 教程
Java 教程

共578课时 | 53.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号