当前位置:

首页 > 编程开发 > 如何合并CSV文件中的两行并保持列数不变

如何合并CSV文件中的两行并保持列数不变

处理CSV中标题行与内容行被拆成两行的问题,使用Python内置csv模块手动控制迭代,预读下一行并拼接指定列,保持列数不变。需注意跳过前导空格、异常捕获及条件判断,输出整洁的合并数据。

处理结构性不佳的CSV数据时,常会遇到标题行与内容行被拆成两行的情况。本文就用Python内置的csv模块,演示如何精准合并相邻的特定行,同时确保列数不变、输出整洁。

CSV数据里,有些记录会因为格式不规范,把一个完整条目拆成两行来写。比如标题和内容分行,或者属性值散落在相邻行中。这时候要是硬用常规读取方式,数据就会乱套。其实解决思路很简单——手动控制迭代,按需预读下一行,再拼接指定列,跑完一套下来输出列数纹丝不动。

举个例子,假设原始数据长这样:

Superman/, 250lbs, Batman/, 180lbsClark Kent, , Bruce Wayne, 

想要的结果是把两行合并成一行四列:
Superman/Clark Kent,250lbs,Batman/Bruce Wayne,180lbs

核心做法是:遍历时遇到像 Superman/ 这种“主行”,就主动调用 next(reader) 把下一行抓过来,把对应的列字符串拼起来,然后跳过那个子行,避免重复写入。听起来挺直白,但有几个关键点必须处理好,否则容易翻车。

下面是一段靠谱的实现,带上了错误防护和最佳实践:

import csv# 安全读写:输入与输出文件分离,避免原文件损坏with (    open("input.csv", newline="") as f_in,    open("output.csv", "w", newline="") as f_out,):    reader = csv.reader(f_in, skipinitialspace=True)  # 自动去除字段前导空格    writer = csv.writer(f_out)    for row in reader:        # 判断是否为需合并的主行(可根据实际业务调整条件)        if len(row) >= 3 and row[0].strip().endswith("/"):            try:                next_row = next(reader)  # 预读下一行                # 拼接第0列和第2列(索引从0开始),其余列保持不变                row[0] = row[0].rstrip("/") + next_row[0].strip()                if len(next_row) > 2:                    row[2] = row[2].rstrip("/") + next_row[2].strip()            except StopIteration:                # 若主行后无子行,保留原样(防数据异常)                pass        writer.writerow(row)

几个绕不开的关键细节

  • skipinitialspace=True 几乎是必须的。CSV字段里经常有前导空格,比如 " Batman/",不加这个参数就等着踩坑吧。
  • 用 with 上下文管理器管理文件,这是规矩,既保证文件正确关闭,也让代码更清爽。
  • 永远先写入新文件(比如 output.csv),确认没问题再替换原文件。直接改原文件风险太大,万一写错了数据就废了。
  • next(reader) 会永久推进迭代器——如果主行后面没有子行(比如文件末尾),必须捕获 StopIteration 异常,否则程序会直接崩溃。
  • 条件判断要够健壮:检查 len(row) >= 3 防止索引越界,用 .strip() 处理空白字符,避免意外匹配失败。
  • 如果你需要动态匹配多种模式(不止 "Superman/"),可以把判断逻辑封装成函数,或者用正则表达式识别规律,灵活度更高。

最终生成的 output.csv 会严格保持4列结构,字段间没有多余空格,直接就能丢进后续的数据分析流程。这招在处理日志、报表等半结构化数据时特别实用,值得收藏。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
作者最新文章
编程开发
相关文章 更多
蓝海书屋怎么查看阅读时长
蓝海书屋怎么查看阅读时长

蓝海书屋查看阅读时长的五种专业方法 “蓝海书屋的阅读时长到底在哪看?”最近这个问题确实被问得挺多。其实,掌握阅读时长不仅能帮你回顾自己的阅读旅程,更是管理阅读习惯、完成目标的好帮手。下面,咱们就系统梳理一下在蓝海书屋查看阅读时长的五种方式,操作清晰,一目了然。 官方入口在这里,有需要的可以先行访问:

如何进入百度地图网页版
如何进入百度地图网页版

百度地图网页版官网入口是https://map.baidu.com;支持全国街道级矢量底图、680万+POI、实时路况、多方式路线规划、自然语言检索及深度工具集成。 要使用百度地图的网页版,入口在哪里?其实答案很简单,直接访问 https://map.baidu.com 即可。这个链接背后,是一个功

yandex引擎入口官网
yandex引擎入口官网

Yandex搜索引擎官方入口为https://yandex.com,具备界面简洁响应迅速、本地化服务深度整合、多媒体内容直达、隐私保护机制透明、多终端协同体验一致五大特点。 直接访问Yandex搜索引擎的官网入口,是不少用户实际使用时的第一个疑问。下面,我们就来详细梳理一下它在2026年的核心面貌和

如何在 Go 中精准捕获并忽略 CSV 字段数量错误
如何在 Go 中精准捕获并忽略 CSV 字段数量错误

在Go的encoding/csv中,字段数量错误并非直接返回,而是封装在*csv.ParseError内。需通过类型断言确认错误类型,再检查其Err字段是否为csv.ErrFieldCount,以实现精准忽略。仅应忽略该子类错误,其他解析错误如csv.ErrBareQuote需拦截处理。

如何在 PySpark 中高效读取列顺序不一致的多个 CSV 文件并按列名合并
如何在 PySpark 中高效读取列顺序不一致的多个 CSV 文件并按列名合并

针对PySpark中列顺序不一致的多个CSV文件,提出两阶段方法:先用Python轻量读取各文件首行,按列名分组;再对每组批量读取并关闭inferSchema,最后用unionByName合并。该方案在保持按列名对齐的同时,将读取次数从100次降至分组数,性能接近单次通配符读取,兼顾正确性与效率。

多个CSV大文件如何用Python自动化合并去重
多个CSV大文件如何用Python自动化合并去重

分块读取CSV大文件,设置chunksize=50000逐块处理,统一列名与数据类型后累积合并,立即按业务主键(如订单号)去重并保留首次出现记录,用csv.writer边处理边写入避免内存膨胀;注意编码回退策略与内存错误处理。

PySpark高效读取多列结构不一致的CSV文件:兼顾性能与列名对齐的解决方案
PySpark高效读取多列结构不一致的CSV文件:兼顾性能与列名对齐的解决方案

针对PySpark中列名相同但顺序或数量不一致的CSV文件,通配符读取按列索引对齐导致数据错位。通过两阶段优化策略:先轻量读取各文件列名,再按列名分组批量读取并执行unionByName,既保证按列名正确合并,又大幅减少Spark任务调度和文件打开次数,性能接近单次通配符读取。

Python CSV 文件追加写入最佳实践:避免重复表头与数据冗余
Python CSV 文件追加写入最佳实践:避免重复表头与数据冗余

csv模块追加写入S3元数据时,需区分初始化与增量,控制writeheader/writerow调用,避免重复表头数据冗余;用DictWriter并newline='',S3字节流需显式解码。

Python怎样修复损坏的CSV_csvError异常处理与容错读取
Python怎样修复损坏的CSV_csvError异常处理与容错读取

处理CSV常见错误:NULL字节可用二进制模式读取并过滤\x00行;pandas的read_csv设置on_bad_lines="skip"和engine="python"跳过畸形行;需指定编码如utf-8-sig处理BOM,或gb18030兼容中文,避免解析失败。

怎么利用 StringJoiner 在 Java 8 中优雅地构建带前后缀的 CSV 格式变量字符串
怎么利用 StringJoiner 在 Java 8 中优雅地构建带前后缀的 CSV 格式变量字符串

利用StringJoiner以逗号拼接元素并添加前后缀,可优雅构建CSV字符串。需自行处理字段转义与空值过滤。封装为静态工具方法能提升复用性,相比StringBuilder和String.join更简洁可控。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

PDF教程
PDF教程

正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

Mac软件 更多
Postman macOS版
Postman macOS版
Mac

Postman是一套面向API全生命周期的开发与测试平台,可在Mac上发送和调试多种协议请求,管理集合、环境及认证信息,并完成脚本测试、模拟服务、监控、文档发布和团队协作。它适合开发、测试及运维人员使用,提供个人免费方案。

Docker Desktop macOS版
Docker Desktop macOS版
Mac

Docker Desktop 是 Docker 官方为 Mac 提供的容器开发环境,集成 Docker Engine、命令行工具、Compose、Build、Kubernetes 与图形化管理界面。

Android Studio macOS版
Android Studio macOS版
Mac

Android Studio 是 Google 面向安卓应用开发提供的官方集成开发环境,基于 IntelliJ IDEA 构建。它整合智能代码编辑、Gradle 构建、界面预览、设备模拟、性能分析、调试测试及 APK 分析等工具。

WINDOWS 更多
Postman Windows版
Postman Windows版
Windows

Postman 是面向 API 全生命周期的开发与协作平台。Windows 桌面版可用于构建和发送 HTTP、GraphQL、gRPC、WebSocket、MQTT 等请求,并提供环境变量、集合、脚本测试、模拟服务、监控、文档及团队工作区等

Docker Desktop Windows版
Docker Desktop Windows版
Windows

Docker Desktop 为 Windows 开发者提供集成式容器环境,内置 Docker Engine、命令行工具、Compose、Build 与 Kubernetes 等组件,可在本机完成镜像构建、容器运行、日志查看和资源管理。

Android Studio Windows版
Android Studio Windows版
Windows

Android Studio 是 Google 面向 Android 应用开发提供的官方集成开发环境,以 IntelliJ IDEA 为基础,集成智能代码编辑、Gradle 构建、设备模拟、界面预览、调试测试及性能分析工具,