当前位置: 首页 > news >正文

CSV数据处理全指南:从基础到实战

CSV(Comma-Separated Values,逗号分隔值) 是一种简单的文件格式,用于存储和交换表格数据(如电子表格或数据库中的记录)。其核心特点是用逗号分隔字段,以换行符分隔记录。


CSV 的定义与结构

  1. 基本格式

    • 每行表示一条记录(行)。

    • 字段(列)之间用逗号(,)分隔。

    • 文本字段可以用双引号(")包裹,以处理字段内包含逗号、换行符或引号的情况。

Name,Age,Email
"Alice, Smith",30,alice@example.com
Bob,25,bob@test.com
  1. 优点

    • 纯文本格式,通用性强,几乎支持所有工具(Excel、数据库、编程语言等)。

    • 轻量级,适合快速导入/导出数据。

    • 人类可读,易于手动编辑。

  2. 缺点

    • 无数据类型定义(所有数据均为字符串)。

    • 无标准化规范,不同工具的分隔符或转义规则可能不同。

    • 不适合复杂数据(如嵌套结构)。


CSV 的常见函数与操作

在不同的编程语言或工具中,处理 CSV 的常用函数如下:

1. Python
  • 标准库 csv

import csv
# 读取 CSV
with open('data.csv', 'r') as f:reader = csv.reader(f)for row in reader:print(row)
# 写入 CSV
with open('output.csv', 'w') as f:writer = csv.writer(f)writer.writerow(["Name", "Age"])writer.writerow(["Alice", 30])
  • Pandas 库
import pandas as pd
# 读取 CSV 到 DataFrame
df = pd.read_csv('data.csv')
# 写入 CSV
df.to_csv('output.csv', index=False)
2. JavaScript
  • 库 PapaParse

// 解析 CSV 字符串
Papa.parse(csvText, {complete: (result) => console.log(result.data)
});
3. Excel / 电子表格
  • 直接打开 CSV 文件(自动解析为表格)。

  • 导出为 CSV 时选择“另存为 CSV 格式”。

4. SQL 数据库
  • 导入:使用 LOAD DATA INFILE(MySQL)或 COPY(PostgreSQL)。

  • 导出:通过命令行工具(如 mysqldump)或导出功能。


注意事项

  1. 编码问题:确保文件编码一致(如 UTF-8),避免乱码。

  2. 分隔符冲突:若数据含逗号,需用引号包裹字段(如 "San Francisco, USA")。

  3. 转义字符:引号内的引号需转义(如 "He said, ""Hello""")。

  4. 空值处理:通常用空字段表示(如 John,,30 表示第二列无值)。

相关文章:

  • java 项目登录请求业务解耦模块全面
  • mysql 合集
  • 软件项目交付阶段,验收报告记录了什么?有哪些标准要求?
  • Oracle OCP认证考试考点详解083系列16
  • 《计算机组成原理》第 6 章 - 计算机的运算方法
  • 链表题解——相交链表(力扣160 easy)
  • <b> 与 <span> 等行内元素添加 margin-top 或 margin-bottom 不生效问题
  • 高精度微型导轨在3D打印机中有多重要?
  • 多相电机驱动控制学习(1)——基于双dq坐标系的六相/双三相PMSM驱动控制
  • 泰迪杯特等奖案例深度解析:基于多模态时空图神经网络的工业园区碳排放实时监测与优化系统
  • Python训练营打卡Day38
  • Common JS和ES Module的区别
  • 《OpenFeign 最佳实践:三大优雅调用远程服务的方式》​
  • mysql explain使用
  • 基于springboot的校园商铺管理系统的设计与实现
  • HikariCP连接池使用和源码分析
  • NB-IoT NPUSCH(三)-资源映射
  • 一种C# 的SM4 的 加解密的实现,一般用于医疗或者支付
  • 多线程(1)
  • ODSA架构与操作-1
  • 企业网站建设模板/南京网站快速排名提升
  • 帮人做网站/适合小学生的最新新闻
  • jsp电商网站开发教程/seo分析
  • 怎么用手机做网站编辑/百度推广的方式有哪些
  • 专业营销的网站建设公司排名/软件定制开发
  • 如何从网站获取图片做全景图/成都市seo网站公司