当前位置：首页 > news >正文

python基础-16-处理csv文件和json数据

news 来源：原创 2025/8/28 4:00:23

文章目录

【README】
【16】处理csv文件和json数据
【16.1】csv模块
- - 【16.1.1】reader对象
  - 【16.1.2】在for循环中，从reader对象读取数据
  - 【16.1.3】writer对象
  - 【16.1.5】DictReader与DictWriter对象
【16.4】json模块
- 【16.4.1】使用loads()函数读取json字符串并转为json对象(python的字典类型)
- 【16.4.2】用dumps函数把json对象（字典）转为json字符串

【README】

本文总结自《python编程快速上手-让繁琐工作自动化》第16章，非常棒的一本书，墙裂推荐；

【16】处理csv文件和json数据

【16.1】csv模块

1）csv文件：csv是一种文件格式，csv格式的文件是一个文本文件，具有用逗号分割的值；

【16.1.1】reader对象

1）使用csv模块读取csv文件，需要创建一个reader对象，reader对象让你迭代遍历csv文件中的每一行；

csvFileA01 = open(Path.cwd() / '1601A01.csv')
csvFileA01Reader = csv.reader(csvFileA01)
print(list(csvFileA01Reader))
# [['id', 'name', 'addr'], ['1', '张三01', '成都01'], ['2', '张三02', '成都02'], ['3', '张三03', '成都03']]
csvFileA01.close()

【16.1.2】在for循环中，从reader对象读取数据

1）遍历每行：在for循环中，从reader对象读取数据；

print("====== 遍历每行 ======")
csvFileA01 = open(Path.cwd() / '1601A01.csv')
reader01 = csv.reader(csvFileA01)
for row in reader01:print(f"row[%d]=%s" % (reader01.line_num, str(row)))
csvFileA01.close()
# ====== 遍历每行 ======
# row[1]=['id', 'name', 'addr']
# row[2]=['1', '张三01', '成都01']
# row[3]=['2', '张三02', '成都02']
# row[4]=['3', '张三03', '成都03']

【16.1.3】writer对象

1）使用writer对象把数据写入csv文件；

# 16.1.3 writer对象写入数据到csv文件
print("\n====== writer对象写入数据到csv文件 ======")
csvFileA01 = open(Path.cwd() / '1601A01.csv', "w", newline='')
writer01 = csv.writer(csvFileA01)
writer01.writerow(['4', '张三04', '成都04'])
writer01.writerows([['5', '张三05', '成都05'], ['6', '张三06', '成都06']])
csvFileA01.close()

【16.1.5】DictReader与DictWriter对象

1）对于包含列标题的csv文件，通常使用DictReader和DictWriter对象，而不是 reader和writer对象；

DictReader和DictWriter操作的数据格式是字典，且使用csv文件的第一行的列值作为字典的键；
reader和writer使用列表对csv文件的行进行读写；

2）使用DictReader读取csv对象

# 16.1.5 DictReader 和 DictWriter的csv对象
print("\n====== 使用DictReader读取csv对象 ======")
csvFileA01 = open(Path.cwd() / '1601A01.csv', "r")
tempDictReader = csv.DictReader(csvFileA01, ['id', 'name', 'addr'])
for row in tempDictReader:print(str(row['id']), str(row['name']), str(row['addr']), end=' ')print()
csvFileA01.close()# ====== 使用DictReader读取csv对象 ======
# 4 张三04 成都04
# 5 张三05 成都05
# 6 张三06 成都06

3）使用DictWriter保存数据到csv对象

print("\n====== 使用DictWriter保存数据到csv对象 ======")
csvFileA01 = open(Path.cwd() / '1601A01.csv', "w", newline='')
tempDictWriter = csv.DictWriter(csvFileA01, ['id', 'name', 'addr'])
# 写入标题行
tempDictWriter.writeheader()
# 写入字典数据
tempDictWriter.writerow({'id':'101', 'name':'张三101', 'addr':'成都101'})
csvFileA01.close()

【16.4】json模块

1）python的json模块处理了json数据字符串和python数据之间的转换的所有细节；；

json.loads()：把包含json数据的字符串转换为python值（python对象）；
- 注意：json字符串总是用双引号表示；
json.dumps()：表示dump string，把一个python值转换为json格式的数据字符串；

2）json不能存储每种python数据类型，只能包含以下类型的对象，包括字符串，整型，浮点型，布尔型，列表，字典和NoneType；

json不能表示的对象：包括 File对象， csv reader， csv writer， Regex等；

【16.4.1】使用loads()函数读取json字符串并转为json对象(python的字典类型)

# 16.4.1 使用loads()函数读取json字符串并转为json对象(python的字典类型)
print("====== 使用loads()函数读取json字符串并转为json对象 ======")
jsonData01 = '{"id":"201", "name":"张三201", "addr":"成都201"}'
jsonObj01 = json.loads(jsonData01)
print(type(jsonObj01)) # jsonObj01 是字典类型
print(jsonObj01)
# <class 'dict'>
# {'id': '201', 'name': '张三201', 'addr': '成都201'}

【16.4.2】用dumps函数把json对象（字典）转为json字符串

print("\n====== 用dumps函数把json对象转为json字符串 ======")
jsonStr02 = json.dumps(jsonObj01)
print(type(jsonStr02))
print(jsonStr02)
# <class 'str'>
# {"id": "201", "name": "\u5f20\u4e09201", "addr": "\u6210\u90fd201"}

python基础-16-处理csv文件和json数据

文章目录【README】【16】处理csv文件和json数据【16.1】csv模块【16.1.1】reader对象【16.1.2】在for循环中， 从reader对象读取数据【16.1.3】writer对象【16.1.5】DictReader与DictWriter对象【16.4】json模块【16.4.1】使用loads()函数读取json字符串并转为jso…...

编程日记 2025/8/28 4:00:23

Mysql 数据库编程技术01

一、数据库基础 1.1 认识数据库为什么学习数据库瞬时数据：比如内存中的数据，是不能永久保存的。持久化数据：比如持久化至数据库中或者文档中，能够长久保存。数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长…...

编程日记 2025/8/27 16:39:05

基于SSM的车辆管理系统的设计与实现(代码+数据库+LW)

摘要当下，正处于信息化的时代，许多行业顺应时代的变化，结合使用计算机技术向数字化、信息化建设迈进。以前企业对于车辆信息的管理和控制，采用人工登记的方式保存相关数据，这种以人力为主的管理模式已然落后。本人结…...

编程日记 2025/8/27 13:30:29

BugKu Simple_SSTI_2

这个题很简单，主要是记录一下，做题的原理： 打开环境，提示我们用flag传参，然后我们需要判断是什么模板： 这里有一张图片，可以帮助我们轻松判断是什么模板类型：这个图片找不到出处了&…...

编程日记 2025/8/28 18:10:08

浙考！【触发器逻辑方程推导（电位运算）】

RS触发器是浙江高考通用技术一大考点。“对角线原则”、“置1置0”、“保持”、“不使用”、“记忆功能”…经常让考生云里雾里，非常反直觉。这篇文章，我想以高中生的视角诠释一下触发器。 1、触发器逻辑方程推导（以或非门触发器为例&…...

编程日记 2025/8/20 5:34:26

一、前序遍历 144. Binary Tree Preorder Traversal 递归代码实现： /*** Definition for a binary tree node.* struct TreeNode {* int val;* TreeNode *left;* TreeNode *right;* TreeNode() : val(0), left(nullptr), right(nullptr) {}* …...

编程日记 2025/8/19 17:53:37

es中节点类型有哪些

Elasticsearch 节点类型有哪些在 Elasticsearch 中，节点类型（或角色）定义了每个节点在集群中的职责。不同版本的 Elasticsearch 对节点角色的定义和管理方式有所不同，尤其在 7.9.0 版本引入 node.roles 后，配置方式更…...

编程日记 2025/8/26 18:16:22

【学习笔记】深度学习环境部署相关

文章目录 [AI硬件科普] 内存/显存带宽，从 NVIDIA 到苹果 M4[工具使用] tmux 会话管理及会话持久性[A100 02] GPU 服务器压力测试，gpu burn，cpu burn，cuda samples[A100 01] A100 服务器开箱，超微平台，gpu、…...

编程日记 2025/8/28 1:13:00

游戏引擎学习第206天

回顾并为当天的工作定下目标接着回顾了前一天的进展。之前我们做了一些调试功能，并且已经完成了一些基础的工作，但是还有一些功能需要继续完善。其中一个目标是能够展示实体数据，以便在开发游戏逻辑系统时，可以清晰地查看和检查…...

编程日记 2025/8/28 18:12:44

Rust所有权详解

文章目录 Rust所有权所有权规则作用域内存和分配移动与克隆栈空间堆空间关于函数的所有权机制作为参数作为返回值引用与租借垂悬引用 Rust所有权 C/C中我们对于堆内存通常需要自己手动管理，手动申请和释放，即便有了智能指针，对于效率的影…...

编程日记 2025/8/28 13:27:23

贪心算法的使用条件

1. 算法原理贪心算法是一种在每一步选择中都采取当前状态下最优（局部最优）的策略，从而希望最终得到全局最优解的算法。其核心思想是：“目光短浅” 地选择当前最优解，不回溯、不瞻前顾后。示例：活动选择问…...

编程日记 2025/8/28 1:38:26

网络性能优化参数关系解读 | TCP Nagle / TCP_NODELAY / TCP_QUICKACK / TCP_CORK

注：本文为 “网路性能优化” 相关文章合辑。未整理去重。如有内容异常，请看原文。 TCP_NODELAY 详解 lenky0401 发表于 2012-08-25 16:40 在网络拥塞控制领域，Nagle 算法（Nagle algorithm）是一个非常著名的算法&…...

编程日记 2025/8/20 2:27:39

《打破SQL与AI框架对接壁垒，解锁融合新路径》

在当今科技飞速发展的浪潮中，SQL作为管理和处理关系型数据的经典语言，与代表前沿技术的人工智能框架之间的融合，正逐渐成为推动数据驱动型应用发展的重要力量。这种融合所带来的接口实现，不仅是技术上的突破，更是为众多…...

编程日记 2025/8/28 18:12:44

虚拟Ashx页面,在WEB.CONFIG中不添加handlers如何运行

https://localhost:44311/webapi.ashx 虚拟ASHX页面,在WEB.CONFIG中添加handlers，如何不添加节点，直接运行?把页面直接保存ASHX名称？现在是.VB 如果你不想通过在 web.config 里添加 handlers 节点来配置处理程序，而是直接让 .as…...

编程日记 2025/8/28 18:09:11

【ssrf漏洞waf绕过】

SSRF绕过方法 SSRF对于防御方式(waf)绕过方法 SSRF攻击内网的redis 题目一基于java 的一个 WEBLOGIC 框架首先我们要知道它内网有什么服务，我们正常给8888端口发送请求是能接受到的，那么我们把8888端口给关闭了，再次请求发现后有一个错误…...

编程日记 2025/8/28 18:10:09

BEVFormer v2(CVPR2023)

文章目录 AbstractIntroductionRelated WorksBEV 3D Object DetectorAuxiliary Loss in Camera 3D Object DetectionTwo-stage 3D Object Detector BEVFormer v2Overall ArchitecturePerspective SupervisionPerspective LossRavamped Temporal EncoderTwo-stage BEV DetectorD…...

编程日记 2025/8/28 18:11:03

车载通信架构 --- AUTOSAR 网络管理

我是穿拖鞋的汉子，魔都中坚持长期主义的汽车电子工程师。老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：周末洗了一个澡，换了一身衣服，出了门却不知道去哪儿，不知道去找谁，漫无目的走着，大概这就是成年人最深的孤独吧! 旧人不知我近况，新人不知我过…...

编程日记 2025/8/28 16:33:31

STM32单片机入门学习——第16节: [6-4] PWM驱动LED呼吸灯PWM驱动舵机PWM驱动直流电机

写这个文章是用来学习的,记录一下我的学习过程。希望我能一直坚持下去,我只是一个小白,只是想好好学习,我知道这会很难，但我还是想去做！ 本文写于：2025.04.05 STM32开发板学习——第16节: [6-4] PWM驱动LED呼吸灯&PWM驱动舵机&PWM驱…...

编程日记 2025/8/28 18:12:17

RoMo: Robust Motion Segmentation Improves Structure from Motion

前言看起来像是一篇投稿CVPR的文章，不知道被哪个瞎眼审稿人拒了。同期还有一篇CVPR被接收的工作Segment Any Motion in Videos，看起来不如这篇直白（也可能是因为我先看过spotlesssplats的缘故），后面也应该一并介绍了…...

编程日记 2025/8/28 18:10:07

【AI编程学习之Python】第五天：Python的变量和常量

对象 Python中一切变量的值皆为对象。每个对象由:标识(identity)、类型(type)、value(值)组成。标识用于唯一标识对象,通常对应于对象在计算机内存中的地址。使用内置函数id(obj)可返回对象obj的标识。类型用于表示对象存储的“数据”的类型。类型可以限制对象的取值范围以…...

编程日记 2025/8/21 22:06:18

经典算法约数之和

原题目链接问题描述假设现在有两个自然数 A 和 B，设 S 为 A^B 的所有约数之和。请你计算：S mod 9901 的值。输入格式在一行中输入两个用空格隔开的整数 A 和 B。输出格式输出一个整数，表示 S mod 9901 的值。数据范围 0 ≤ A, …...

编程日记 2025/8/17 22:34:26

zookeeper基本概念和核心作用

图片来源： 02-Zookeeper概念_哔哩哔哩_bilibili02-Zookeeper概念是黑马程序员Zookeeper视频教程，快速入门zookeeper技术的第2集视频，该合集共计24集，视频收藏或关注UP主，及时了解更多相关视频内容。https://www.bilib…...

编程日记 2025/8/28 10:50:23

蓝桥杯嵌入式客观题二

十四届模拟一 1. 2.串口通信是一种传输线按位数据顺序传输方式 3.USART_SR是属于STM32微控制器USART的状态寄存器。 4.STM32G431RBT6是32位的ARM微控制器 ARM处理器是英国ARM公司设计的一种低功耗RISC微处理器 5.中断配置‌EXTI->FTSR（下降沿触发选择寄存器…...

编程日记 2025/8/28 10:22:01

第一章:服务架构演进史_《凤凰架构：构建可靠的大型分布式系统》_Notes

第一章服务架构演进史 1. 原始分布式时代（1970s-1980s） 核心问题：如何用不可靠的硬件构建可靠的大规模系统？ 关键知识点： 技术背景： 硬件限制：微型计算机性能低下（如Intel 8086处…...

编程日记 2025/8/22 21:56:52

BUUCTF-web刷题篇(13)

22.NiZhuanSiWei 分析：有三个参数需要以get方式传入，发现有file_get_contents()，所以要使用php伪代码，preg_match("/flag/",$file)说明正则匹配不能含有flag，同时还有反序列化，存在漏洞。已知前…...

编程日记 2025/8/28 18:10:07

7-9 趣味游戏

题目解析在某个学校的趣味游戏活动中，N 名同学站成一排，他们的年龄恰好是 1 到 N ，需要注意的是他们并不是按照年龄的大小排列的，而是随机排列的。游戏的规则是请同学们快速计算出，如果在这 N 名同学的小组中&…...

编程日记 2025/8/26 18:14:41

用 Python 制作仓库自动化指南

1. 环境准备 Python 3.x pip (Python 包管理工具) 文本编辑器或 IDE (如 VS Code、PyCharm) 2. 安装依赖库 pandas: 数据处理 openpyxl: Excel 文件操作 sqlite3: SQLite 数据库交互 smtplib: 邮件发送 bash pip install pandas openpyxl sqlite3 smtplib 3. 功能实现…...

编程日记 2025/8/28 18:12:43

Johnson算法——两阶段流水线调度的最优解法

前言：写这个题目的时候感觉就是说任务a的时候是一定需要的，无法避免，怎么才能节约时间呢，就是进行任务a时候也进行任务b 第一个进行的任务a肯定时间越短越好，因为这样b的等待时间越短最后一个进行的任务b的时候越短越…...

编程日记 2025/8/28 11:22:24

反向查询详解以Django为例

以下给出两张表格 class User(AbstractUser):mobilemodels.CharField(max_length11,default0,uniqueTrue,verbose_name手机号)email_activemodels.BooleanField(defaultFalse,verbose_name邮箱验证状态)default_address models.ForeignKey(Address, related_nameusers, nullT…...

编程日记 2025/8/28 18:12:15

PDP动物性格测试：趣味性格分析工具

PDP动物性格测试：趣味性格分析工具 📝 简介大家好！今天我想向大家推荐一个有趣且实用的在线工具 —— PDP动物性格测试。这是一个基于PDP（Process Dynamic Pattern）理论的性格测试工具，通过将性格特征与…...

编程日记 2025/8/28 18:10:08

蓝桥杯完全平方数刷题笔记

关键分析 --- ### **完全平方数的质因数指数特性** **核心结论**： 一个数是完全平方数，当且仅当它的所有质因数的指数均为偶数。 --- #include <bits/stdc.h> using namespace std; #define int long long int n;signed main(){cin >>…...

编程日记 2025/8/28 18:12:43

C++自学笔记---数组和指针的异同点

数组和指针的异同点 0. 复习一下：指针运算符 * 和 & 我们前两篇有讲过这两个运算符，& 是取地址运算符，* 是解引用运算符。这两个运算符是理解指针的关键，因为它们分别代表了获取变量地址和访问指针指向的值这两个基本操…...

编程日记 2025/8/28 18:09:12

【学习笔记】pytorch强化学习

https://www.bilibili.com/video/BV1zC411h7B8 文章目录 [mcts] 01 mcts 基本概念基本原理（UCB）及两个示例[mcts] 02 mcts from scartch（UCTNode，uct_search, pUCT，树的可视化） [mcts] 01 mcts 基本概念基本…...

编程日记 2025/8/28 18:09:09

C++学习之线程同步

目录 1.线程同步相关概念 2.锁属性-建议锁 3.Mutex互斥锁操作 4.互斥锁使用注意事项 5.互斥量的初始化方法 6.死锁 7.读写锁特性 8.读写锁操作函数 9.读写锁使用示例 10.条件变量操作函数 11.生产者消费者模型简单分析 12.条件变量实现生产者消费者模型代码预览 13…...

编程日记 2025/8/28 18:09:08

定积分的应用(4.39-4.48)

battle cry 前言4.394.404.414.424.434.444.454.464.474.48 前言题目确实比较多。slow down and take your time. 4.39 狂算了一遍，然后发现不是计算出问题了，是积分上下限写错了。还有把函数代进去也出了一点问题。点火公式一家人我不记得&#x…...

编程日记 2025/8/28 18:12:43

Java EE期末总结（第三章）

目录一、JavaBean 1、规范与定义 2、与JavaBean相关的JSP动作标签二、MV开发模式（JSPJavaBean） 三、Servlet组件 1、Servlet定义 2、基于HTTP请求的Servlet开发 3、Sevlet执行原理 4、控制器程序的分层设计（DAO）模式 5、…...

编程日记 2025/8/28 18:11:03

Data_Socket和UDP_Socket

Data_Socket 和 UDP_Socket 是两种不同类型的网络套接字，它们用于不同的协议和应用场景。以下是它们的主要区别： 协议类型： UDP_Socket：使用的是 UDP（User Datagram Protocol） 协议，这是一种无连…...

编程日记 2025/8/18 0:26:20

6547网：蓝桥STEMA考试 Scratch 试卷（2025年3月）

『STEMA考试是蓝桥青少教育理念的一部分，旨在培养学生的知识广度和独立思考能力。考试内容主要考察学生的未来STEM素养、计算思维能力和创意编程实践能力。』一、选择题第一题运行下列哪个程序后，飞机会向左移动？ ( ) A. …...

编程日记 2025/8/17 15:39:59

使用MATIO库读取Matlab数据文件中的多维数组

使用MATIO库读取Matlab数据文件中的多维数组 MATIO是一个用于读写Matlab数据文件(.mat)的开源C库。下面是一个完整的示例程序，展示如何使用MATIO库读取Matlab数据文件中的多维数组。示例程序 #include <stdio.h> #include <stdlib.h> #include <…...

编程日记 2025/8/28 18:11:03

Spring @Transactional 注解是如何工作的？

Transactional 注解是 Spring 框架中用于声明式事务管理的核心注解。它可以应用于类或方法，用于指定事务的属性，例如传播行为、隔离级别、超时时间、只读标志等。下面详细解释 Transactional 注解的工作原理： 1. 启用事务管理： …...

编程日记 2025/8/27 2:19:02

spring security 过滤器链使用

Spring Security 的过滤器链提供了灵活的安全控制机制，以下是其在实际开发中的常见用法及对应的过滤器配置示例： 一、认证方式配置 1. 表单登录认证 • 过滤器：UsernamePasswordAuthenticationFilter • 配置： http.formLogi…...

编程日记 2025/8/17 23:36:12

k8s 自动伸缩的场景与工作原理

k8s 自动伸缩的场景与工作原理在现代云原生架构中，应用的访问量和资源需求常常存在波动。为了解决高峰时资源不足、低谷时资源浪费的问题，Kubernetes 提供了自动伸缩功能。自动伸缩可以根据预设的指标（如 CPU 利用率、内存占用、网络流量等…...

编程日记 2025/8/21 8:31:15

SYN Flooding攻击原理

SYN Flooding攻击原理详解 SYN Flooding（SYN洪泛攻击）是一种典型的拒绝服务攻击（DoS/DDoS），利用TCP协议的三次握手缺陷耗尽目标系统资源。以下是其工作原理、影响及防御措施的全面解析： 1. TCP三次握手回顾…...

编程日记 2025/8/17 22:32:08

【爬虫案例】采集 Instagram 平台数据几种方式（python脚本可直接运行）

更多内容请见：爬虫和逆向教程-专栏介绍和目录文章目录一、概述1.1 Instagram基础信息1.2 Instagram平台架构核心技术栈1.3 采集提示1.4 几种采集方案对比二、四种采集方案分析三、写爬虫采集Instagram案例3.1 采集作品信息并下载视频或图片（无需登录）3.2 explore接口的采…...

编程日记 2025/8/25 7:38:14

通过构造函数和几何条件，研究了不同函数的最近点存在性、性质及单调性

解： （1）对于函数 f ( x ) 1 x f(x) \frac{1}{x} f(x)x1 和点 M ( 1 , 0 ) M(1, 0) M(1,0)，构造函数 s ( x ) ( x − 1 ) 2 ( 1 x ) 2 s(x) (x - 1)^2 \left(\frac{1}{x}\right)^2 s(x)(x−1)2(x1)2。求导得到 s ′ …...

编程日记 2025/8/17 22:32:05