当前位置: 首页 > news >正文

【python】保存列表、字典数据到本地文件,以txt、json和pickle为例

Python保存列表、字典数据到本地文件(txt, json, pickle)

在这里插入图片描述

在Python编程中,我们经常需要将数据(如列表、字典等)保存到本地文件,以便后续读取、分析或与其他系统交换数据。Python提供了多种格式来保存这些数据,包括文本文件(txt)、JSON文件和pickle文件。每种格式都有其独特的用途和优势。本文将详细介绍如何使用Python将列表和字典数据保存到这些本地文件,并解释其中的原因和解决办法。

一、保存为文本文件(txt)

1. 为什么要保存为文本文件?

文本文件是最简单的文件格式,它可以直接用文本编辑器打开和编辑。对于简单的数据列表或字典,我们可以将其转换为字符串后保存到文本文件中。

2. 如何保存为文本文件?

对于列表,我们可以使用Python内置的str.join()方法将列表元素转换为字符串,并保存到文本文件中。对于字典,我们通常将其转换为键值对的形式后保存。

# 列表数据
my_list = [1, 2, 3, 'hello']# 将列表转换为字符串并保存到txt文件
with open('my_list.txt', 'w', encoding='utf-8') as f:f.write(str(my_list))# 字典数据
my_dict = {'name': 'Alice', 'age': 30, 'city': 'New York'}# 将字典转换为字符串(这里使用简单的键值对格式)并保存到txt文件
with open('my_dict.txt', 'w', encoding='utf-8') as f:for key, value in my_dict.items():f.write(f'{key}: {value}\n')
3. 解决办法
  • 处理复杂数据:如果数据中包含特殊字符(如换行符、制表符等),你可能需要在保存前对数据进行转义处理,以避免在读取时出现格式错误。
  • 可读性:对于字典数据,简单的键值对格式可能不够清晰。你可以考虑使用更复杂的格式(如INI文件、YAML等),但这通常需要额外的库支持。

二、保存为JSON文件

1. 为什么要保存为JSON文件?

JSON(JavaScript Object Notation)是一种轻量级的数据交换格式,它基于文本,易于人阅读和编写,同时也易于机器解析和生成。JSON格式在Web开发中非常常见,许多API都使用JSON作为数据交换的格式。

2. 如何保存为JSON文件?

Python的json模块提供了将数据序列化为JSON格式字符串的功能,同时也支持将JSON格式字符串反序列化为Python对象。

import json# 列表数据
my_list = [1, 2, 3, 'hello']# 将列表保存到JSON文件
with open('my_list.json', 'w', encoding='utf-8') as f:json.dump(my_list, f, ensure_ascii=False, indent=4)# 字典数据
my_dict = {'name': 'Alice', 'age': 30, 'city': 'New York'}# 将字典保存到JSON文件
with open('my_dict.json', 'w', encoding='utf-8') as f:json.dump(my_dict, f, ensure_ascii=False, indent=4)
3. 解决办法
  • 处理非标准数据类型:JSON只支持一部分Python数据类型(如整数、浮点数、字符串、列表、字典等)。如果你的数据中包含其他类型(如自定义的类、函数等),你需要先将它们转换为JSON支持的类型,或者考虑使用其他序列化方法(如pickle)。
  • 文件大小:对于非常大的数据集,JSON文件可能会变得非常大,导致读取和写入性能下降。在这种情况下,你可以考虑将数据分块处理或使用更高效的存储方案。

三、保存为pickle文件

1. 为什么要保存为pickle文件?

pickle模块是Python的一个内置模块,它支持几乎所有Python数据类型的序列化。与JSON相比,pickle可以保存更复杂的Python对象(如自定义的类、函数等)。但是,pickle文件是Python特有的,不能被其他编程语言直接读取。

2. 如何保存为pickle文件?
import pickle# 列表数据
my_list = [1, 2, 3, 'hello']# 将列表保存到pickle文件
with open('my_list.pkl', 'wb') as f:pickle.dump(my_list, f)# 字典数据
my_dict = {'name': 'Alice', 'age': 30, 'city': 'New York'}# 将字典保存到pickle文件
with open('my_dict.pkl', 'wb') as f:pickle.dump(my_dict, f)
3. 解决办法
  • 安全性:由于pickle模块可以加载和执行Python代码,因此加载来自不可信来源的pickle文件可能会导致安全问题。确保只加载来自可信来源的pickle文件,并在加载之前验证其完整性。
  • 跨平台兼容性:pickle文件是Python特有的,并且可能在不同版本的Python之间不兼容。如果你需要在不同平台或不同版本的Python之间交换数据,请考虑使用其他格式(如JSON)。
  • 性能:对于非常大的数据集,pickle文件的读写性能可能不如其他格式(如二进制格式)。在需要高性能的场景中,你可能需要考虑使用其他序列化方法。

四、总结

在Python中,将数据保存到本地文件有多种方法,每种方法都有其独特的优势和适用场景。文本文件(txt)简单易用,适用于简单的数据交换;JSON文件格式通用,易于人阅读和编写,适用于Web开发中的数据交换;pickle文件则支持几乎所有Python数据类型的序列化,但需要注意安全性和跨平台兼容性。在选择保存格式时,请根据你的具体需求和数据类型做出决策。

希望本文能帮助你理解如何在Python中将列表和字典数据保存到本地文件,并了解不同保存格式的原因和解决办法。如果你有任何疑问或需要进一步的帮助,请随时提问。

相关文章:

【python】保存列表、字典数据到本地文件,以txt、json和pickle为例

Python保存列表、字典数据到本地文件(txt, json, pickle) 在Python编程中,我们经常需要将数据(如列表、字典等)保存到本地文件,以便后续读取、分析或与其他系统交换数据。Python提供了多种格式来保存这些数…...

每日新闻掌握【2024年7月9日 星期二】

2024年7月9日 星期二 农历六月初四 大公司/大事件 上半年新注册登记的新能源汽车创历史新高 据公安部统计,上半年新注册登记新能源汽车439.7万辆,同比增长39.41%,创历史新高。新能源汽车新注册登记量占汽车新注册登记量的41.42%。截至6月底…...

数据结构——Trie

题目: 维护一个字符串集合,支持两种操作: I x 向集合中插入一个字符串 x𝑥;Q x 询问一个字符串在集合中出现了多少次。 共有 N𝑁 个操作,所有输入的字符串总长度不超过 10^5,字符串仅…...

前端根据目录生成模块化路由routes

根据约定大于配置的逻辑,如果目录结构约定俗成,前端是可以根据目录结构动态生成路由所需要的 route 结构的,这个过程是要在编译时 进行,生成需要的代码,保证运行时的代码正确即可 主流的打包工具都有对应的方法读取文…...

Blender新手入门笔记收容所(一)

基础篇 基础操作 视角的控制 控制观察视角:鼠标中键平移视图:Shift鼠标中键缩放视图:滚动鼠标中键滚轮 选中物体后:移动物体快捷键G,移动后单击鼠标就会定下来。 进入移动状态后:按Y会沿着Y轴移动进入移动…...

修改服务器挂载目录

由于我们的项目通常需要挂载一个大容量的数据盘来存储文件数据,所以我们每台服务器都需要一个默认的挂载目录来存放这些数据,但是由于我们的误操作,导致挂载目录名字建错了,这时候后端就读不到挂载目录了,那我们我们的…...

Linux+InternStudio 关卡

ssh连接 端口映射 本地...

如何提升美国Facebook直播的整体体验?

Facebook作为全球最大的社交媒体平台之一,提供了直播功能,用户可以实时分享生活、见解和创意。许多商家通过美国Facebook直播来获取更多客户,但直播时可能会遇到网络卡顿的问题,导致观看体验不佳。本文将探讨如何解决这个问题&…...

flutter项目与原生项目相比,性能比较差的原因

Flutter 项目相对于原生项目有时会表现出性能上的差异,主要原因如下: 1. 框架层的额外开销 Flutter 是一个跨平台框架,它通过 Dart 语言编写代码,并使用 Flutter 引擎将其编译成原生代码。这种跨平台的抽象层不可避免地会引入一…...

第二周:李宏毅机器学习笔记

第二周学习周报 摘要Abstract一、深度学习1.Backpropagation(反向传播)1.1 链式法则1.2 Forward pass(前向传播)1.3 Backward pass(向后传播)1.4 总结 2. Regression(神奇宝贝案例)2…...

搜维尔科技:【研究】Scalefit是一款可在工作场所自动处理3D姿势分析结果的软件

Scalefit是一款可在工作场所自动处理 3D 姿势分析结果的软件。这甚至可以在衡量员工的同时发生。然后,Scalefit 根据国际标准对姿势、压缩力和关节力矩进行分析和可视化。 3D姿势分析 如今,Xsens 技术可让您快速测量工作场所员工的态度。一套带有 17 个…...

网络编程:各协议头(数据报格式)

一、mac头 二、ip头 protocol——tcp/udp (7)TTL——生存时间 三、tcp头 四、udp头...

SpringBoot报错:The field file exceeds its maximum permitted size of 1048576 bytes

报错信息 The field file exceeds its maximum permitted size of 1048576 bytes原因是 SpringBoot内嵌的 tomcat 默认的所有上传的文件大小为 1MB 解决办法 修改配置 spring:servlet:multipart:max-file-size: 50MBmax-request-size: 50MB或者 spring.servlet.multipart.…...

C++的介绍与认识

目录 前言 1.什么是C 2.C的发展历史 3.C参考文档 4.C重要性 4.1C特点 4.2编程语言排行榜 4.3 C的应用领域 5.C学习指南 1. 基础知识 2. 面向对象编程(OOP) 3. 泛型编程 4. 标准库(STL) 结束语 前言 学习了C语言的知识…...

Spark源码详解

https://www.cnblogs.com/huanghanyu/p/12989067.html#_label3_3...

浅尝Apache Mesos

文章目录 1. Mesos是什么2. 共享集群3. Apache Mesos3.1 Mesos主节点3.2 Mesos代理3.3 Mesos框架 4. 资源管理4.1 资源提供4.2 资源角色4.3 资源预留4.4 资源权重与配额 5. 实现框架5.1 框架主类5.3 实现执行器 6. 小结参考 1. Mesos是什么 Mesos是什么,Mesos是一个…...

buuctf题目讲解-1

一眼就解密 ZmxhZ3tUSEVfRkxBR19PRl9USElTX1NUUklOR30 flag{THEFLAGOFTHISSTRING} base家族 base64 加密原理: 明文:abc 去找ascii码的二进制形式 a-->97-→01100001 (二进制为8位如果不足8位则在最左边补0至8位) b-→…...

软件测试学习之-ADB命令

ADB命令 adb工具即Android Debug Bridge(安卓调试桥) tools。它就是一个命令行窗口,用于通过电脑端与模拟器或者真实设备交互。在某些特殊的情况下进入不了系统,adb就派上用场啦! Android程序的开发通常需要使用到一…...

Redis的入门导读(一)

目录 单机架构 分布式系统 个人总结 一.Redis的介绍 二.Redis特性 三.Redis的快原因 四.Redis的应用场景 五.Redis的总结 由于Redis和分布式系统息息相关,因此我们需要先了解一下,分布式系统! 接下来就是分布式系统的演化过程。 单…...

H5与小程序:两者有何不同?

H5,即HTML5,是构建Web内容的一种语言描述方式,也是互联网的下一代标准,被认为是互联网的核心技术之一。HTML5是在HTML4.01的基础上进行了一定的改进后的规范,用户在使用任何手段进行网页浏览时看到的内容原本都是HTML格…...

【WiFi帧结构】

文章目录 帧结构MAC头部管理帧 帧结构 Wi-Fi的帧分为三部分组成:MAC头部frame bodyFCS,其中MAC是固定格式的,frame body是可变长度。 MAC头部有frame control,duration,address1,address2,addre…...

Springcloud:Eureka 高可用集群搭建实战(服务注册与发现的底层原理与避坑指南)

引言:为什么 Eureka 依然是存量系统的核心? 尽管 Nacos 等新注册中心崛起,但金融、电力等保守行业仍有大量系统运行在 Eureka 上。理解其高可用设计与自我保护机制,是保障分布式系统稳定的必修课。本文将手把手带你搭建生产级 Eur…...

从零实现STL哈希容器:unordered_map/unordered_set封装详解

本篇文章是对C学习的STL哈希容器自主实现部分的学习分享 希望也能为你带来些帮助~ 那咱们废话不多说&#xff0c;直接开始吧&#xff01; 一、源码结构分析 1. SGISTL30实现剖析 // hash_set核心结构 template <class Value, class HashFcn, ...> class hash_set {ty…...

【Java_EE】Spring MVC

目录 Spring Web MVC ​编辑注解 RestController RequestMapping RequestParam RequestParam RequestBody PathVariable RequestPart 参数传递 注意事项 ​编辑参数重命名 RequestParam ​编辑​编辑传递集合 RequestParam 传递JSON数据 ​编辑RequestBody ​…...

NXP S32K146 T-Box 携手 SD NAND(贴片式TF卡):驱动汽车智能革新的黄金组合

在汽车智能化的汹涌浪潮中&#xff0c;车辆不再仅仅是传统的交通工具&#xff0c;而是逐步演变为高度智能的移动终端。这一转变的核心支撑&#xff0c;来自于车内关键技术的深度融合与协同创新。车载远程信息处理盒&#xff08;T-Box&#xff09;方案&#xff1a;NXP S32K146 与…...

MFC 抛体运动模拟:常见问题解决与界面美化

在 MFC 中开发抛体运动模拟程序时,我们常遇到 轨迹残留、无效刷新、视觉单调、物理逻辑瑕疵 等问题。本文将针对这些痛点,详细解析原因并提供解决方案,同时兼顾界面美化,让模拟效果更专业、更高效。 问题一:历史轨迹与小球残影残留 现象 小球运动后,历史位置的 “残影”…...

深入浅出Diffusion模型:从原理到实践的全方位教程

I. 引言&#xff1a;生成式AI的黎明 – Diffusion模型是什么&#xff1f; 近年来&#xff0c;生成式人工智能&#xff08;Generative AI&#xff09;领域取得了爆炸性的进展&#xff0c;模型能够根据简单的文本提示创作出逼真的图像、连贯的文本&#xff0c;乃至更多令人惊叹的…...

stm32wle5 lpuart DMA数据不接收

配置波特率9600时&#xff0c;需要使用外部低速晶振...

DeepSeek越强,Kimi越慌?

被DeepSeek吊打的Kimi&#xff0c;还有多少人在用&#xff1f; 去年&#xff0c;月之暗面创始人杨植麟别提有多风光了。90后清华学霸&#xff0c;国产大模型六小虎之一&#xff0c;手握十几亿美金的融资。旗下的AI助手Kimi烧钱如流水&#xff0c;单月光是投流就花费2个亿。 疯…...

OpenGL-什么是软OpenGL/软渲染/软光栅?

‌软OpenGL&#xff08;Software OpenGL&#xff09;‌或者软渲染指完全通过CPU模拟实现的OpenGL渲染方式&#xff08;包括几何处理、光栅化、着色等&#xff09;&#xff0c;不依赖GPU硬件加速。这种模式通常性能较低&#xff0c;但兼容性极强&#xff0c;常用于不支持硬件加速…...