【100天精通python】Day26:文件和IO操作_文件指针的定位与移动,序列化与反序列化

简介: 【100天精通python】Day26:文件和IO操作_文件指针的定位与移动,序列化与反序列化

专栏导读

专栏订阅地址:https://blog.csdn.net/qq_35831906/category_12375510.html

1 文件的基本操作

1.1 参考

【100天精通python】Day19:文件及目录操作_基本文件操作

http://t.csdn.cn/oEcD0

【100天精通python】Day21:文件及目录操作_文件的权限处理和批量处理http://t.csdn.cn/5NNpm

1.2 获取文件属性:

       可以使用 os.stat() 函数来获取文件的各种属性,如大小、创建时间、修改时间等。以下是一个示例:

import os
file_path = "path/to/file.txt"
file_stat = os.stat(file_path)
print("文件大小:", file_stat.st_size)
print("创建时间:", file_stat.st_ctime)
print("修改时间:", file_stat.st_mtime)
print("访问时间:", file_stat.st_atime)

2  定位和移动文件指针

       文件指针(file pointer)是用来标记文件中当前位置的一个概念性的指针。它指示了下一次读写操作将在文件中发生的位置。

       文件指针可以看作是一个指向文件中某个位置的指针,类似于数学中的游标。在读取文件时,文件指针指示了将要读取的数据的起始位置;在写入文件时,文件指针指示了将要写入的数据的位置,并且会随着数据的写入自动移动到下一个写入位置。

       每个打开的文件都有一个对应的文件指针,该指针初始时位于文件的起始位置。文件指针的位置可以通过文件操作来修改,通常使用 tell()和seek() 函数来进行定位和移动。

2.1 tell() 函数使用

       tell()方法是用于获取当前文件指针的位置(即文件读写的位置)的。在Python中,文件对象有一个文件指针,它标识了当前读写的位置。初始时,文件指针位于文件开头。当我们进行读取或写入操作后,文件指针会随之移动到相应的位置。

 tell()方法返回的是一个整数,表示当前文件指针的位置。该位置是相对于文件开头的偏移量,以字节为单位。

下面是一个简单的示例,展示如何使用 tell()方法获取当前文件指针的位置:

# 打开文件
file = open("example.txt", "r")
# 读取文件内容
content = file.read(10)  # 读取10个字符
# 获取当前文件指针的位置
position = file.tell()
print("当前文件指针位置:", position)
# 关闭文件
file.close()

请注意,在读写文件的过程中,每次读写都会导致文件指针的移动,所以在需要获取指针位置时,应在读写操作之后调用 tell()方法来获取最新的位置。

2.2 seek() 函数使用

过调用 seek() 函数并传递要移动的字节数或字符数以及相对于哪个参考点进行移动,可以改变文件指针的位置。

 以下是一些常见的文件指针移动操作:

  • seek(0):将文件指针移动到文件开头。
  • seek(0, 2):将文件指针移动到文件末尾。
  • seek(offset, 0):以文件开头为参考点,将文件指针向后移动 offset 个字节或字符。
  • seek(offset, 1):以当前文件指针位置为参考点,将文件指针向后或向前移动 offset 个字节或字符。
  • seek(offset, 2):以文件末尾为参考点,将文件指针向前移动 offset 个字节或字符。

文件指针的位置对于文件的读取和写入操作非常重要,因为它决定了在何处进行数据的读取和写入。通过操作文件指针,可以选择性地读取或写入文件中的特定位置的数据,使文件操作更加灵活和精确。

以下是一些seek()常用语法:

1. 将文件指针移动到文件开头:

file.seek(0)

2. 将文件指针移动到文件末尾:

file.seek(0, 2)

3 .将文件指针相对于当前位置向后移动:

file.seek(5, 1)

4. 将文件指针相对于文件末尾向前移动:

file.seek(-10, 2)

      需要注意的是,在使用 seek()方法之前,文件必须以可读或可写模式打开。另外,在进行文件指针移动时,要注意边界条件和文件的大小,避免超出文件的范围。

3 序列化和反序列化

3.1 序列化与反序列化概述

       序列化和反序列化是计算机编程中的重要概念,用于将数据转换为可存储或传输的格式,以及将这些格式转换回原始数据。这两个概念在数据的持久化(存储在硬盘或数据库中)和数据的网络传输(例如通过网络发送数据)等方面非常常见。

  1. 序列化(Serialization): 序列化是将数据结构或对象转换为一种可持久化或可传输的格式,例如字节流、JSON字符串、XML等。序列化后的数据可以存储在文件中、通过网络传输,或在内存中进行缓存。序列化的目的是为了将数据在不同系统之间进行交换或保存,使得数据可以被传输、存储和重新构建。
  2. 反序列化(Deserialization): 反序列化是将序列化后的数据重新转换回原始的数据结构或对象的过程。通过反序列化,我们可以从持久化的数据或传输的数据中重新构建出原始的数据结构,使得我们可以继续操作和使用这些数据。

       序列化和反序列化在各种编程场景中都非常常见。例如,当我们需要将对象保存到文件系统中,以便在程序重启后恢复状态时,我们会使用序列化操作。又或者当我们需要将数据通过网络发送给其他系统时,我们会将数据序列化为特定格式,发送后对方再进行反序列化以还原数据。

       在不同的编程语言中,通常都有相应的序列化和反序列化的支持,以及对应的库或模块用于处理这些操作。常见的序列化格式包括 JSON、XML、YAML 和 Pickle(Python 特有的序列化格式)。选择适当的序列化格式取决于应用的需求和场景。需要注意的是,对于反序列化操作,务必确保从可信源加载数据,以避免安全漏洞。

3.2JSON序列化与反序列化

       JSON序列化和反序列化是将数据转换为JSON格式以便于存储和传输,并将JSON格式数据还原为原始数据结构的过程。JSON(JavaScript Object Notation)是一种轻量级的数据交换格式,易于阅读和编写。在Python中,可以使用json模块进行JSON序列化和反序列化操作。

JSON序列化:

示例: 假设我们有一个Python字典,我们要将其序列化为JSON字符串:

import json
data = {
    "name": "John",
    "age": 30,
    "is_student": False,
    "hobbies": ["reading", "gaming", "coding"]
}
# 将Python对象序列化为JSON字符串
json_string = json.dumps(data)
print(json_string)

输出

{"name": "John", "age": 30, "is_student": false, "hobbies": ["reading", "gaming", "coding"]}
JSON反序列化:

示例: 假设我们有一个JSON字符串,我们要将其反序列化为Python对象:

import json
json_string = '{"name": "John", "age": 30, "is_student": false, "hobbies": ["reading", "gaming", "coding"]}'
# 将JSON字符串反序列化为Python对象
data = json.loads(json_string)
print(data)

输出

{'name': 'John', 'age': 30, 'is_student': False, 'hobbies': ['reading', 'gaming', 'coding']

       在JSON序列化时,json.dumps()函数将Python对象转换为JSON格式的字符串。在JSON反序列化时,json.loads()函数将JSON字符串转换回原始的Python数据结构。

       需要注意的是,JSON只支持有限的数据类型,包括字符串、数值、布尔值、列表、字典和None。当将Python对象序列化为JSON时,确保对象的数据类型是JSON兼容的。例如,Python的布尔值True和False将分别被序列化为JSON中的true和false。在反序列化时,JSON字符串将被还原为Python中相应的数据类型。

       总结:JSON序列化和反序列化是在Python中处理数据以便于存储和传输的重要工具。JSON是一种通用的数据交换格式,适用于跨语言通信。在Python中,使用json模块可以很方便地进行JSON序列化和反序列化操作。

3.3 pickle 序列化与反序列化

   pickle 是 Python 内置的模块,用于将 Python 对象序列化为字节流,并将字节流反序列化回 Python 对象。反序列化操作是将序列化后的数据重新转换回Python对象的过程。与 JSON 不同,pickle 可以序列化几乎所有 Python 数据类型,包括自定义类的实例。

pickle 序列化:

       示例: 假设我们有一个 Python 字典,我们将其序列化为字节流:

import pickle
data = {
    "name": "John",
    "age": 30,
    "is_student": False,
    "hobbies": ["reading", "gaming", "coding"]
}
# 将 Python 对象序列化为字节流
serialized_data = pickle.dumps(data)
print(serialized_data)
pickle 反序列化:

       示例: 假设我们有一个 pickle 序列化后的字节流,我们将其反序列化为 Python 对象:

import pickle
# 假设这是 pickle 序列化后的字节流
serialized_data = b'\x80\x04\x95)\x00\x00\x00\x00\x00\x00\x00}\x94\x8c\x04John\x94\x8c\x03age\x94K\x1e\x8c\nis_student\x94\x89\x88\x8c\x07hobbies\x94]\x94(\x8c\x07reading\x94\x8c\x06gaming\x94\x8c\x06coding\x94eu.'
# 将 pickle 序列化后的字节流反序列化为 Python 对象
data = pickle.loads(serialized_data)
print(data)

输出:

{'name': 'John', 'age': 30, 'is_student': False, 'hobbies': ['reading', 'gaming', 'coding']

pickle 提供了 dumps() 和 loads() 函数用于序列化和反序列化操作。dumps() 函数将 Python 对象序列化为字节流,而 loads() 函数将字节流反序列化为原始 Python 对象。

注意:pickle 序列化的数据是二进制形式的,不可读,适用于 Python 内部使用。可以保存和加载Python特定的数据结构和对象。同时要注意在反序列化时,尽量不要处理来自不可信源的数据,以避免安全漏洞。如果需要跨语言传输数据,JSON 序列化通常是更好的选择。

4 总结

       json模块序列化的数据是纯文本形式,可读性较好,适合跨语言传输。而pickle模块序列化的数据是二进制形式,不可读,适用于Python内部使用。

       在反序列化操作中,我们需要确保从可信的来源加载数据,以避免安全问题。尤其是在使用pickle模块时,只有您自己或您信任的来源创建的pickle文件应该被反序列化。pickle对于不可信数据是不安全的,因为它可以执行任意代码。相比之下,JSON是一个安全的序列化格式,它只表示数据,不包含可执行代码。  


目录
相关文章
|
1月前
|
并行计算 数据处理 Python
Python并发编程迷雾:IO密集型为何偏爱异步?CPU密集型又该如何应对?
在Python的并发编程世界中,没有万能的解决方案,只有最适合特定场景的方法。希望本文能够为你拨开迷雾,找到那条通往高效并发编程的光明大道。
38 2
|
30天前
|
监控 并行计算 数据处理
构建高效Python应用:并发与异步编程的实战秘籍,IO与CPU密集型任务一网打尽!
在Python编程的征途中,面对日益增长的性能需求,如何构建高效的应用成为了每位开发者必须面对的课题。并发与异步编程作为提升程序性能的两大法宝,在处理IO密集型与CPU密集型任务时展现出了巨大的潜力。今天,我们将深入探讨这些技术的最佳实践,助你打造高效Python应用。
32 0
|
7天前
|
存储 安全 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第22天】在Java的世界里,对象序列化和反序列化是数据持久化和网络传输的关键技术。本文将带你了解如何在Java中实现对象的序列化与反序列化,并探讨其背后的原理。通过实际代码示例,我们将一步步展示如何将复杂数据结构转换为字节流,以及如何将这些字节流还原为Java对象。文章还将讨论在使用序列化时应注意的安全性问题,以确保你的应用程序既高效又安全。
|
3天前
|
网络协议 物联网 API
Python网络编程:Twisted框架的异步IO处理与实战
【10月更文挑战第26天】Python 是一门功能强大且易于学习的编程语言,Twisted 框架以其事件驱动和异步IO处理能力,在网络编程领域独树一帜。本文深入探讨 Twisted 的异步IO机制,并通过实战示例展示其强大功能。示例包括创建简单HTTP服务器,展示如何高效处理大量并发连接。
16 1
|
20天前
|
存储 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第9天】在Java的世界里,对象序列化是连接数据持久化与网络通信的桥梁。本文将深入探讨Java对象序列化的机制、实践方法及反序列化过程,通过代码示例揭示其背后的原理。从基础概念到高级应用,我们将一步步揭开序列化技术的神秘面纱,让读者能够掌握这一强大工具,以应对数据存储和传输的挑战。
|
2天前
|
网络协议 调度 开发者
Python网络编程:Twisted框架的异步IO处理与实战
【10月更文挑战第27天】本文介绍了Python网络编程中的Twisted框架,重点讲解了其异步IO处理机制。通过反应器模式,Twisted能够在单线程中高效处理多个网络连接。文章提供了两个实战示例:一个简单的Echo服务器和一个HTTP服务器,展示了Twisted的强大功能和灵活性。
6 0
|
26天前
|
存储 安全 Java
Java编程中的对象序列化与反序列化
【10月更文挑战第3天】在Java编程的世界里,对象序列化与反序列化是实现数据持久化和网络传输的关键技术。本文将深入探讨Java序列化的原理、应用场景以及如何通过代码示例实现对象的序列化与反序列化过程。从基础概念到实践操作,我们将一步步揭示这一技术的魅力所在。
|
7天前
|
存储 缓存 NoSQL
一篇搞懂!Java对象序列化与反序列化的底层逻辑
本文介绍了Java中的序列化与反序列化,包括基本概念、应用场景、实现方式及注意事项。序列化是将对象转换为字节流,便于存储和传输;反序列化则是将字节流还原为对象。文中详细讲解了实现序列化的步骤,以及常见的反序列化失败原因和最佳实践。通过实例和代码示例,帮助读者更好地理解和应用这一重要技术。
7 0
|
1月前
|
开发框架 并行计算 .NET
脑洞大开!Python并发与异步编程的哲学思考:IO密集型与CPU密集型任务的智慧选择!
脑洞大开!Python并发与异步编程的哲学思考:IO密集型与CPU密集型任务的智慧选择!
27 1
|
30天前
|
存储 JSON 数据格式
Python 输入输出与文件处理: io、pickle、json、csv、os.path 模块详解
Python 输入输出与文件处理: io、pickle、json、csv、os.path 模块详解
26 0