python文件操作

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 使用open打开文件后一定要记得调用文件对象的close()方法。比如可以用try/finally语句来确保最后能关闭文件。file_object = open('thefile.txt')try:     all_the_text = file_object.read( )finally:     file_object.close( )注:不能把open语句放在try块里,因为当打开文件出现异常时,文件对象file_object无法执行close()方法。

使用open打开文件后一定要记得调用文件对象的close()方法。比如可以用try/finally语句来确保最后能关闭文件。

file_object = open('thefile.txt')
try:
     all_the_text = file_object.read( )
finally:
     file_object.close( )

注:不能把open语句放在try块里,因为当打开文件出现异常时,文件对象file_object无法执行close()方法。


点击(此处)折叠或打开

  1. #coding:utf-8
  2. #!/usr/bin/python
  3. # Filename: fileRW.py
  4. import os

  5. context=""" hello world,hello
  6. "r" 以读方式打开,只能读文件 , 如果文件不存在,会发生异常 
  7. "w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件
  8.                                                      如果文件已存在,先清空,再打开文件"""
  9. def createfileBYwrite(filename):
  10.     f = open(filename,'w') #打开文件open()是file()的别名
  11.     f.write(context) #把字符串写入文件
  12.     f.close() #关闭文件

  13. #注意,调用writelines写入多行在性能上会比使用write一次性写入要高。
  14. def createfileBYwritelines(filename):
  15.     f = open(filename,'w') #打开文件open()是file()的别名
  16.     try:
  17.         f.writelines(context) #把字符串写入文件
  18.     finally: 
  19.         f.close() #关闭文件

  20. def readBYreadline(filename):
  21.     f = open(filename)
  22.     while True:
  23.         line =f.readline()#当文件指针移动到末尾继续readline会出现错误,所以后面要加判断
  24.         if line:
  25.             print line,
  26.         else:
  27.             break
  28.     f.close()

  29. #需要通过循环访问readlines()返回列表中的元素
  30. def readBYreadlines(filename):
  31.     f = open(filename)
  32.     try:
  33.         lines = f.readlines()
  34.         for line in lines:
  35.             print line,
  36.     finally:
  37.         f.close()
  38.     
  39. #从文件中读取所有内容,赋予一个字符串变量
  40. def readBYread(filename):
  41.     f = open(filename)
  42.     try:
  43.         content = f.read()
  44.     finally:
  45.         f.close()
  46.     print content 
  47.     
  48. if __name__== "__main__":
  49.     filename="hello.txt"
  50.     createfileBYwritelines(filename)
  51.     readBYread(filename)
  52.     #把文件删除掉
  53.     if os.path.exists(filename):
  54.         print "文件存在%s" %filename
  55.         os.remove(filename)
  56.     
  57.     
  58.  hello world,hello
  59. "r" 以读方式打开,只能读文件 , 如果文件不存在,会发生异常 
  60. "w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件
  61.                                                      如果文件已存在,先清空,再打开文件
  62. 文件存在hello.txt


2.读文件

读文本文件

input = open('data', 'r')
#第二个参数默认为r
input = open('data')

 

读二进制文件

input = open('data', 'rb')

 

读取所有内容

file_object = open('thefile.txt')
try:
     all_the_text = file_object.read( )
finally:
     file_object.close( )

 

读固定字节

file_object = open('abinfile', 'rb')
try:
    while True:
         chunk = file_object.read(100)
        if not chunk:
            break
         do_something_with(chunk)
finally:
     file_object.close( )

 

读每行

list_of_all_the_lines = file_object.readlines( )


如果文件是文本文件,还可以直接遍历文件对象获取每行:

for line in file_object:
     process line

 

3.写文件

写文本文件

output = open('data', 'w')

 

写二进制文件

output = open('data', 'wb')

 

追加写文件

output = open('data', 'w+')

 

写数据

file_object = open('thefile.txt', 'w')
file_object.write(all_the_text)
file_object.close( )

 

写入多行

file_object.writelines(list_of_text_strings)


注意,调用writelines写入多行在性能上会比使用write一次性写入要高。

在处理日志文件的时候,常常会遇到这样的情况:日志文件巨大,不可能一次性把整个文件读入到内存中进行处理,例如需要在一台物理内存为 2GB 的机器上处理一个 2GB 的日志文件,我们可能希望每次只处理其中 200MB 的内容。
在 Python 中,内置的 File 对象直接提供了一个 readlines(sizehint) 函数来完成这样的事情。以下面的代码为例:

file = open('test.log', 'r') sizehint = 209715200   # 200M position = 0 lines = file.readlines(sizehint) while not file.tell() - position < 0:        position = file.tell()        lines = file.readlines(sizehint)


每次调用 readlines(sizehint) 函数,会返回大约 200MB 的数据,而且所返回的必然都是完整的行数据,大多数情况下,返回的数据的字节数会稍微比 sizehint 指定的值大一点(除最后一次调用 readlines(sizehint) 函数的时候)。通常情况下,Python 会自动将用户指定的 sizehint 的值调整成内部缓存大小的整数倍。



一、用Python创建一个新文件,内容是从0到9的整数, 每个数字占一行:
#python
>>>f=open('f.txt','w')    # r只读,w可写,a追加
>>>for i in range(0,10):f.write(str(i)+'\n')
.  .  .
>>> f.close()

二、文件内容追加,从0到9的10个随机整数:
#python
>>>import random
>>>f=open('f.txt','a')
>>>for i in range(0,10):f.write(str(random.randint(0,9)))
.  .  .
>>>f.write('\n')
>>>f.close()

三、文件内容追加,从0到9的随机整数, 10个数字一行,共10行:
#python
>>> import random
>>> f=open('f.txt','a')
>>> for i in range(0,10):
.  .  .     for i in range(0,10):f.write(str(random.randint(0,9))) 
.  .  .     f.write('\n')    
.  .  .
>>> f.close()

四、把标准输出定向到文件:
#python
>>> import sys
>>> sys.stdout = open("stdout.txt", "w")
>>>  . . .

五、文件的读写

一、文件打开:

f = file(name[, mode[, buffering]])

入口参数:   name 文件名

                  mode   选项,字符串

                  buffering   是否缓冲 (0=不缓冲,1=缓冲, >1的int数=缓冲区大小)

返回值 : 文件对象

mode 选项:

"r"   以读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rb"   以二进制读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"wb" 以二进制写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rt"   以文本读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"wt" 以文本写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rb+"   以二进制读方式打开,可以读、写文件 , 如果文件不存在,会发生异常      

"wb+" 以二进制写方式打开,可以读、写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

二、关闭文件

f.close()

当文件读写完毕后,应关闭文件。

三、清空文件内容

f.truncate()

注意:仅当以 "r+"   "rb+"    "w"   "wb" "wb+"等以可写模式打开的文件才可以执行该功能。

四、文件的指针定位与查询

(1)文件指针:

      文件被打开后,其对象保存在 f 中, 它会记住文件的当前位置,以便于执行读、写操作,这个位置称为文件的指针( 一个从文件头部开始计算的字节数 long 类型 )。

(2)文件打开时的位置:

      以"r"   "r+"   "rb+" 读方式, "w"   "w+"   "wb+"写方式 打开的文件,

     一开始,文件指针均指向文件的头部。

(3) 获取文件指针的值:

      L = f.tell()

(4) 移动文件的指针

       f.seek(   偏移量, 选项 )

      选项 =0 时, 表示将文件指针指向从文件头部到 "偏移量"字节处。

      选项 =1 时, 表示将文件指针指向从文件的当前位置,向后移动 "偏移量"字节。

      选项 =2 时, 表示将文件指针指向从文件的尾部,,向前移动 "偏移量"字节。

五、从文件读取指内容   

1 文本文件(以"rt"方式打开的文件)的读取  

          s = f.readline(     )

        返回值: s 是字符串,从文件中读取的一行,含行结束符。

        说明: (1)  如果 len( s ) =0 表示已到文件尾

                    (2)   如果是文件的最后一行,有可能没有行结束符

2 二进制文件(以"rb"、"rb+"、"wb+" 方式打开的文件)的读取  

          s = f.read(    n )

   对于图片、视频等文件必须使用b的模式读写

     说明: (1)  如果 len( s ) =0 表示已到文件尾

                  (2)   文件读取后,文件的指针向后移动 len(s) 字节。

                (3)如果磁道已坏,会发生异常。

六、向文件写入一个字符串   

    f.write(    s )

    参数:       s 要写入的字符串

    说明: (1)文件写入后,文件的指针向后移动 len(s) 字节。

                 (2)如果磁道已坏,或磁盘已满会发生异常。

      

返回值: s 是字符串,从文件中读取的内容

七、删除文件

import os

os.remove(file)


使用open打开文件后一定要记得调用文件对象的close()方法。比如可以用try/finally语句来确保最后能关闭文件。

file_object = open('thefile.txt')
try:
     all_the_text = file_object.read( )
finally:
     file_object.close( )

注:不能把open语句放在try块里,因为当打开文件出现异常时,文件对象file_object无法执行close()方法。


点击(此处)折叠或打开

  1. #coding:utf-8
  2. #!/usr/bin/python
  3. # Filename: fileRW.py
  4. import os

  5. context=""" hello world,hello
  6. "r" 以读方式打开,只能读文件 , 如果文件不存在,会发生异常 
  7. "w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件
  8.                                                      如果文件已存在,先清空,再打开文件"""
  9. def createfileBYwrite(filename):
  10.     f = open(filename,'w') #打开文件open()是file()的别名
  11.     f.write(context) #把字符串写入文件
  12.     f.close() #关闭文件

  13. #注意,调用writelines写入多行在性能上会比使用write一次性写入要高。
  14. def createfileBYwritelines(filename):
  15.     f = open(filename,'w') #打开文件open()是file()的别名
  16.     try:
  17.         f.writelines(context) #把字符串写入文件
  18.     finally: 
  19.         f.close() #关闭文件

  20. def readBYreadline(filename):
  21.     f = open(filename)
  22.     while True:
  23.         line =f.readline()#当文件指针移动到末尾继续readline会出现错误,所以后面要加判断
  24.         if line:
  25.             print line,
  26.         else:
  27.             break
  28.     f.close()

  29. #需要通过循环访问readlines()返回列表中的元素
  30. def readBYreadlines(filename):
  31.     f = open(filename)
  32.     try:
  33.         lines = f.readlines()
  34.         for line in lines:
  35.             print line,
  36.     finally:
  37.         f.close()
  38.     
  39. #从文件中读取所有内容,赋予一个字符串变量
  40. def readBYread(filename):
  41.     f = open(filename)
  42.     try:
  43.         content = f.read()
  44.     finally:
  45.         f.close()
  46.     print content 
  47.     
  48. if __name__== "__main__":
  49.     filename="hello.txt"
  50.     createfileBYwritelines(filename)
  51.     readBYread(filename)
  52.     #把文件删除掉
  53.     if os.path.exists(filename):
  54.         print "文件存在%s" %filename
  55.         os.remove(filename)
  56.     
  57.     
  58.  hello world,hello
  59. "r" 以读方式打开,只能读文件 , 如果文件不存在,会发生异常 
  60. "w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件
  61.                                                      如果文件已存在,先清空,再打开文件
  62. 文件存在hello.txt


2.读文件

读文本文件

input = open('data', 'r')
#第二个参数默认为r
input = open('data')

 

读二进制文件

input = open('data', 'rb')

 

读取所有内容

file_object = open('thefile.txt')
try:
     all_the_text = file_object.read( )
finally:
     file_object.close( )

 

读固定字节

file_object = open('abinfile', 'rb')
try:
    while True:
         chunk = file_object.read(100)
        if not chunk:
            break
         do_something_with(chunk)
finally:
     file_object.close( )

 

读每行

list_of_all_the_lines = file_object.readlines( )


如果文件是文本文件,还可以直接遍历文件对象获取每行:

for line in file_object:
     process line

 

3.写文件

写文本文件

output = open('data', 'w')

 

写二进制文件

output = open('data', 'wb')

 

追加写文件

output = open('data', 'w+')

 

写数据

file_object = open('thefile.txt', 'w')
file_object.write(all_the_text)
file_object.close( )

 

写入多行

file_object.writelines(list_of_text_strings)


注意,调用writelines写入多行在性能上会比使用write一次性写入要高。

在处理日志文件的时候,常常会遇到这样的情况:日志文件巨大,不可能一次性把整个文件读入到内存中进行处理,例如需要在一台物理内存为 2GB 的机器上处理一个 2GB 的日志文件,我们可能希望每次只处理其中 200MB 的内容。
在 Python 中,内置的 File 对象直接提供了一个 readlines(sizehint) 函数来完成这样的事情。以下面的代码为例:

file = open('test.log', 'r') sizehint = 209715200   # 200M position = 0 lines = file.readlines(sizehint) while not file.tell() - position < 0:        position = file.tell()        lines = file.readlines(sizehint)


每次调用 readlines(sizehint) 函数,会返回大约 200MB 的数据,而且所返回的必然都是完整的行数据,大多数情况下,返回的数据的字节数会稍微比 sizehint 指定的值大一点(除最后一次调用 readlines(sizehint) 函数的时候)。通常情况下,Python 会自动将用户指定的 sizehint 的值调整成内部缓存大小的整数倍。



一、用Python创建一个新文件,内容是从0到9的整数, 每个数字占一行:
#python
>>>f=open('f.txt','w')    # r只读,w可写,a追加
>>>for i in range(0,10):f.write(str(i)+'\n')
.  .  .
>>> f.close()

二、文件内容追加,从0到9的10个随机整数:
#python
>>>import random
>>>f=open('f.txt','a')
>>>for i in range(0,10):f.write(str(random.randint(0,9)))
.  .  .
>>>f.write('\n')
>>>f.close()

三、文件内容追加,从0到9的随机整数, 10个数字一行,共10行:
#python
>>> import random
>>> f=open('f.txt','a')
>>> for i in range(0,10):
.  .  .     for i in range(0,10):f.write(str(random.randint(0,9))) 
.  .  .     f.write('\n')    
.  .  .
>>> f.close()

四、把标准输出定向到文件:
#python
>>> import sys
>>> sys.stdout = open("stdout.txt", "w")
>>>  . . .

五、文件的读写

一、文件打开:

f = file(name[, mode[, buffering]])

入口参数:   name 文件名

                  mode   选项,字符串

                  buffering   是否缓冲 (0=不缓冲,1=缓冲, >1的int数=缓冲区大小)

返回值 : 文件对象

mode 选项:

"r"   以读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"w" 以写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rb"   以二进制读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"wb" 以二进制写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rt"   以文本读方式打开,只能读文件 , 如果文件不存在,会发生异常      

"wt" 以文本写方式打开,只能写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

"rb+"   以二进制读方式打开,可以读、写文件 , 如果文件不存在,会发生异常      

"wb+" 以二进制写方式打开,可以读、写文件, 如果文件不存在,创建该文件

                                                     如果文件已存在,先清空,再打开文件

二、关闭文件

f.close()

当文件读写完毕后,应关闭文件。

三、清空文件内容

f.truncate()

注意:仅当以 "r+"   "rb+"    "w"   "wb" "wb+"等以可写模式打开的文件才可以执行该功能。

四、文件的指针定位与查询

(1)文件指针:

      文件被打开后,其对象保存在 f 中, 它会记住文件的当前位置,以便于执行读、写操作,这个位置称为文件的指针( 一个从文件头部开始计算的字节数 long 类型 )。

(2)文件打开时的位置:

      以"r"   "r+"   "rb+" 读方式, "w"   "w+"   "wb+"写方式 打开的文件,

     一开始,文件指针均指向文件的头部。

(3) 获取文件指针的值:

      L = f.tell()

(4) 移动文件的指针

       f.seek(   偏移量, 选项 )

      选项 =0 时, 表示将文件指针指向从文件头部到 "偏移量"字节处。

      选项 =1 时, 表示将文件指针指向从文件的当前位置,向后移动 "偏移量"字节。

      选项 =2 时, 表示将文件指针指向从文件的尾部,,向前移动 "偏移量"字节。

五、从文件读取指内容   

1 文本文件(以"rt"方式打开的文件)的读取  

          s = f.readline(     )

        返回值: s 是字符串,从文件中读取的一行,含行结束符。

        说明: (1)  如果 len( s ) =0 表示已到文件尾

                    (2)   如果是文件的最后一行,有可能没有行结束符

2 二进制文件(以"rb"、"rb+"、"wb+" 方式打开的文件)的读取  

          s = f.read(    n )

   对于图片、视频等文件必须使用b的模式读写

     说明: (1)  如果 len( s ) =0 表示已到文件尾

                  (2)   文件读取后,文件的指针向后移动 len(s) 字节。

                (3)如果磁道已坏,会发生异常。

六、向文件写入一个字符串   

    f.write(    s )

    参数:       s 要写入的字符串

    说明: (1)文件写入后,文件的指针向后移动 len(s) 字节。

                 (2)如果磁道已坏,或磁盘已满会发生异常。

      

返回值: s 是字符串,从文件中读取的内容

七、删除文件

import os

os.remove(file)


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
2月前
|
存储 Python
Python文件操作(1)
【10月更文挑战第17天】
116 60
Python文件操作(1)
|
5月前
|
监控 Java 数据处理
文件操作不再难!Python系统编程实战,带你轻松驾驭文件系统与I/O
【7月更文挑战第31天】在 Python 系统编程中, 文件操作与 I/O 管理至关重要。
59 2
|
2月前
|
数据采集 存储 Python
Python文件操作2
【10月更文挑战第18天】
Python文件操作2
|
6月前
|
开发者 Python
Python基础第七篇(Python的文件操作)
Python基础第七篇(Python的文件操作)
|
6月前
|
存储 安全 开发者
文件操作?Python让你轻松搞定!
【6月更文挑战第12天】Python编程中的文件操作至关重要,涉及数据存储和系统交互。通过内置的`open()`函数,开发者可轻松处理文件。以只读模式`&#39;r&#39;`为例,使用`with`语句打开并读取文件内容;写入文件则用`&#39;w&#39;`或`&#39;a&#39;`模式。文件对象还支持高级功能,如文件指针移动,允许随机访问。掌握这些技能能提升开发效率。
35 0
|
3月前
|
存储 Python
Python文件操作
Python文件操作
|
3月前
|
存储 安全 Python
30天拿下Python之文件操作
30天拿下Python之文件操作
33 1
|
3月前
|
监控 安全 Java
文件操作不再难!Python系统编程实战,带你轻松驾驭文件系统与I/O
【9月更文挑战第13天】在Python系统编程中,文件操作与I/O管理至关重要。本文通过五个实战案例分享最佳实践:高效遍历文件系统、优雅处理文件读写、利用缓冲机制优化性能、并行处理文件加速任务以及异常处理确保程序稳健。使用pathlib、上下文管理器及concurrent.futures等工具,助你轻松掌握Python文件系统与I/O操作,提升编程效率和项目质量。 示例代码展示了如何使用pathlib遍历目录、with语句安全读写文件、控制缓冲区大小、并行处理多个文件以及捕获异常保证程序稳定运行。通过这些技巧,你将能够在实际项目中更加高效地管理和操作文件。
48 6
|
2月前
|
Java 程序员 Python
【Python】文件操作
【Python】文件操作
22 0
|
4月前
|
IDE 测试技术 开发工具
Python接口自动化测试框架(基础篇)-- 不只是txt的文件操作
本文介绍了Python中的文件操作方法,包括使用open()打开文件、close()关闭文件、read()读取内容、readline()读取单行、readlines()读取多行、write()写入内容以及writelines()写入多行的方法。同时,探讨了文件操作模式和编码问题,并扩展了上下文管理器with...as的使用,以及对图片和音频文件操作的思考和练习。
33 1
Python接口自动化测试框架(基础篇)-- 不只是txt的文件操作