python 截取某一天的日志,简单操作

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

1、解释大神之作,致敬“种心收默”(http://www.cnblogs.com/drgcaosheng/p/3747820.html)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
#!/usr/bin/python
#-*- coding:utf-8 -*-
 
import  re,sys
def  openfile( * args):
     print  args
     try :
         f = open (args[ 0 ], 'r' )    #args[0]表示要打开的文件,第一个参数下标的值
         try :
             while  True :
                 lines  =  f.readlines( 100
                 if  not  lines:    #假如没有行了,则跳出整个循环
                     break
                 for  line  in  lines:   #循环每一行
                     if (line.find(args[ 1 ])> = 0 ):   #args[1]表示要搜索的文字,第二个参数下标的值
                         writenewfile(line,args[ 2 ])   #假如存在搜索的关键字,然后传到writenewfile函数,args[2]表示新文件
         finally :
             f.close()
             print  '*' * 21 + "END" + "*" * 21    #打印结束星号
     except  IOError:
         print  args[ 0 ] + " not find!"
 
                 
def  writenewfile( * args):    #定义写入新文件
     try :
         newfile = open (args[ 1 ], 'a' )   #追加模式打开新文件,没有会自动建一个
         try :
             newfile.write(args[ 0 ])     #一行一行的写到新文件中
         finally :
             newfile.close()
     except  IOError:
         print  args[ 1 ] + "not find!!"    #如果错误就提示新文件找不到
 
                 
def  chuli( * args):
     print  '*' * 20 + "START" + "*" * 20     #打印开始星号
     logre = re.split( '\.' ,args[ 0 ])    #按点切割文件名(所以文件名要有点号)
     newlogfile = logre[ 0 ] + args[ 1 ] + "." + logre[ 1 ]    #新文件的名字等于第一个点号前面+你搜索字符+点号+第一个点号后面的字符
     openfile(args[ 0 ],args[ 1 ],newlogfile)    #调用openfile函数,args[0]和args[1]是chuli传过来sys.argv[1],sys.argv[2]。
 
         
if  __name__ = = '__main__' :        #意思就是说让你写的脚本模块既可以导入到别的模块中用,另外该模块自己也可执行。
     chuli(sys.argv[ 1 ],sys.argv[ 2 ])    #获取python cao.py 104.250.149.146-test.log "Dec 18"的实际参数传给chuli函数的args[0]和args[1]


2、运行方式和结果。

1
2
3
4
[root@localhost ~] # python cao.py 104.250.3.77-test.log "Dec 18"
* * * * * * * * * * * * * * * * * * * * START * * * * * * * * * * * * * * * * * * * *
( '104.250.3.77-test.log' 'Dec 18' '104Dec 18.250' )
* * * * * * * * * * * * * * * * * * * * * END * * * * * * * * * * * * * * * * * * * * *



执行顺序如下:
(1)、先调用chuli函数,将python cao.py命令后实际的2个参数传递给chuli函数。
(2)、执行chuli函数,打印开始的*号,生成新文件名,并调用openfile函数,并且将三个参数传给了openfile函数。
(3)、执行openfile函数,读取文件,搜索关键字,搜索完成后调用writenewfile函数,写入新文件中。
(4)、执行writenewfile函数,以追加方式打开新文件,然后把匹配的行一行一行写入到新文件中。



3、小弟python知识、逻辑有限,*args传多个值把我搞晕了,所以我改下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
#!/usr/bin/python
#-*- coding:utf-8 -*-
 
import  re,sys
 
def  openfile(srcfile,search,decfile):   
     try :
         f = open (srcfile, 'r' )    
         try :
             while  True :
                 lines  =  f.readlines( 100 )
                 if  not  lines:    
                     break
                 for  line  in  lines:   
                     if (line.find(search)> = 0 ):     
                         writenewfile(line,decfile)  
         finally :
             f.close()
             print  '*' * 21 + "END" + "*" * 21
     except  IOError:
         print  srcfile + " not find!"
 
 
 
def  writenewfile(line,decfile):    
     try :
         newfile = open (decfile, 'a' )   
         try :
             newfile.write(line)
         finally :
             newfile.close()
 
     except  IOError:
         print  decfile + "not find!!"
 
 
def  makefile(srcfile,search):
     print  '*' * 20 + "START" + "*" * 20
     namesplit = re.split( '\.' ,srcfile)
     decfile = namesplit[ 0 ] + search + "." + namesplit[ 1 ]
     openfile(srcfile,search,decfile)
 
 
if  __name__ = = '__main__' :
     makefile(sys.argv[ 1 ],sys.argv[ 2 ])





本文转自 sailikung 51CTO博客,原文链接:http://blog.51cto.com/net881004/2052575,如需转载请自行联系原作者
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
2月前
|
Python
python读写操作excel日志
主要是读写操作,创建表格
64 2
|
2月前
|
Python Windows
python知识点100篇系列(24)- 简单强大的日志记录器loguru
【10月更文挑战第11天】Loguru 是一个功能强大的日志记录库,支持日志滚动、压缩、定时删除、高亮和告警等功能。安装简单,使用方便,可通过 `pip install loguru` 快速安装。支持将日志输出到终端或文件,并提供丰富的配置选项,如按时间或大小滚动日志、压缩日志文件等。还支持与邮件通知模块结合,实现邮件告警功能。
python知识点100篇系列(24)- 简单强大的日志记录器loguru
|
2月前
|
数据采集 机器学习/深度学习 存储
使用 Python 清洗日志数据
使用 Python 清洗日志数据
41 2
|
3月前
|
消息中间件 Kafka API
python之kafka日志
python之kafka日志
32 3
|
3月前
|
Python
5-9|Python获取日志
5-9|Python获取日志
|
3月前
|
开发者 Python
基于Python的日志管理与最佳实践
日志是开发和调试过程中的重要工具,然而,如何高效地管理和利用日志常常被忽略。本文通过Python中的logging模块,探讨如何使用日志来进行调试、分析与问题排查,并提出了一些实际应用中的优化建议和最佳实践。
|
4月前
|
消息中间件 安全 Python
Python日志管理之Loguru
Python日志管理之Loguru
|
3月前
|
Python
Python如何将日志输入到文件里
Python如何将日志输入到文件里
|
3月前
|
Python
python之日志基础班
python之日志基础班
|
4月前
|
存储 程序员 开发者
Python|日志记录详解(1)
Python|日志记录详解(1)
56 0
Python|日志记录详解(1)