利用python 提取log 文件里的关键句子,并进行统计分析

利用python 提取log 文件里的关键句子,并进行统计分析

大家好,又见面了,我是全栈君。

利用python开发了一个提取sim.log 中的各个关键步骤中的时间并进行统计的程序:

#!/usr/bin/python2.6
import re,datetime
file_name='/home/alzhong/logs/qtat1/R2860.01.13/sim-applycommitrollback-bld1.log'
file=open(file_name,'r')
acnum=[];time_res=[];lnum=0
def trans_time(time):
    t1=datetime.datetime.strptime(time,'%y/%m/%d %H:%M:%S')
    return t1
for (num,line) in enumerate(file):

    if(re.search(r'^(.*)BEGINNING SIM PROCEDURE(.*)$',line)):
        m=re.search(r'^(.*)BEGINNING SIM PROCEDURE(.*)$',line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))
    elif(re.search(r'^(.*)CP_W(.*)$', line)):
        m=re.search(r'^(.*)CP_W(.*)$', line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))
    elif(re.search(r"^(.*)VERIFY_S(.*)$", line)):
        m=re.search(r"^(.*)VERIFY_S(.*)$", line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))
    elif(re.search(r"^(.*)--action commit(.*)$",line)):
        m=re.search(r"^(.*)--action commit(.*)$",line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))
    elif(re.search(r"^(.*)COMPLETED SIM PROCEDURE(.*)$",line)):
        m=re.search(r"^(.*)COMPLETED SIM PROCEDURE(.*)$",line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))
    elif(re.search(r"^(.*)RESUMING SIM PROCEDURE(.*)$",line)):
        m=re.search(r"^(.*)RESUMING SIM PROCEDURE(.*)$",line)
        print 'Step %d:'%(lnum), m.group(0);lnum+=1
        acnum.append(trans_time(line[0:17]))

file.close()
if(re.search(r"^(.*)backout(.*)$",file_name)):
    time_res.append((acnum[2]-acnum[0]).seconds/60)
    time_res.append((acnum[4]-acnum[3]).seconds/60)
    time_res.append((acnum[6]-acnum[5]).seconds/60)
    time_res.append(((acnum[8]-acnum[7])+(acnum[10]-acnum[9])+(acnum[13]-acnum[11])).seconds/60)
    print "\n3). sim --proc update --action apply to \"CP_WARNING\" %s mins" %(time_res[0])
    print "4). sim --proc update --action resume to  \"VERIFY_SOFTWARE\" %s mins"%(time_res[1])
    print "5). sim --proc update --action resume to  \"COMMIT\" %s mins"%(time_res[2])
    print "8). Backout from RXX to RXX  %s mins"%(time_res[3])
elif(re.search(r"^(.*)rollback(.*)$",file_name)):
    time_res.append((acnum[2]-acnum[0]).seconds/60)
    time_res.append((acnum[4]-acnum[3]).seconds/60)
    time_res.append((acnum[6]-acnum[5]).seconds/60)
    time_res.append((acnum[8]-acnum[7]).seconds/60)
    time_res.append(((acnum[10]-acnum[9])+(acnum[12]-acnum[11])+(acnum[15]-acnum[13])).seconds/60)
    print "\n3). sim --proc update --action apply to \"CP_WARNING\" %s mins" %(time_res[0])
    print "4). sim --proc update --action resume to  \"VERIFY_SOFTWARE\" %s mins"%(time_res[1])
    print "5). sim --proc update --action resume to  \"COMMIT\" %s mins"%(time_res[2])
    print "6). sim --proc update --action commit to end of Patch %s mins"%(time_res[3])
    print "8). Rollback from RXX to RXX %s mins" %(time_res[4])
if __name__ == '__main__':
    pass
:q!
<lsslogin1-alzhong>/home/alzhong/tools: ls
simt
<lsslogin1-alzhong>/home/alzhong/tools: ./simt
Step 0: 14/06/16 12:31:32 BEGINNING SIM PROCEDURE 'update apply' type=hot ...
Step 1: 14/06/16 13:18:42 RESUMING SIM PROCEDURE 'update apply' type=hot ...
Step 2: 14/06/16 13:30:43 SIM0317 PAUSE_REQUEST: (PROCEDURE) [PAUSE(CP_WARNING): Use 'sim --proc update --action resume' to continue...] (update:1435)
Step 3: 14/06/16 13:43:40 RESUMING SIM PROCEDURE 'update apply' type=hot ...
Step 4: 14/06/16 13:47:49 SIM0343 PAUSE_REQUEST: (PROCEDURE) [PAUSE(VERIFY_SOFTWARE): Use 'sim --proc update --action resume' to continue...] (update:1634)
Step 5: 14/06/16 13:54:26 RESUMING SIM PROCEDURE 'update apply' type=hot ...
Step 6: 14/06/16 14:25:41 SIM0496 PAUSE_REQUEST: (COMMIT) [PAUSE(COMMIT): Use 'sim --proc update --action commit' to continue...] (update:2579)
Step 7: 14/06/16 14:41:51 RESUMING SIM PROCEDURE 'update commit' type=hot ...
Step 8: 14/06/16 15:18:34 COMPLETED SIM PROCEDURE 'update commit' type=hot
Step 9: 14/06/16 15:31:35 BEGINNING SIM PROCEDURE 'update rollback' type=hot level=9999 ...
Step 10: 14/06/16 15:47:34 SIM0091 PAUSE_REQUEST: (PROCEDURE) [PAUSE(CP_WARNING): Use 'sim --proc update --action resume' to continue...] (update_rlbk:421)
Step 11: 14/06/16 15:53:30 RESUMING SIM PROCEDURE 'update rollback' type=hot level=9999 ...
Step 12: 14/06/16 16:02:03 SIM0135 PAUSE_REQUEST: (PROCEDURE) [PAUSE(VERIFY_SOFTWARE): Use 'sim --proc update --action resume' to continue...] (update_rlbk:564)
Step 13: 14/06/16 16:04:22 RESUMING SIM PROCEDURE 'update rollback' type=hot level=9999 ...
Step 14: 14/06/16 16:09:42 RESUMING SIM PROCEDURE 'update rollback' type=hot level=9999 ...
Step 15: 14/06/16 16:26:56 COMPLETED SIM PROCEDURE 'update rollback' type=hot level=9999

3). sim --proc update --action apply to "CP_WARNING" 59 mins
4). sim --proc update --action resume to  "VERIFY_SOFTWARE" 4 mins
5). sim --proc update --action resume to  "COMMIT" 31 mins
6). sim --proc update --action commit to end of Patch 36 mins
8). Rollback from RXX to RXX 47 mins

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/116540.html原文链接:https://javaforall.net

(0)
上一篇 2022年1月19日 下午10:00
下一篇 2022年1月19日 下午11:00


相关推荐

  • 活点地图

    去年这个时候,我开始做活点地图APP,用了二十几天的时间完成,发布到了各大应用市场,从产品构思到UI设计和代码实现都是一个人完成,可能产品定位也没有考虑太清楚,尝鲜的人很多,但是留存率比较低,

    2022年3月11日
    84
  • Java工程师-招聘要求

    Java工程师-招聘要求工作职责: 1、负责后台系统的研发,及时解决项目涉及到的技术问题。 2、参与系统需求分析与设计,负责完成核心代码编写,接口规范制定3、参与后台服务性能效率优化岗位要求: 1、计算机相关专业毕业,有大数据高并发的处理经验,精通spring框架,阅读过spring源码,熟悉其事务机制 2、熟练应用Linux操作系统,熟悉GIT等版本管理软件3、掌握网站访问速度的各种优化方案,并提出优化方案更佳4、掌握…

    2022年7月8日
    29
  • CGAL:学习CGAL

    CGAL:学习CGAL背景 CGAL 是一个非常有用的库 但是学习起来非常痛苦 为此 我们计划通过一些小的 demo 逐渐学习 CGAL 的使用方法 目前 由于我们还缺少对 CGAL 的整体把握 所以 demo 没有连贯性 且难度飘忽不定 不过随着我们的理解 demo 肯定会越写越好 到现在为止 我们已经写了 7 个左右的 dmeo 使用 CGAL 解决我们遇到的一些小问题 大致如下 代码我们代码的链接如下 https github

    2026年3月16日
    3
  • 解决跨域问题 has been blocked by CORS policy: No ‘Access-Control-Allow-Origin‘ header is present[通俗易懂]

    解决跨域问题 has been blocked by CORS policy: No ‘Access-Control-Allow-Origin‘ header is present[通俗易懂]说一下做项目时需要用到html2canvas做项目截图踩到的跨域坑。项目需要拉取用户的头像,而linkedin和微信的头像存放于cdn中,这边涉及到的跨域问题。坑1:由于跨域,画布被污染,不能调用toBlob(),toDataURL()或getImageData()方法,调用它们会抛出安全错误。按网上说的做,配置useCORS:true,…

    2022年8月24日
    53
  • linux收发邮件_python邮件发送

    linux收发邮件_python邮件发送linux邮件传输一般用在特定的网络环境下,记住,只要有网络,就能办事;闲话少扯,直接上干货:步骤1邮箱设置开启STMP服务,开启后会收到STMP授权码。多种邮箱都有这个功能,申请后把你的授权码记住了。步骤2linux命令:/etc/mail.rc配置邮件发送参数将以下数据加到最下面(如下图):#邮箱setfrom=843903492@qq.com#默…

    2022年10月20日
    5
  • matlab 马赫带效应,matlab图像处理基础实例

    matlab 马赫带效应,matlab图像处理基础实例matlab图像处理基础实例·边缘检测(edge)边缘检测时先要把其他格式图像转化为灰度图像>>f=imread(lbxx.bmp);>>a=rgb2gray(f);>>[g,t]=edge(a,canny);>>imshow(g)·剪贴(imcrop)、subplot等imfinfocolormapsubimageimadd…

    2025年6月28日
    6

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号