切割日志 python版
樓主之前一直用shell進(jìn)行日志分析,但是日志過大,導(dǎo)致分析起來非常慢,樓主的思想是,把日志切割成n份,利用python多線程去分析豈不是快n多倍
#!/usr/bin/python
file=open("/home/test","r")
list=[]
fenge=""
def hanShu1():
? ? ? ?for i in file:
? ? ? ? ? ? ? ?list.append(i)
hanShu1()
changdu=len(list)
jisuan=changdu/2
print jisuan
d=range(0,jisuan)
print d
def lieBiao():
? ? ? ?sum=0
? ? ? ?g=0
? ? ? ?for c in d:
? ? ? ? ? ? ? ?if sum == 0:
? ? ? ? ? ? ? ? ? ? ? ?sum=sum+jisuan
? ? ? ? ? ? ? ? ? ? ? ?print sum
? ? ? ? ? ? ? ? ? ? ? ?a=list[0:sum]
? ? ? ? ? ? ? ? ? ? ? ?print a
? ? ? ? ? ? ? ? ? ? ? ?k="".join(a)
? ? ? ? ? ? ? ? ? ? ? ?print k
? ? ? ? ? ? ? ? ? ? ? ?lujing="/home/python/rizhi/"+str(sum)
? ? ? ? ? ? ? ? ? ? ? ?print lujing
? ? ? ? ? ? ? ? ? ? ? ?aa=open(lujing,"w+")
? ? ? ? ? ? ? ? ? ? ? ?bb=str(k)
? ? ? ? ? ? ? ? ? ? ? ?aa.write(k)
? ? ? ? ? ? ? ? ? ? ? ?aa.read()
? ? ? ? ? ? ? ?elif sum > 0:
? ? ? ? ? ? ? ? ? ? ? ?g+=g
? ? ? ? ? ? ? ? ? ? ? ?print g
? ? ? ? ? ? ? ? ? ? ? ?f=sum
? ? ? ? ? ? ? ? ? ? ? ?sum+=jisuan
? ? ? ? ? ? ? ? ? ? ? ?print sum
? ? ? ? ? ? ? ? ? ? ? ?g=list[f:sum]
? ? ? ? ? ? ? ? ? ? ? ?print g
? ? ? ? ? ? ? ? ? ? ? ?j="".join(g)
? ? ? ? ? ? ? ? ? ? ? ?print j
? ? ? ? ? ? ? ? ? ? ? ?lujing1="/home/python/rizhi/"+str(sum)
? ? ? ? ? ? ? ? ? ? ? ?print lujing1
? ? ? ? ? ? ? ? ? ? ? ?cc=open(lujing1,"w+")
? ? ? ? ? ? ? ? ? ? ? ?dd=str(j)
? ? ? ? ? ? ? ? ? ? ? ?cc.write(dd)
lieBiao()
if sum != changdu:
? ? ? ?shengyu=changdu-sum
? ? ? ?print shengyu
? ? ? ?shengyu1=list[shengyu:changdu]
? ? ? ?cc=open("/home/python/rizhi/zuizhong","w+")
? ? ? ?cc.write(shengyu1)
轉(zhuǎn)載于:https://blog.51cto.com/4249964/1364363
新人創(chuàng)作打卡挑戰(zhàn)賽發(fā)博客就能抽獎!定制產(chǎn)品紅包拿不停!總結(jié)
以上是生活随笔為你收集整理的切割日志 python版的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 11正则表达式
- 下一篇: websocket python爬虫_p