在業(yè)務(wù)穩(wěn)定性要求比較高的情況下，運(yùn)維為能及時(shí)發(fā)現(xiàn)問(wèn)題，有時(shí)需要對(duì)應(yīng)用程序的日志進(jìn)行實(shí)時(shí)分析，當(dāng)符合某個(gè)條件時(shí)就立刻報(bào)警，而不是被動(dòng)等待出問(wèn)題后去解決，比如要監(jiān)控nginx的$request_time和$upstream_response_time時(shí)間，分析出最耗時(shí)的請(qǐng)求，然后去改進(jìn)代碼，這時(shí)就要對(duì)日志進(jìn)行實(shí)時(shí)分析了，發(fā)現(xiàn)時(shí)間長(zhǎng)的語(yǔ)句就要報(bào)警出來(lái)，提醒開(kāi)發(fā)人員要關(guān)注，當(dāng)然這是其中一個(gè)應(yīng)用場(chǎng)景，通過(guò)這種監(jiān)控方式還可以應(yīng)用到任何需要判斷或分析文件的地方，所以今天我們就來(lái)看看如何用python實(shí)現(xiàn)實(shí)時(shí)監(jiān)控文件，我給三個(gè)方法實(shí)例：：

第一種：

這個(gè)是最簡(jiǎn)單的和容易理解的，因?yàn)榇蠹叶贾纋inux下有tail命令，所以你可以直接用Popen()函數(shù)去調(diào)用這個(gè)命令來(lái)執(zhí)行獲取輸出，代碼如下：

logfile='access.log'
command='tail -f ‘+logfile+'|grep “timeout”‘
popen=subprocess.Popen(command,stdout=subprocess.PIPE,stderr=subprocess.PIPE,shell=True)
while True:
line=popen.stdout.readline().strip()
print line

第二種：

采用python對(duì)文件的操作來(lái)實(shí)現(xiàn)，用文件對(duì)象的tell(), seek()方法分別得到當(dāng)前文件位置和要移動(dòng)到的位置，代碼如下：

import time
file = open(‘a(chǎn)ccess.log')
while 1:
where = file.tell()
line = file.readline()
if not line:
time.sleep(1)
file.seek(where)
else:
print line,

第三種：

利用python的 yield來(lái)實(shí)現(xiàn)一個(gè)生成器函數(shù)，然后調(diào)用這個(gè)生成器函數(shù)，這樣當(dāng)日志文件有變化時(shí)就打印新的行，代碼如下：

import time
def follow(thefile):
thefile.seek(0,2)
while True:
line = thefile.readline()
if not line:
time.sleep(0.1)
continue
yield line
if __name__ == ‘__main__':
logfile = open(“access-log”,”r”)
loglines = follow(logfile)
for line in loglines:
print line,

最后解釋下seek()函數(shù)的用法，這個(gè)函數(shù)接收2個(gè)參數(shù)：file.seek(off, whence=0)，從文件中移動(dòng)off個(gè)操作標(biāo)記（文件指針），正數(shù)往結(jié)束方向移動(dòng)，負(fù)數(shù)往開(kāi)始方向移動(dòng)。如果設(shè)定了whence參數(shù)，就以whence設(shè)定的起始位為準(zhǔn)，0代表從頭開(kāi)始，1代表當(dāng)前位置，2代表文件最末尾位置。

以上就是三個(gè)常用方法，具體日志分析的代碼大家可以根據(jù)自己的業(yè)務(wù)邏輯去實(shí)現(xiàn)，完畢。

以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。

最新評(píng)論