Skip to main content
 首页 » 编程设计

python之搜索日志,输出匹配前后的行

2025年05月04日17kuangbin

我正在尝试制作一个脚本,让我可以搜索文件夹中的所有文本文件以查找字符串,并在我要查找的字符串所在的行前后写入选定的行数。

我的问题是,当我在 slice 方法中放置一个变量时,我只得到匹配前的行数。当我使用纯数字 ([1:6]) 进行测试时,它起作用了。

我错过了什么?

我们也非常感谢任何改进建议。


我在找什么(数据文件):

12345 

我想写入结果文件的内容:

2 elit. Aenean commodo ligula eget d 
3 olor. Aenean massa.  
4 Cum sociis natoque 12345penatibus et m 
5 agnis dis parturient montes, nasc 
6 etur ridiculus mus. Donec quam felis, ultricies nec, pellentesque eu, pretium quis, sem. Nulla consequat 

我正在搜索的文本:

1 Lorem ipsum dolor sit amet, consectetuer adipiscing 
2 elit. Aenean commodo ligula eget d 
3 olor. Aenean massa.  
4 Cum sociis natoque 12345 penatibus et m 
5 agnis dis parturient montes, nasc 
6 etur ridiculus mus. Donec quam felis, ultricies nec, pellentesque eu, pretium quis, sem. Nulla consequat 
7 massa quis enim. Donec pede just 
8 o, fringilla vel,  
9 aliquet nec, vulputate eget, arcu. In enim justo, 

代码

import os  
 
search_folder = r'E:\stash\Logs' 
datafile = r'E:\stash\variable.txt'  
resultsFile = r'E:\stash\results.txt' 
nbrOfLinesOver = 3 
nbrOfLinesUnder = 2 
 
 
# Finds all the log files in the directory that needs to be searched through 
 
def findFiles(folder): 
 
    log_files = [] 
    for files in os.listdir(search_folder): 
        log_files.append(files) 
    return log_files 
 
# Finds the strings I want to search for 
 
def searchFor(datafile): 
 
    stringToFind = open(datafile,'r') 
    data = stringToFind.readline() 
    data = str(data).split() 
    map(str.strip,data) 
    stringToFind.close() 
    return data 
 
#Searches through the text files to find the strings and outputs the number of lines defined under and over the match 
 
def findLogData(log_Files, searchForData, folderPath, resultsFile): 
    resultFile = open(resultsFile, "w") 
    lineCounter = 0 
    logLines = []  
 
    for file in log_Files: 
        datalookUp = open(folderPath + "\\" + file,'r', encoding='UTF-8') 
        log = datalookUp.readlines() 
 
        for line in log: 
            lineCounter += 1  
            logLines.append(str(line))             
 
            for stringToFind in searchForData: 
                if stringToFind in line:  
                    slinceStart = lineCounter - nbrOfLinesOver 
                    slinceEnd = lineCounter + nbrOfLinesUnder 
                    resultFile.writelines(logLines[slinceStart:slinceEnd]) 
 
    resultFile.close() 
    datalookUp.close() 
 
 
FilesToSearch = findFiles(search_folder) 
stringsToFind = searchFor(datafile) 
findLogData(FilesToSearch,stringsToFind,search_folder,resultsFile) 

编辑:
我也有 searchFor 的问题。现在,我必须将要搜索的所有内容放在一行中。当我在文本文件中列出所有要搜索的字符串时,列表中也会出现“\n”。 这也是 map 功能的原因。这是我在论坛上找到建议后试图删除它时忘记删除的代码,但我无法删除换行符。

请您参考如下方法:

是的,这是因为 logLines 只包含直到包含字符串的行,它不包含之后的任何行(因为那些还没有被读取)。

此外,需要注意的一件事是,即使切片边界越界,切片时也不会抛出错误,而是会获取范围内所有可能的元素并将其返回。示例 -

>>> lst = [1,2,3,4] 
>>> lst[3:123] 
[4] 

您不应将整个日志文件存储在 logLines 的内存中,而只存储所需的数量。此外,建议使用 with 会更好,因为它会为您处理关闭文件。示例代码 -

def findLogData(log_Files, searchForData, folderPath, resultsFile): 
    with open(resultsFile, "w") as resultFile: 
        lineCounter = 0 
 
        for file in log_Files: 
            with open(folderPath + "\\" + file,'r', encoding='UTF-8') as datalookUp: 
                logLines = [] 
                flag = False 
                remLines = 0 
                for line in log: 
                    if remLines > 0: 
                        resultsFile.write(line) 
                        remLines -= 1 
                    logLines.append(line) 
                    if len(logLines) > nbrOfLinesOver + 1: 
                        logLines.pop(0) 
 
                    for stringToFind in searchForData: 
                        if stringToFind in line: 
                            resultsFile.writelines(logLines) 
                            remLines = nbrOfLinesUnder