使用Python 3优化删除线

Question

我目前正在尝试从大型文本文件中删除大多数行，并将所选信息重写为另一个。我必须逐行阅读原始文件，因为这些行出现的顺序是相关的。到目前为止，我能想到的最好的方法是只拉相关的行，并使用类似以下内容的方法重写它们：

with open('input.txt', 'r') as input_file:

    with open('output.txt', 'w') as output_file:

        # We only have to loop through the large file once

        for line in input_file:

            # Looping through my data many times is OK as it only contains ~100 elements

            for stuff in data:

                    # Search the line

                    line_data = re.search(r"(match group a)|(match group b)", line)

                    # Verify there is indeed a match to avoid raising an exception.

                    # I found using try/except was negligibly slower here

                    if line_data:

                        if line_data.group(1):

                            output_file.write('\n')

                        elif line_data.group(2) == stuff:

                            output_file.write('stuff')

        output_file.close()

    input_file.close()

但是，使用〜1Gb文件和〜120,000条匹配的行，该程序仍需要花费约8个小时才能运行。我相信瓶颈可能涉及到正则表达式或输出位，因为完成此脚本所花费的时间与行匹配数成线性比例。

我曾尝试先将输出数据存储在内存中，然后再将其写入新的文本文件，但快速测试表明它以与之前写入数据大致相同的速度存储数据。

如果有帮助，我有一个Ryzen 5 1500和8Gb的2133 Mhz RAM。但是，我的RAM使用率似乎从未达到上限。