Как захватить строки между двумя строками из файла, но только последнее вхождение?

Python все, но пусть регулярные выражения выполняют вашу работу!

Вставьте скрипт ниже в любой файл, например. logfilter.py и сделать его исполняемым с помощью команды chmod +x logfilter.py.

Тогда вы можете запустить его так, если предположить, что он находится в текущем каталоге:

./logfilter.py logfile.txt

Это сделает он обрабатывает файл logfile.txt.

Однако, если вы не передадите ему какие-либо аргументы командной строки, он будет ожидать данных на стандартном вводе. Это означает, что вы также можете передавать данные в него. В следующем примере обрабатываются данные из буфера обмена (требуется xsel для доступа к буферу):

xsel -ob | ./logfilter.py

Сценарий:

#! /usr/bin/env python3

p_start = r'^Transfer started at .*?$'
p_end   = r'^Transfer completed successfully at .*?$'

error_no_match = 'ERROR: no match found'
error_no_end   = 'ERROR: transfer not complete by end of log file'

pattern = r'{p0}(?!.*{p0})(?:.*?{p1}|.*)'.format(p0=p_start, p1=p_end)

import sys, re
if len(sys.argv) > 1:
    with open(sys.argv[1]) as f:
        text = f.read()
else:
    text = sys.stdin.read()

matches = re.findall(pattern, text, re.DOTALL | re.MULTILINE)
if matches:
    last_match = matches[-1]
    print(last_match)
    if not re.search(p_end, last_match, re.DOTALL | re.MULTILINE):
        print(error_no_end)
else:
    print(error_no_match)

Вы можете использовать массив awk с переключателем для буферизации последнего блока и напечатать текст ошибки, если переключатель все еще установлен в конце (это, по-моему, реализация awk @ python ответа anatoly_techtonik): [ ! d0]

awk '
  BEGIN{PROCINFO["sorted_in"]="@ind_num_asc"}

  /Transfer started/ {inblock=1; delete a;}
  /Transfer completed/ {a[FNR]=$0; inblock=0;}

  inblock == 1 {a[FNR]=$0}

  END {
    for (i in a) print a[i]; 
    if (inblock) 
      print "ERROR: transfer not complete by end of log file"
  }
' logfile

Просто используйте Python. У меня действительно нет времени, но я бы начал с этого:

#!/usr/bin/env python

start = "Transfer started at"
end = "Transfer completed successfully"
buffer = ""
log = False

for line in open('logfile.log'):
  if line.startswith(start):
    buffer = line
    log = True
  elif line.startswith(end):
    buffer += line
    log = False
  elif log:
    buffer += line

open('output.log', 'w').write(buffer)

if log == True:
  print("End string was not found")