Команда Awk для печати всех строк, за исключением последних трех строк

Для минимального использования памяти вы можете использовать круговой буфер:

awk 'NR>n{print A[NR%n]} {A[NR%n]=$0}' n=3 file

Используя оператор mod на номерах строк, мы имеем не более n записей массива.

Принимая пример n = 3:

В строке 1 NR%n равен 1, строка 2 производит 2, а строка 3 производит 0, а строка 4 снова оценивает 1.

Line 1 -> A[1]
Line 2 -> A[2]
Line 3 -> A[0]
Line 4 -> A[1]
Line 5 -> A[2]
...

Когда мы переходим к строке 4, A[NR%n] содержит содержимое строки 1. Таким образом, текст печатается, а A[NR%n] получает содержимое строки 4. Следующая строка (строка 5) печатает исходное содержимое строки 2 и так далее , пока мы не дойдем до конца. То, что остается незапечатанным, - это содержимое буфера, содержащего последние 3 строки ...

Вы также можете обработать файл дважды, чтобы не хранить что-либо в памяти:

awk '{if(NR==FNR){c++}else if(FNR<=c-3){print}}' file file

Трюк здесь - это тест NR==FNR. NR - текущий номер строки, а FNR - текущий номер текущей строки текущего файла. Если в качестве входных данных передано несколько файлов, FNR будет равно NR только при обработке первого файла. Таким образом, мы быстро получаем количество строк в первом файле и сохраняем его как c. Поскольку «два» файла на самом деле одинаковы, теперь мы знаем количество строк, которые мы хотим, поэтому мы печатаем только, если это один из них.

Хотя вы можете подумать, что это будет медленнее, чем другое подходы, это на самом деле быстрее, так как происходит не до обработки. Все делается с помощью внутренних инструментов awk (NR и FNR), кроме одного арифметического сравнения. Я тестировал файл 50 Мбайт с миллионом строк, созданных с помощью этой команды:

for i in {500000..1000000}; do 
    echo "The quick brown fox jumped over the lazy dog $i" >> file; 
done

Как вы можете видеть, времена почти идентичны, но подход, который я здесь представил, немного быстрее первого предложения Оли (но медленнее чем другие):

$ for i in {1..10}; do ( 
    time awk '{if(NR==FNR){c++}else if(FNR<=c-3){print}}' file file > /dev/null ) 2>&1 | 
       grep -oP 'real.*?m\K[\d\.]+'; 
  done | awk '{k+=$1}END{print k/10" seconds"}'; 
0.4757 seconds

$  for i in {1..10}; do ( 
    time awk '{l[NR] = $0} END {for (i=1; i<=NR-3; i++) print l[i]}' file > /dev/null ) 2>&1 | 
        grep -oP 'real.*?m\K[\d\.]+'; 
   done | awk '{k+=$1}END{print k/10" seconds"}'; 
0.5347 seconds