Установите PROMPT_COMMAND в свой ~/.bashrc следующим образом:
PROMPT_COMMAND='echo -ne "\033]0;$(tty | sed s:/dev/::)\007"'
Обратите внимание, что это название может быть перезаписано другими вещами, такими как ваше приглашение (PS1), поэтому обязательно для проверки не менее PS1, если ваш заголовок не установлен.
Ссылка:
Как изменить заголовок xterm