Записанный звук из микрофона очень быстрый

Вы можете запустить следующую команду:

ssh -t user@host bash --noprofile

, где опция -t для ssh - принудительное выделение tty.