Создайте пользователя SFTP для подключения и chroot его только в одну подпапку (с использованием проверки подлинности с использованием открытого, закрытого ключа вместо пароля

Если вы хотите что-то действительно потрясающее, вы, вероятно, захотите взглянуть на SPICE, который работает с KVM и новейшим virt-manager. Это действительно что-то другое. В последний раз, когда я играл с ним на Ubuntu, было немного сложно встать и работать, но это определенно стоило того. Я знаю, что люди работали над тем, чтобы сделать это проще, но я не знаю, как далеко они дошли.