Чтобы перетащить файлы между вашим настольным компьютером и сервером, нет необходимости устанавливать графический интерфейс на своем сервере, не говоря уже о VNC.
В Nautilus нажмите «Подключиться к серверу», , Затем введите адрес сервера sftp://servername/path. Если целевыми папками являются Samba, вы также можете использовать smb://servername/sharename.