Для тех из нас, которые любят подробное решение.
sudo rsync --ignore-existing --recursive username@domain:/location/to/files/ files/
Помните, что у вас всегда есть человек с вами.
$ man rsync