Защитите свой частный gpg и ssh ключи от других людей, получающих доступ ssh

Существует человек A и человек B, у других из них есть друг друг ssh открытый ключ, так, чтобы средства, они могут получить доступ к каждому другие, окружили.

теперь они могут получить доступ к каждому другие частный ssh и gpg закрытые ключи. и они могут легко экспортировать и их закрытые ключи себе.

есть ли способ, которым они не могут получить доступ к этим ключам или не способные экспортировать их.

Есть ли способ ограничить их в доступе друг к другу ~/.gnugp и ~/.ssh папка

Заранее спасибо

ОТРЕДАКТИРУЙТЕ хорошо, я пробую своими 2 компьютерами, я получил доступ к своей системе с моим ноутбуком

amr@amr-Notebook:~$ ssh rusty@192.168.1.8
rusty@192.168.1.8's password: 
Welcome to Ubuntu 12.04.1 LTS (GNU/Linux 3.2.0-29-generic-pae i686)

 * Documentation:  https://help.ubuntu.com/

11 packages can be updated.
0 updates are security updates.


The programs included with the Ubuntu system are free software;
the exact distribution terms for each program are described in the
individual files in /usr/share/doc/*/copyright.

Ubuntu comes with ABSOLUTELY NO WARRANTY, to the extent permitted by
applicable law.

rusty@rusty-MS:~$ exit
logout
Connection to 192.168.1.8 closed.
amr@amr-Notebook:~$ ssh-copy-id -i ~/.ssh/id_rsa.pub rusty@192.168.1.8
rusty@192.168.1.8's password: 
Now try logging into the machine, with "ssh 'rusty@192.168.1.8'", and check in:

  ~/.ssh/authorized_keys

to make sure we haven't added extra keys that you weren't expecting.

amr@amr-Notebook:~$ ssh rusty@192.168.1.8
Welcome to Ubuntu 12.04.1 LTS (GNU/Linux 3.2.0-29-generic-pae i686)

 * Documentation:  https://help.ubuntu.com/

11 packages can be updated.
0 updates are security updates.

Last login: Sat Sep  8 21:01:06 2012 from amr-notebook.local
rusty@rusty-MS:~$ 
rusty@rusty-MS:~$ cd .ssh/
rusty@rusty-MS:~/.ssh$ ls
authorized_keys  id_rsa  id_rsa.pub
rusty@rusty-MS:~/.ssh$ 

я получил доступ к своему рабочему столу от моего ноутбука просто мой shh и пароль

затем я logedout и затем отправляю свой открытый ключ в настольную систему

затем я попробовал еще раз с ssh, и на этот раз он просто впустил меня

и поскольку Вы видите выше, я могу легко получить доступ к настольным системам ssh папка и видеть все ключи

теперь есть ли способ, которым я не могу получить доступ к своему рабочему столу .ssh папка и никакой доступ к настольным открытым и закрытым ключам

Спасибо