Проблемы с полномочиями при использовании ssh

У меня были некоторые проблемы, соединяющиеся через ssh между двумя компьютерами. Давайте назовем их Рабочим столом и Ноутбуком. Оба запускают Ubuntu 16.04 с новой установкой и со всеми примененными обновлениями. При установке я установил ssh и openssh. Это ssh установленные пакеты:

$ apt list --installed | grep ssh

WARNING: apt does not have a stable CLI interface. Use with caution in scripts.

libssh-4/xenial,now 0.6.3-4.3 amd64 [installed]
libssh-gcrypt-4/xenial,now 0.6.3-4.3 amd64 [installed,automatic]
libssh2-1/xenial,now 1.5.0-2 amd64 [installed,automatic]
openssh-client/xenial-updates,xenial-security,now 1:7.2p2-4ubuntu2.1 amd64 [installed]
openssh-server/xenial-updates,xenial-security,now 1:7.2p2-4ubuntu2.1 amd64 [installed,automatic]
openssh-sftp-server/xenial-updates,xenial-security,now 1:7.2p2-4ubuntu2.1 amd64 [installed,automatic]
ssh/xenial-updates,xenial-updates,xenial-security,xenial-security,now 1:7.2p2-4ubuntu2.1 all [installed]
ssh-askpass-gnome/xenial-updates,xenial-security,now 1:7.2p2-4ubuntu2.1 amd64 [installed]
ssh-import-id/xenial,xenial,now 5.5-0ubuntu1 all [installed,automatic]

Я могу соединиться от Рабочего стола до использования Ноутбука Desktop$ ssh -X username@laptop.address.ca и никакие проблемы там. Однако использование зеркальной команды на Ноутбуке не работает. Это: Laptop$ ssh -X username@desktop.address.ca не работает, поскольку это всегда возвращает следующее после того, как я ввел надлежащий пароль:

Отклоненное разрешение, попробуйте еще раз.

Я сижу рядом с обоими и могу войти непосредственно без любых проблем в любого, но не удаленно от Ноутбука до Рабочего стола (в том направлении).

Вероятно, что это имеет отношение к папке или полномочиям файла в противоположность проблемам с с паролем, но я попробовал много вещей без успеха (например, удалив .ssh папку в обеих системах, переустановив все ssh-связанные пакеты и несколько других).

Вот заключительная часть вывода

$ssh -X username@desktop.address.ca

[BUNCH OF OUTPUT REMOVED]

username@desktop.address.ca's password: 
debug3: send packet: type 50
debug2: we sent a password packet, wait for reply
debug3: receive packet: type 51
debug1: Authentications that can continue: publickey,password
Permission denied, please try again.
username@desktop.address.ca's password: 

Может кто-то помогать.