Пользователи Ssh могут получить доступ практически к любым файлам / файлам

Я новичок в этом форуме, поэтому простите меня, если я задал этот вопрос не в том месте, и не смог найти окончательного ответа:

Итак, у меня есть выделенный Ubuntu 16.04.3 LTS , У меня это было какое-то время, раньше это было ubuntu 14, а на этой неделе я обновился до 16.04.3.

Мой вопрос в том, что в прошлом я часто играл с сервер, устанавливая вещи и прочее, привыкая к командной строке и немного играя с chmod, а что нет.

Недавно я стал немного более серьезным, или, по крайней мере, я использую свой сервер больше, и я хотел для добавления другого пользователя. Но я узнал, что если я добавлю другого пользователя, он сможет получить доступ ко всем каталогам и файлам ....

Это потому, что я что-то испортил в прошлом (разрешения?) Или это нормально для активно ограничивать пользователей? (хотя у них нет прав sudo?)