Способов обхода авторизации SSH существует несколько.
Самый актуальный — это перехват параметров подключения администратора ресурса.
В Вашем случае, это, вероятнее всего, Вы.
Злоумышленник (хакер) может просто подселить троян к Вам на компьютер, и перехватить вводимые Вами логин и пароль, а также украсть сертификат.
При отсутствии сертификата наиболее распространенный способ взлома – перебор (брут) пароля. При невысокой сложности пароля и отсутствии защиты от перебора – результат для злоумышленника лишь вопрос времени.
Это два основных способа преодолеть защиту подключения SSH.