Спасибо!!
Просто у меня задача стояла соединяться именно без ввода пароля, ну при условии, что закрытый ключ конечно же шифруется.
Пока решил проблему командой ssh-add, но что-то я не уверен в правильности этого с точки зрения безопасности. К тому же иногда всплывают советы добавить в ~/.bashrc строчку eval `ssh-agent`, но что она дает я так и не понял.
Почитаю пока ссылки.