http://help.ubuntu.ru/wiki/ssh в родной же вики вполне неплохо расписано. ну или в родном же мануале. обращаем внимание на AllowUsers первым делом, ну и далее читаем там про кип-элайвы и способы аутентификации. там много всего параноидального, но, думаю, вполне хватит указания user на host в списке разрешенных, а остальные просто идут лесом