SSH Iptables Token ou Chave publica

Estava pensando e pesquisando uma forma de login via ssh ....

da seguinte forma:

temos ai a opção de fazer login usando uma chave publica, sem necessidade de usuario e senha, é bem interessante para segurança;
Temos tambem setanto quais IPs podem logar no nosso ssh ..

Eu estou buscando uma forma de (quase) unir essas duas opções ... ao invez de setar qual IP pode logar no nosso ssh setar a chave
no iptables, ou seja, a porta do ssh fica como filtrada e so loga quem estiver com a chave de segurança.

Não sei se expliquei bem, mas é isso ai.

Boa noite amigo,

Tem uma configuração do ssh que faz isso.

Pelo que entendi, você só quer que logue no servidor, quem tiver uma chave privada, certo?