Re,
Ca tu peux le faire également assez simplement, en ajoutant un fichier à ta configuration ssh (toujours sur le même principe de ne pas modifier le fichier du système mais d’ajouter un fichier supplémentaire) :
Edite le fichier, via la commande (par exemple) : sudo nano /etc/ssh/sshd_config.d/jeedom.conf (jeedom.conf n’est qu’un exemple, tu lui donnes le nom que tu souhaites, l’important c’est l’extension de fichier .conf ;))
Ensuite dans le fichier tu mets un truc du style :
Match User sshmanager
AllowUsers sshmanager@192.168.1.50
le nom de ton user étant ici sshmanager et l’adresse IP de ton Jeedom serait 192.168.1.50 
Et enfin pour que ce soit pris en compte, il faut redémarrer le service SSH : sudo systemctl restart sshd ou bien rebooter la machine 
et ATTENTION : si tu fais une fausse manip, tu risques de perdre l’accès SSH à la machine en question, alors on vérifie bien à deux fois avant de redémarrer le service SSH, sinon la punition va être très rapide lol.
Bonne soirée,
TiTidom.