Le certificat RSA émis par Freebox n’est pas compatible à mon avis. Il te faut à minima un certificat Letsencrypt pour Alexa.
Le sujet a été abordé ici:
Edit : La doc du plugin Alexa précise
Important
AMAZON impose que votre Jeedom soit accessible en HTTPS (le plugin ne marche pas en HTTP) avec un certificat valide (donc pas de certificat auto-signé)