Moi je suis passé par:
Accès de l’extérieur en HTTPS avec Nginx Proxy Manager - Home Assistant - Tutoriels & Partages / Add-on - Home Assistant Communauté Francophone
Cela fonctionne depuis un an sans aucun souci (pas de https pour le réso interne etc…) et 0€