Il te faut un serveur VPN qui peut être une Machine dédiée (VM par exemple) voir même directement ta freebox qui a wireguard il me semble et il y a même un addon dans HA. et un client installé sur un device.
Tu vas monter un tunnel qui sera chiffré et ta connexion vers HA même si elle est en HTTP sera protégée.
ça devrait t’aider ça pour comprendre.
Accès à home assistant depuis l’extérieur avec un vpn gratuit et opensource - Informatique / Réseau - Home Assistant Communauté Francophone (hacf.fr)
GitHub - hassio-addons/addon-wireguard: WireGuard - Home Assistant Community Add-ons