Finalement je me réponds à moi-même.
J’ai trouvé ce blueprint : https://community.home-assistant.io/t/set-a-maximum-volume-for-your-media-player/256684
L’auteur a le même problème que moi avec ses enfants 
J’ai réussi à l’ajouter et à l’utiliser pour créer une automatisation. Ça fonctionne.
Je vais regarder en détail le yaml généré pour comprendre comment ça marche.
4 « J'aime »