# Purge de la base de donnees HA

**URL:** <https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158>\
**Category:** Entraide Home Assistant\
**Tags:** base-de-donnee\
**Created:** [Janvier 12, 2021, 8:09 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158 "2021-01-12T20:09:12Z")\
**Posts on this page:** 20\
**Page:** 4

<div class="post-metadata">

**Author:** ![Cyril\_81](https://forum.hacf.fr/user_avatar/forum.hacf.fr/cyril_81/32/39972_2.png) [@Cyril\_81](https://forum.hacf.fr/u/Cyril_81)\
**Post date:** [Octobre 19, 2023, 11:48 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/62 "2023-10-19T11:48:58Z")

</div>

est il possible de purger d’un coup plusieurs entités ayant la même syntaxe, je m’explique :

voici 3 de mes entités :

sensor.sonoff\_1000bd9abe\_voltage  
sensor.sonoff\_1000fcfd9e\_voltage   
sensor.sonoff\_1000fd0e93\_voltage

1. Est il possible de lister un truc du style : sensor.sonoff\_\*\_voltage
2. Comment savoir à quel domaine ces entités appartiennent ? car j’ai vu qu’on pouvait nommer des domaines

J’ai 432 entités actives , et c’est un poil fastidieux de les nommer une par une …

Afin de vous donner un max d’infos , voici mon fichier recorder.yaml :

```auto
################################### 
##### PURGE BASE DE DONNEES #######
###################################     
auto_purge: true
purge_keep_days: 60

exclude: # tous les éléments listé ci-dessous ne seront pas conservés
  domains: # filtrage par domaine
    - automation
    - alarm_control_panel
    - calendar
    - climate
    - group
    - media_player
    - proximity
    - scene
    - script
    - sun
    - timer
    - weather
    - zone
    - light
    - cover
    - switch
    - camera
    
    
  event_types: # filtrage par evenements
    - automation_triggered
    - script_started
    - service_registered
    - home_assistant_start
    - home_assistant_stop
    - call_service
    
  entities: # filtrage par entités spécifiques
    - sun.sun 
    - sensor.last_boot
    - sensor.date
    - sensor.time  
    - camera.192_168_1_200
    - camera.192_168_1_201    
    - camera.192_168_1_202
    - camera.192_168_1_203
    - camera.192_168_1_204
    - camera.front_door_camera
    - device_tracker 
    - person
    - sensor.sonoff_1000fd09b5_power #Cumulus
    - sensor.sonoff_1000fd09b5_current
    - sensor.sonoff_1000fd09b5_voltage
    - sensor.sonoff_1000e7dc7f_power #Cuisine
    - sensor.sonoff_1000e7dc7f_voltage
    - sensor.sonoff_1000e7dc7f_current
    - sensor.sonoff_1000fcfd9e_power #Gainable
    - sensor.sonoff_1000fcfd9e_current
    - sensor.sonoff_1000fcfd9e_voltage
    - sensor.sonoff_1000fd0e93_power #Electrovanne exterieure
    - sensor.sonoff_1000fd0e93_current
    - sensor.sonoff_1000fd0e93_voltage
    - sensor.sonoff_1000ae73b2_power #Lumière buffet katy
    - sensor.sonoff_1000ae73b2_current
    - sensor.sonoff_1000ae73b2_voltage
    - sensor.sonoff_1000bdb28c_power #Frigo & Dyson
    - sensor.sonoff_1000bdb28c_current
    - sensor.sonoff_1000bdb28c_voltage
    - sensor.sonoff_1000fd0bbf_power #Clim Bosch
    - sensor.sonoff_1000fd0bbf_current
    - sensor.sonoff_1000fd0bbf_voltage
    - sensor.lixee_adps #lixee
    - sensor.lixee_current_tarif
    
    
    
    
    
include:
  domains: # tous les éléments listé ci-dessous seront conservés
    - sensor
    - input_boolean
    - input_datetime
    - input_number
    - input_select
    - input_text
    - binary_sensor
    - sensor.yearly_energy_peak
    - sensor.daily_energy_peak
    - sensor.monthly_energy_peak
    

```

---

<div class="post-metadata">

**Author:** ![WarC0zes](https://forum.hacf.fr/user_avatar/forum.hacf.fr/warc0zes/32/137471_2.png) [@WarC0zes](https://forum.hacf.fr/u/WarC0zes)\
**Post date:** [Octobre 19, 2023, 2:10 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/63 "2023-10-19T14:10:50Z")

</div>

> [@Cyril\_81](#):
>
> est il possible de purger d’un coup plusieurs entités ayant la même syntaxe, je m’explique :
> 
> voici 3 de mes entités :
> 
> sensor.sonoff\_1000bd9abe\_voltage  
> sensor.sonoff\_1000fcfd9e\_voltage  
> sensor.sonoff\_1000fd0e93\_voltage
> 
> 1. Est il possible de lister un truc du style : sensor.sonoff\_\*\_voltage

Avec les exemples proposer dans le post, ta pas vu `entity_globs:`

> [@Guizmos](#):
>
> ```auto
> exclude:
> entity_globs: 
> - sensor.*_uptime 
> - sensor.*_tx 
> - sensor.*_rx
> - sensor.*_uptime_2
> - sensor.*_tx_2
> - sensor.*_rx_2
> - sensor.*_motion
> - sensor.*_high
> - sensor.dalg_3070_*
> - sensor.dalg_win11_*
> - sensor.unifi_gateway_*
> - sensor.internet_time
> - sensor.dalg_cam*
> 
> ```

entity\_globs list (optional)

Exclude all entities matching a listed pattern from recordings (e.g., `sensor.weather_*`).

> **[Recorder](https://www.home-assistant.io/integrations/recorder/)**
>
> Instructions on how to configure the data recorder for Home Assistant.

---

<div class="post-metadata">

**Author:** ![Cyril\_81](https://forum.hacf.fr/user_avatar/forum.hacf.fr/cyril_81/32/39972_2.png) [@Cyril\_81](https://forum.hacf.fr/u/Cyril_81)\
**Post date:** [Octobre 19, 2023, 3:01 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/64 "2023-10-19T15:01:18Z")

</div>

Mea culpa Gizmos, là j’ai aucune excuse !! 🤐

merci bcp pour ta réponse .

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Octobre 25, 2023, 2:10 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/65 "2023-10-25T14:10:52Z")

</div>

> [@WarC0zes](#):
>
> ```auto
> ELECT states_meta.entity_id, COUNT(*) AS count
> FROM states
> JOIN states_meta ON states.metadata_id = states_meta.metadata_id
> GROUP BY states_meta.entity_id
> ORDER BY count DESC
> LIMIT 20;
> 
> ```

bonjour , est ce que ce code est toujours valable ?  
ma base fait 17go , et je commence a me trouver a l etroit sur mon SSD ( 60go )

j essaye de lancer ce code via sqlite , mais j ai pas de resultat ( direct un ecran noir )

---

<div class="post-metadata">

**Author:** ![WarC0zes](https://forum.hacf.fr/user_avatar/forum.hacf.fr/warc0zes/32/137471_2.png) [@WarC0zes](https://forum.hacf.fr/u/WarC0zes)\
**Post date:** [Octobre 25, 2023, 2:30 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/66 "2023-10-25T14:30:33Z")

</div>

Bonjour,  
Oui la commande est toujours valable. Mais avec une db de 17Go, ca doit mouliner.

 ![cmd sql](https://forum.hacf.fr/uploads/default/original/3X/4/5/4575f8cfbebbb891d83b8ce75628bb337b392578.png)

---

<div class="post-metadata">

**Author:** ![Lesuperlolo](https://forum.hacf.fr/user_avatar/forum.hacf.fr/lesuperlolo/32/21946_2.png) [@Lesuperlolo](https://forum.hacf.fr/u/Lesuperlolo)\
**Post date:** [Octobre 25, 2023, 3:22 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/67 "2023-10-25T15:22:10Z")

</div>

Aucune raison qu’il ne le soit plus, c’est du SQL…

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Octobre 25, 2023, 3:48 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/68 "2023-10-25T15:48:32Z")

</div>

bon ca me fait planter le plugin sqlite …

je vais voir pour l exporter sur un pc et le traiter en local

---

<div class="post-metadata">

**Author:** ![Pulpy-Luke](https://forum.hacf.fr/user_avatar/forum.hacf.fr/pulpy-luke/32/137426_2.png) [@Pulpy-Luke](https://forum.hacf.fr/u/Pulpy-Luke)\
**Post date:** [Octobre 25, 2023, 4:34 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/69 "2023-10-25T16:34:35Z")

</div>

Il y a un souci avec l’addon SQLite Web pour le moment

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Octobre 25, 2023, 6:27 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/70 "2023-10-25T18:27:03Z")

</div>

j ai trouvé mon fautif ....

 ![image](https://forum.hacf.fr/uploads/default/original/3X/6/1/61c072006d6febaa4c324ab76378e6292ce68c45.png)

0xa4c... il s agit du capteur mesurant le courant en sortie de compteur et en sortie de panneaux solaires , pourtant il est en update toutes les 10 secondes ....  
par contre 2002292 valeurs toutes les 10s c est 231j hors mon recorder est configuré sur 31j comment expliquer qu il y ait autant de valeurs ?

---

<div class="post-metadata">

**Author:** ![Usernet](https://forum.hacf.fr/user_avatar/forum.hacf.fr/usernet/32/26126_2.png) [@Usernet](https://forum.hacf.fr/u/Usernet)\
**Post date:** [Novembre 7, 2023, 8:44 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/71 "2023-11-07T20:44:26Z")

</div>

Depuis l’addon, le champ pour passer la commande est complétement buggé.  
Il faut utiliser la query en ligne et non par paragraphe.

```auto

SELECT states_meta.entity_id, COUNT(*) AS count FROM states JOIN states_meta ON states.metadata_id = states_meta.metadata_id GROUP BY states_meta.entity_id ORDER BY count DESC LIMIT 20;

```

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Novembre 8, 2023, 10:55 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/72 "2023-11-08T10:55:33Z")

</div>

> [@Usernet](#):
>
> `SELECT states_meta.entity_id, COUNT(*) AS count FROM states JOIN states_meta ON states.metadata_id = states_meta.metadata_id GROUP BY states_meta.entity_id ORDER BY count DESC LIMIT 20;`

meme sur une seule ligne, des que je clique execute, ecran noir …

pas grave, j ai pu exporter ma base et la traiter depuis un ordi bien plus puissant .

une idée pourquoi mon capteur as autant de valeurs ? est ce qu il y a un moyen de purger un peu ?  
est ce que les sensors qui n existent plus sont automatiquement purgés ?

17Go c est énorme et ça me bloque ( un backup complet prends 1h30 par exemple )

---

<div class="post-metadata">

**Author:** ![Pulpy-Luke](https://forum.hacf.fr/user_avatar/forum.hacf.fr/pulpy-luke/32/137426_2.png) [@Pulpy-Luke](https://forum.hacf.fr/u/Pulpy-Luke)\
**Post date:** [Novembre 8, 2023, 11:30 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/73 "2023-11-08T11:30:47Z")

</div>

Salut,

Ce n’est pas qu’une question de quantité de données fournies par le capteur mais aussi un souci plus général de config. C’est pas faute de le répéter un peu partout 😪

> [@Cyril\_81](#):
>
> `purge_keep_days: 60`

- tu diminues le nombre de jour (10j au pire 15 maxi)
- tu mets en place des historiques à long termes

et ça ira tout aussi bien

> [@Zekje](#):
>
> meme sur une seule ligne, des que je clique execute, ecran noir …

il faut aussi le faire sur la bonne table, par défaut c’est pas states\_meta

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Novembre 8, 2023, 1:38 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/74 "2023-11-08T13:38:00Z")

</div>

> [@Usernet](#):
>
> SELECT states\_meta.entity\_id, COUNT(\*) AS count FROM states JOIN states\_meta ON states.metadata\_id = states\_meta.metadata\_id GROUP BY states\_meta.entity\_id ORDER BY count DESC LIMIT 20;

effectivement, j etait pas sur la bonne base 🙂

par contre je suis impressionné par le nombre de valeurs :

 ![image](https://forum.hacf.fr/uploads/default/original/3X/9/5/9581fa7a1b1194fb0e1b9388088b90aa44d61ee9.png)

mon recorder est sur 20j , psychologiquement j ai du mal a descendre sous les 3 semaines , madame me demande souvent on avais quelle temperature le mois dernier dans cette piece ? l an dernier ( la j ai pas la réponse ).

tu parle de mettre des historiques a long terme, c est peut etre ça qu il me faut ...  
tu peux m aiguiller ? ( est graphana ? ou rien a voir ? )

---

<div class="post-metadata">

**Author:** ![Pulpy-Luke](https://forum.hacf.fr/user_avatar/forum.hacf.fr/pulpy-luke/32/137426_2.png) [@Pulpy-Luke](https://forum.hacf.fr/u/Pulpy-Luke)\
**Post date:** [Novembre 8, 2023, 1:43 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/75 "2023-11-08T13:43:39Z")

</div>

> [@Zekje](#):
>
> madame me demande souvent on avais quelle temperature le mois dernier dans cette piece ? l an dernier ( la j ai pas la réponse ).

C'est un bon exemple !  
As-tu besoin d'avoir la valeur de la température suivant:

- 17h12 ? (1 valeur par minute)
- en moyenne entre 17 et 18H ? (1 valeur par heure)
- le min/max/moy sur la journée... (3 valeurs par jour)

sur 3 mois, on fait varier la quantité de données :

- 131400 valeurs
- 2190 valeurs
- 270 valeurs (avec 30j/mois)

Et c'est exactement pareil pour ta conso/puissance/production...

> **[Statistics](https://contributors.home-assistant.io/data/reference/statistics/)**
>
> How Home Assistant summarizes sensor data into 5-minute and hourly statistics, and how those are stored.

et

> **[Sensor entity](https://contributors.home-assistant.io/core/entities/sensor/)**
>
> Report a read-only value, like a temperature, a power reading, or a timestamp, with its unit, and opt in to long-term statistics.

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Novembre 8, 2023, 3:06 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/76 "2023-11-08T15:06:44Z")

</div>

je vais regarder ça ( ce soir, boulot là ) mais pour moi , avoir une valeur toutes les 5 min sur les dernieres 24h , une moyenne toutes les 15 min sur les derniers jours , une moyenne par heure sur les dernieres semaines, je pense que c est largement suffisant .

---

<div class="post-metadata">

**Author:** ![Pulpy-Luke](https://forum.hacf.fr/user_avatar/forum.hacf.fr/pulpy-luke/32/137426_2.png) [@Pulpy-Luke](https://forum.hacf.fr/u/Pulpy-Luke)\
**Post date:** [Novembre 8, 2023, 3:09 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/77 "2023-11-08T15:09:50Z")

</div>

Donc tu es tout à fait dans l’objectif, même s’il n’y a que 2 niveaux

- Une premier partie de données avec une bonne précision : données brutes sur la durée du recorder
- Le reste des données ‹&nbsp;expurgées&nbsp;› sans limite de durée

En complément, les données qui n’ont pas besoin de rentrer dans la base, sont éliminées dès le début

---

<div class="post-metadata">

**Author:** ![Felix62](https://forum.hacf.fr/user_avatar/forum.hacf.fr/felix62/32/7858_2.png) [@Felix62](https://forum.hacf.fr/u/Felix62)\
**Post date:** [Novembre 8, 2023, 4:00 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/78 "2023-11-08T16:00:43Z")

</div>

C’est fort intéressent ce que tu montre la @Pulpy-Luke

Peux tu montrer un exemple en yaml de sensor pour que le statistique long terme fonctionne

---

<div class="post-metadata">

**Author:** ![Pulpy-Luke](https://forum.hacf.fr/user_avatar/forum.hacf.fr/pulpy-luke/32/137426_2.png) [@Pulpy-Luke](https://forum.hacf.fr/u/Pulpy-Luke)\
**Post date:** [Novembre 8, 2023, 4:20 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/79 "2023-11-08T16:20:00Z")

</div>

La plupart du temps il n'y a rien à faire.  
Typiquement un capteur de température avec `state_class: measurement` c'est fonctionnel directement.

 ![image](https://forum.hacf.fr/uploads/default/original/3X/8/5/85c312f9b492e6fa341f07db8f0b589b5ded4bb7.png)  
Sinon il suffit de l'ajouter (il faut faire attention aux types que l'on veut définir, notamment pour les reset)

```auto
- platform: rest
  name: Loire Hauteur Orléans
  scan_interval: 3600
  resource: https://hubeau.eaufrance.fr/api/v1/hydrometrie/observations_tr?code_entite=K435001020&size=1&pretty&grandeur_hydro=H&fields=date_obs,resultat_obs,continuite_obs_hydro
  value_template: "{{ ((value_json['data'][0]['resultat_obs']) | int(default=0)/ 1000 | round(3) ) }}" # mm en m
  unit_of_measurement: "m"
  state_class: "measurement"

```

L'important ensuite c'est d'utiliser une carte qui puisse afficher les valeurs à longs termes  
Une vue sur 6 mois ne donne rien sur` mini-graph` mais sur `history-explorer-card`c'est exploitable

 ![image](https://forum.hacf.fr/uploads/default/original/3X/4/2/42fb9be0e715548545850ef1ba4f9bd502e39a9d.png)

---

<div class="post-metadata">

**Author:** ![Felix62](https://forum.hacf.fr/user_avatar/forum.hacf.fr/felix62/32/7858_2.png) [@Felix62](https://forum.hacf.fr/u/Felix62)\
**Post date:** [Novembre 8, 2023, 4:39 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/80 "2023-11-08T16:39:36Z")

</div>

Merci pour ton retour @Pulpy-Luke 👍

---

<div class="post-metadata">

**Author:** ![Zekje](https://forum.hacf.fr/user_avatar/forum.hacf.fr/zekje/32/4256_2.png) [@Zekje](https://forum.hacf.fr/u/Zekje)\
**Post date:** [Novembre 8, 2023, 5:43 UTC](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158/81 "2023-11-08T17:43:48Z")

</div>

j ai pas encore tout pigé, ( je dois relire plusieures fois ) mais effectivement, merci pour les explications 🙂  
je vais essayer de mettre ça en pratique

par contre question con mais ayant 20j de purge sur le recorder, est ce normal que la db fasse 17go ?  
j enregistre pas tout en + …

[Page précédente](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158.md?page=3)

[Page suivante](https://forum.hacf.fr/t/purge-de-la-base-de-donnees-ha/2158.md?page=5)
