Vorüberlegung zur Verarbeitung von Wetterdaten

[richard-os]

Hallo,
Vorab: Falls es ein Tutorial gibt, was meinen Fragenkomplex behandelt, dann bitte gerne den Hinweis.
Das habe ich vor:
Ich habe im Moment eine kleine Wetterstation (Ecowitt GW1200+WH40 Regenmesser), Eine Reihe von Shellys, eine Wärmepumpe, PV-Anlage und Tibberaccount mit Pulse Stromsensor.
Geplant ist eine umfangreichere Wetterstation mit dem GW2000.
Zu jeder dieser Hardware gibt es eine eigene App und ich zappe immer hin und her um Daten zu sehen und Aktoren zu schalten. Daher möchte ich eine gemeinsame Oberfläche, z.B. mit dem Homeassistant (HA), den ich schon mal auf einem Raspberry installiert habe..
Meine grundsätzliche Frage ist die, wo werden im Falle von HA die Daten, die zu jeder Hardware anfallen gespeichert, also brauch ich dazu eine Datenbank oder kann HA die verschiedenen Datenbank abfragen?
Wie ist es mit der längerfristigen Speicherung. Kann ich meine Wetterdaten auch woanders hochladen und welchen Vorteil hätte man damit? Kann ich Grafana einsetzten?
Vielen Dank für einführende Hinweise.
Grüße Richard

[Gyvate]

erst mal kurz zum Thema: HomeAssistant und wo dieser seine Daten speichert.
Für die restlichen Fragen brauchts etwas mehr Zeit.

Also HA arbeitet mit sogenannten Integrationen, über die die Daten der zu einer Integration gehörenden Geräte (Device), z.B. ein GW2000, eine Fritz!Box u.v.a.m. gesammelt und verarbeitet und abgespeichert werden.
Das Abspeichern erfolgt in einer sqlite Datenbank, in der mit Primärschlüssel Zeitstempel (die Sekunde im EPOCH Format) alle Einzeldaten eines Gerätes und auch für alle Geräte abgespeichert werden.

Zu Grafana - man kann die Daten auch mit einem Informationbroker (für Ecowitt Konsolen und Sensoren ist hierzu FOSHKplugin sehr geeignet) sowohl an HA als auch in eine influx Datenbank schicken. Letztere hat eine Grafana "Integration", d.h. die Daten aus der InfluxDB können mit Grafana dargestellt werden.

Es gbt sicher noch viele andere Möglichkeiten ...

Dazu gibt es hier im Forum einige Threads/Themen - insbesondere zu FOSHKplugin und auch HomeAssistant

[richard-os]

Hallo,
also HA hat eine sqlite-DB integriert?
(Nachtrag: ok. sqlite-Funktionalität wird als Paket in python im HA bereitgestellt. )
Hab mich inzwischen mal bei WU angemeldet und bei Ecowitt die Keys generiert und eine http-Abfrage ausprobiert. Das hat auf Anhieb geklappt.
Noch eine Zwischenfrage zu WU. Dort muss man einen Stationstyp angeben. In der Typliste ist FOSH/Ecowitt nicht enthalten. also hab ich "other" gewählt.
Grüße Richard

[Gyvate]

"other" sollte funktionieren - die Ecowitt-Konsolen senden an WU im WU-Format/Protokoll

[RunMike]

Hallo Richard!
Ich mache das, was du vorhast, nun schon eine Weile.
Das sind zwar andere Geräte und Systeme (alles Selbstbau oder Open-Source-Projekte), aber alle melden ihre Sensor- und Status-Daten an Home-Assistant.
Auch der GW2000. So kann ich zB die Markise einfahren lassen, wenn Wind oder Niederschlag es erfordern.
Bei mir laufen alle am Smarthome Beteiligten (außer Node-Red) in Docker-Containern auf einem 4GB Raspberry Pi 4B.
Der ist damit RAM-mäßig gut ausgelastet (60 - 70%).
HA speichert das, was und wielange du willst, in der sqlite-Datenbank "home-assistant_v2.db".
Die nimmt dann bei entsprechender Anzahl an Sensoren, Aktoren, Stati etc sehr schnell eine Größe an, die sich verlangsamend auf das System auswirkt.
Daher mein Tipp: In der "configuration.yaml" eine Retention von 20 -30 Tagen konfigurieren.
Zusätzlich zB "VictoriaMetrics" als Add-On installieren. Das ist eine sehr gute Alternative für Longterm-Speicherung.
Von VictoriaMetrics aus lasse ich dann Grafana (ebenfalls als Add-On)alle Daten nach Belieben darstellen.

Als "privacy-first"-Fan brauche ich so keine Verbindung zu irgendwelchen Clouds oder externen Diensten. Das geht also auch, wenn man das will ...

Gruß

Mike