Grafana und komprimierte Datenpunkte

[MoosHam]

Moin zusammen,

nutze jetzt seit einiger Zeit CCU-Historian mit Grafana auf einen Raspi 3 in Verbindung mit einer CCU3. Läuft alles super, echt ein tolles Werkzeug! Vielen Dank nochmals an Mathias für das tolle Teil!

Nun bin ich über ein Problem gestolpert und frage mich, ob es eine einfachere Lösung dafür gibt, als das was ich mir überlegt habe:
Ich nutze die Datenkompression von CCU-Historian um die Datenbank klein zu halten. Dies führt allerdings dazu, dass bei Daten, die sich selten ändern (wie etwa Solltemperaturen) nur wenige Einträge in der Datenbank vorhanden sind. In Grafana führt das dazu, dass teilweise, je nach X-Achse, keine oder nur ein Datenpunkt angezeigt wird. Oft fehlen links und rechts Einträge. Im Diagramm soll in solchen Fällen einfach der letzte Wert durchgezogen werden. Im Anhang ein einfache Beispiel:

ScrShotTempGraf.JPG (24.31 KiB) 3421 mal betrachtet

Ich habe das jetzt dadurch gelöst, dass ich insgesamt 3 SQL SELECTS per UNION verbinde um die fehlenden Werte zu holen.

Geht das auch einfacher?

Danke,
MoosHam

[Mathias]

Ich habe das jetzt dadurch gelöst, dass ich insgesamt 3 SQL SELECTS per UNION verbinde um die fehlenden Werte zu holen.

Zurzeit geht es nicht einfacher. Ich habe aber bereits eine Idee, wie das verbessert werden kann (s.a. GitHub).

Gruß
Mathias

[Slice]

Hallo,

da ich auch auf Grafana umgestellt und die gleichen Probleme habe würde ich eine solches Feature gut heißen.
Allerdings habe ich das auch bei länger nicht gemeldeten Statusänderungen ohne diese Komprimierung.
Ich komprimiere die DB immer von Hand irgendwann, so einmal im Jahr oder so.
Auch hier wird mir dann im generierten Diagramm keine Linien angezeigt. Ich denke das kommt daher das in der DB keine geänderten Werte gespeichert werden?! Ich sehe das regelmäßig an der Schließerkontaktschnittstelle für meine Heizung.
Oder ich mach da evtl bei mir was falsch in der Abfrage der Daten?!
Kann gerne mal ein Beispiel posten.

Grüße,
Slice

[MoosHam]

Hi Slice,

also ich habe das so gelöst, dass ich 3 Selects mit UNION Verbinde:

Code: Alles auswählen

(select  ts_to_unix(ts) as time,  value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where  ts >= unix_to_ts($__unixEpochFrom()) and ts < unix_to_ts($__unixEpochTo())
union
(select  $__unixEpochFrom() as time,   value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where ts = (select max(ts) from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE where ts <= unix_to_ts($__unixEpochFrom())) )
union
(select $__unixEpochTo() as time,  value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where  ts = (select max(ts) from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE where ts <= unix_to_ts($__unixEpochTo())) )
)order by time

Die erste SELECT wählt ganz normal die Daten,
Die zweite SELECT wählt den Wert für den linken Rand, indem es den Wert für den letzten TimeStamp der <= des linken Rands des Diagrams ist
Die dritte SELECT wählt den Wert für den rechten Rand indem es den Wert für den letzten TimeStamp der <= des rechten Rands des Diagrams ist

Durch die "$__unixEpochFrom() as time" / "$__unixEpochTo() as time" Selects, werden diese werte genau auf die grenzen des Diagrams gelegt.

Das sollte eigentlich auch für Deinen Fall gut funktionieren. Musst natürlich an Deine Datenpunkte anpassen, habe hier einen Fake-Wert genutzt (D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE)

gruß,
MoosHam

[Slice]

Hallo MoosHam,

danke für diesen Tip bzw. Code,damit habe ich es nun auch hinbekommen.
Leider bin ich echt nicht fit in solchen SQL Abfragen.
Werde das nun bei mir mit den Geräten/SVs entsprechend umsetzten.

Grüße,
Slice

[MoosHam]

Freut mich, dass ich helfen konnte!

[roe1974]

Hallo @MoosHam

Deine Abfrage funktioniert perfekt .. DANKE !!!!
Eine Frage noch ... in der speziellen Datenreihe die ich Abfrage liegen die Wwerte zwischen 0 und 99 % ... ab und zu kann sie aber auch -1 sein.....
Wie kann ich diesen "-1" excluden sodass mir der Graph hier nicht ins Negative fährt ..... Hast eine Idee ?

lg RIchard

[MoosHam]

Hallo Richard,

das sollte recht einfach dadurch gehen, dass Du an die WHERE Bedingungen einfach ein

AND value >= 0

einfügst, also etwa so:

Code: Alles auswählen

(select  ts_to_unix(ts) as time,  value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where  ts >= unix_to_ts($__unixEpochFrom()) and ts < unix_to_ts($__unixEpochTo()) and value >= 0
union
(select  $__unixEpochFrom() as time,   value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where ts = (select max(ts) from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE where ts <= unix_to_ts($__unixEpochFrom()) and value >= 0 ) )
union
(select $__unixEpochTo() as time,  value as SollSchlaf from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE
where  ts = (select max(ts) from D_HMIP_RF_00000000000000_1_SET_POINT_TEMPERATURE where ts <= unix_to_ts($__unixEpochTo()) and value >= 0 ) )
)order by time

Damit sollten alle Werte kleiner als 0 ignoriert werden. Bei den beiden per Union angehängten Abfragen musst DU etwas aufpassen, wo Du die zusätzliche Bedingung anhängst (achte auf die Klammern).

Ich hoffe es funktioniert?

Guten Rutsch!

MoosHam

[roe1974]

ja geht perfekt !!!
DANKE !
Prosit Neujahr !!!

lg RIchard

[roe1974]

Hallo @MoosHam

Danke...passt bis jetzt alles perfekt ... bin ein bisschen am "fine tuning"
Gibts eine Möglichkeit in der Abfrage die Kurven zu "glätten" ... damit die Grafiken nicht so viele Spitzen haben ?

lg Richard