RAM Auslastung steigt immer weiter

[Eldarion85]

Describe the bug
Moin, gestern Abend hat meine Hausautomation Alarm geschlagen, weil der Arbeitsspeicher meines ioBroker über 70% ausgelastet war. In der Visualisierung habe ich gesehen, dass der Smartmeter-Adapter 22% (880 MB) des RaspberryPi 4GB belegt hat. Ich bin dann auf das Issue #247 gestoßen. Allerdings war da ein Update von Node.JS V12 auf V14 die Lösung. Ich könnte jetzt den Adapter neu installieren, ein Update auf V16 machen, oder ganz hässlich, ein Skript schreiben, was den Adapter bei einer bestimmten Auslastung des Speichers einmal neustartet. Aber evtl. seid ihr ja an einer Fehlersuche interessiert, bevor ich das mache :).

Nach dem Neustart um ca. 19 Uhr waren es dann wieder 57 MB. Allerdings hat sich das bis heute morgen innerhalb von 10 Stunden wieder auf 81 MB aufgebaut.

Wenn man sich die Kurve anschaut vermute ich, dass sich das über eine lange Zeit langsam aufbaut

Versions:

Additional context

Gruß
Marco

[Apollon77]

Interesant ... Bitte als erstes mal Node.js auf mindestens 16 oder gleich aktuelle 18.x updaten und dann neu beobachten ob es immer noch passiert. Wäre interessant ob. Bei mir laufen 2 instanzen dauerhaft und es gibt keine solchen Probleme ...

[Eldarion85]

Evtl. würde ja auch eine Neuinstallation vom Adapter schon helfen, aber in beiden Fällen findet man danach doch nicht mehr raus woran es lag?!
Ich wollte ohnehin die Tage auf Node.js v16 hoch, weil v18 offiziell ja noch nicht freigeben ist. Aber wenn du sagst das ist kein Problem, gehe ich direkt auf die v18???

Btw ist eigentlich für ein Upgrade von Node.js nur wichtig, dass der js-Controller vom ioBroker dafür freigegeben ist, oder muss man sich die laufenden Instanzen/Adapter vorher auch alle anschauen? Anders gefragt, wenn der js-Controller für v16 freigegeben ist, kann ich mir dann sicher sein, dass die Adapter darunter auch damit klar kommen?

Besten Dank!

[Apollon77]

Was soll sich durch neuinstallation des Adapters ändern? Die Files die da kommen sind die gleichen.

Nodejs 18 ist ok, WENN js-controller 4.0.24 ist !! Sonst geh auch 16. Und ja mache die Tage den Forum thread nochmal neu

Effektiv kann es Adapter geben die in neueren versionen nicht gehen, aktuell ist aber wenig bekannt... Am Ende schau das alle Adpater die aktuellenversionen haben.. Rest mus man dann spezifisch ansehen

[Eldarion85]

Moin,
ich habe gestern auf Node.js v18.13.0 und NPM 8.13.3 hochgerüstet. Erstmal vorweg, alle 13 Adapter laufen wieder. Allerdings ist die Instanz von Smartmeter wieder innerhalb von 14 Stunden von 57 MB auf 83 MB hochgelaufen. Wäre natürlich möglich das beruhigt sich da jetzt irgendwo, aber davon gehe ich nicht wirklich aus. Alle anderen Adapter liegen stabil zwischen 60-90 MB.
Hast du eine Idee woher das kommen kann oder einen Ansatz für die Fehlersuche?

Besten Dank!

[Apollon77]

Bitte beobachte es mal ... meine instanzen liegen auch bei knapp unter 100MB ... aber stabil dort ... Da fliessen halt einige Daten durch und der Garbage Collector von Node.js/Javascript räumt halt auch nur Dinge weg wenn er es für nötig hält.

[disaster123]

Auch bei mir zieht der smartmeter Adapter immer mehr RAM. Ich starte mit 70MB und es steigt und steigt bei 400MB kille ich den adapter per Hand. Es gibt irgendwo nen Memory Leak. Das ganze passiert um so schneller um so häufiger man die Daten abfragt. Wenn ich das Datenabfrageintervall auf 1s setze - kann ich fast zusehen, wie der RAM steigt.

[disaster123]

Infos zum System:

[Eldarion85]

Hallo,
das Upgrade von Node.js hat leider nicht geholfen. Der Smartmeter-Adapter ist nach 2,5 Tagen Laufzeit wieder von 57 auf 117 MB hochgelaufen. Ich werde kommende Woche meine drei Pi´s auf einen Server mit Proxmox umziehen und komplett neu einrichten. Wenn ich vorher aber noch was prüfen soll, was dir bei der Fehlersuche hilft, sag gerne Bescheid.

[disaster123]

Bei mir sind es sogar +75MB pro 24 Stunden... habe schon eine RAM Grenze für den Adapter festgelegt aber das scheint auch nichts zu bringen...

[Eldarion85]

Ich habe die Aktualisierung auf 5 Sekunden. Bei was stehst du? Hattest ja oben geschrieben es hängt damit zusammen wo der Wert steht.

[disaster123]

ah OK - ich habe 1s - und verwende das offizielle Docker Image - Node kann ich da eh nicht Aktualisieren.

[Apollon77]

sehr interessant ... bitte mal hier schreiben welche protokolle (Do/SML) bzw seriel read/read-write und so ihr nutzt ... muss ich mir in ruhe ansehen, kann bissl dauern

[disaster123]

Here we go:

[Eldarion85]

Ich habe meine Einstellung ja schon ganz oben geschickt.
Beide nur Read und SML. Wir haben aber beide die Schnittstelle selbst definiert.

Aber das sollte ja auch keine Rolle spielen.

[Eldarion85]

@Apollon77

Hallo,
kurzes Update zu dem Issue!
Ich habe jetzt unter Proxmox (oben das lief noch auf einem Pi 4 über die GPIO) einen komplett neuen ioBroker (keine Backups) aufgesetzt und danach eine neue Instanz von Smartmeter installiert. Bei dem Server mit Proxmox nutze ich einen neuen Lesekopf (statt UART jetzt USB). Das Ergebnis ist das gleiche, der Arbeitsspeicher läuft immer weiter voll. Das ist jetzt bei Proxmox und 64GB RAM natürlich erstmal egal, aber irgendwo ist da ein Speicherleck.
Viele Grüße