500er Fehler für bestimmen Zeitraum

[frauennetz]

Hallo,
vermutlich seit Watchtower mir Solectrus auf v0.20.1 aktualisiert hat, bekomme ich einen "500 Interner Server-Fehler" wenn ich auf "GESAMT" klicke. Es wurde bis auf System Updates nichts am Raspberry Pi geändert. Ich habe jetzt den Zeitraum (2024-04) ermitteln können, wo der Fehler liegt. Diesen Zeitraum hatte ich ursprünglich mit den Senec CSV Dateien importiert.
Kann ich den Import wiederholen oder was kann/soll ich jetzt tun?
Viele Grüße und schon mal Danke!

[ledermann]

Bitte schau erst mal in die Docker-Logs. Dort steht, was überhaupt schief gegangen ist.

[frauennetz]

Hallo,
es sind einige Fehler in den Docker-Logs, hier ein Teil davon:

dashboard-1  | [192.168.xxx.x] method=GET path=/summaries/2024-04-19 format=html controller=SummariesController action=show status=500 allocations=4144 duration=23.33 view=0.00 db=7.69
dashboard-1  | [192.168.xxx.x]   
dashboard-1  | [192.168.xxx.x] ActiveRecord::StatementInvalid (PG::UndefinedFile: ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | )
dashboard-1  | [192.168.xxx.x] Caused by: PG::UndefinedFile (ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | )
dashboard-1  | [192.168.xxx.x] 
dashboard-1  | Information for: ActiveRecord::StatementInvalid (PG::UndefinedFile: ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | ):
dashboard-1  | [192.168.xxx.x]   
dashboard-1  | [192.168.xxx.x] 
dashboard-1  | Information for cause: PG::UndefinedFile (ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | ):

...

dashboard-1  | [192.168.xxx.x] [ActiveJob] [SummarizerJob] [aeed7799-f11b-43bf-9bc7-67a896e5f388] Error performing SummarizerJob (Job ID: aeed7799-f11b-43bf-9bc7-67a896e5f388) from Async(default) in 17.65ms: ActiveRecord::StatementInvalid (PG::UndefinedFile: ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | ):

...

dashboard-1  | [192.168.xxx.x]   
dashboard-1  | [192.168.xxx.x] ActiveRecord::StatementInvalid (PG::UndefinedFile: ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | )
dashboard-1  | [192.168.xxx.x] Caused by: PG::UndefinedFile (ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | )
dashboard-1  | [192.168.xxx.x] 
dashboard-1  | Information for: ActiveRecord::StatementInvalid (PG::UndefinedFile: ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | ):
dashboard-1  | [192.168.xxx.x]   
dashboard-1  | [192.168.xxx.x] 
dashboard-1  | Information for cause: PG::UndefinedFile (ERROR:  could not access status of transaction 1052009
dashboard-1  | DETAIL:  Could not open file "pg_subtrans/0010": No such file or directory.
dashboard-1  | CONTEXT:  while inserting index tuple (4,68) in relation "summary_values"
dashboard-1  | ):

Ich kann daraus leider nichts erkennen, außer oben bei 19.04.2024, das ist der besagte Zeitraum, wo ich ein 500 Error erhalte.

[ledermann]

Sehr gut, damit ist die Ursache klar erkennbar – die PostgreSQL-Datenbank ist defekt. Das ist ein äußerst seltenes Phänomen, mir ist das im Zusammenhang mit SOLECTRUS noch nie berichtet worden. Möglicherweise wurde es bei dir durch einen Stromausfall verursacht; denkbar ist aber auch ein Defekt der SD-Karte.

Wenn du sicherstellen kannst, dass die SD-Karte in Ordnung ist, empfehle ich, keine Reparaturversuche an der Datenbank vorzunehmen, sondern sie einfach zu löschen und neu anzulegen. Dabei gehen nur ein paar lokale Einstellungen verloren, die aber schnell wieder erfasst sind. Die Messwerte selbst bleiben erhalten, denn sie liegen in InfluxDB – nicht in PostgreSQL.

Gehe wie folgt vor:

1. Alle Docker-Container beenden:
   docker compose down

2. Ordner mit den PostgreSQL-Daten leeren:
   rm -rf postgresql/* (ggfs. mit sudo)

3. Auch Redis-Ordner leeren (zur Vermeidung von Cache-Konflikten):
   rm -rf redis/* (ggfs. mit sudo)

4. Nutze die Gelegenheit und stelle sicher, dass die aktuelle Major-Version 17 von PostgreSQL verwendet wird. In der compose.yaml sollte beim Service postgresql also stehen:
   image: postgres:17-alpine

5. Container neu starten, die Datenbank wird dabei automatisch neu angelegt:
   docker compose up -d

6. SOLECTRUS im Browser aufrufen und Registrierung erneut durchführen (mit derselben E-Mail-Adresse)

7. Strompreise und Einspeisevergütung neu erfassen

8. In der Strombilanz auf „GESAMT“ klicken und warten, bis alle Tageszusammenfassungen wieder erstellt wurden

Fertig :-)

[frauennetz]

Vielen Dank.
Aber wie soll ich sichergehen, dass die SD-Karte in Ordnung ist?
Der Raspberry Pi 4 inkl. SD-Karte ist kein halbes Jahr alt. Bin am überlegen, von SD-Karte auf SSD/NVMe (über USB mit M.2 NVMe Adapter) umzustellen, ist das ratsam?
Ich werde heute Abend wie beschrieben vorgehen (postgres:17-alpine nutze ich schon).

[ledermann]

Naja, sicher kann man natürlich nie sein. Aber wenn die Karte noch so jung ist und du keinerlei andere Hinweise auf einen Defekt hast, dann war es möglicherweise eine Stromunterbrechung oder anderweitig nicht korrektes Herunterfahren des Raspi. Da würde ich die Karte weiter verwenden. Klar, andere Lösungen wie SSD sind natürlich langlebiger (und teurer), aber ich habe hier auch einen Raspberry mit SD-Karte, der seit 5 Jahren problemlos funktioniert (immer noch mit der ersten SD-Karte).

Ich empfehle, einfach die beschriebenen Schritte durchzugehen, das ist fix gemacht.

[frauennetz]

Frage, muss nach dem löschen im Ordner postgres und redis keine Datei mehr darin sein?
Es sind als Root nach den Löschen mit "rm -rf postgres/*" immer noch Files darin.

[ledermann]

Der Ordner muss leer sein, notfalls ganz löschen und neu anlegen.

[frauennetz]

Danke, funktioniert wieder.
Kleiner Tippfehler in der Anleitung oben, muss rm -rf postgresql/* heißen.

[ledermann]

Prima, freut mich, dass es geklappt hat und SOLECTRUS bei dir nun wieder funktioniert.
Sorry für den Schreibfehler, habe ich jetzt korrigiert.