Eigene Visualisierung von Daten vom Auto

joernh · 19. März 2023

Zitat von stein

Ich versuche das mal aufzuschreiben. Im Grunde muss man beim VWsFriend container nichts backuppen. Man verliert im worst-case die HomeKit Einstellungen und ggf die ABRP Verbindung. Kann man beides wieder einstellen.
Was wichtig ist ist das Datenbank Backup. Dafür muss man den Postgres Container backuppen. Da sollte es eigentlich auch Tutorials geben.

Moin,

ich muss nochmal blöd Nachfragen. Wenn ich bei der Web Oberfläche auf Backup klicke, was wird da dann genau gesichert? Das ist doch ein Postgres Dump oder? Gibt es da nicht die Möglichkeit diesen Befehl Regelmäßig per Scipt ausführen zu lassen und als Ziel ein gemountetes Netzlaufwerk anzugeben?

Ich habe jetzt schon mit RaspiBackup gearbeitet, aber da werden ja riesige Backup Files erstellt.

Zitat von Brezentrager

Ich nutze folgende Lösung für mein Backup (auf eine Synology):
Raspberry Pi Raspbian Linux backup-manager einrichten installieren Backups automatisch sichern Weewx Daten Backup | rothlive.de

Diesen Tipp hier habe ich noch nicht probiert. Da bin ich mir nicht sicher welche Verzeichnisse gesichert werden sollen.

Sind es diese hier?:

/var/lib/docker/containers
/var/lib/docker/volumes

bei 1. ist es natürlich schwierig weil die Container ja jedes mal bei Neuerstellung einen neuen Namen bekommen. Oder kann ich da dann einfach den Inhalt aus dem gesicherten Container in den neu erstellten Container kopieren? Ich könnte mir vorstellen, dass es da irgendwelche Verknüpfungen gibt, die dann mit dem neuen Container nicht funktionieren

AdMan

Hallo,
schau mal hier: (hier klicken). Dort findet man vieles zum VW ID.

stein · 19. März 2023

Das geht auf jeden Fall. Du kannst das bestimmt auch mit curl oder wget scripten. Du musst dann nur User und Passwort mitgeben.

Schorsch · 19. März 2023

joernh Wenn ich das Docker Prinzip richtig verstanden habe werden die Container ja nach einem Update neu gebaut und es sollte reichen die Datenverzeichnisse zu sichern und diese nach einer Neuinstallation durch die Daten aus dem Backup zu ersetzen (oder doch besser schon vor der Neuinstallation?) also:

/var/lib/docker/volumes

FLH55 · 22. März 2023

Es geschehen noch Zeichen und Wunder!

Hatte mich nach Bekanntgabe der FIN vergangenes Jahr über die verschwundene Darstellung gewundert und Anfang 2023 das mal bei der Hotline "moniert"..... und zack, 3 Monate später tauchte heute das 1. Mal die korrekte Darstellung auf!

20230322_100142.jpg

joernh · 22. März 2023

Moin FLH55

eigentlich ist mit der Visualisierung hier in diesem Falle das hier gemeint :

GitHub - tillsteinbach/VWsFriend: VW WeConnect visualization and control

VW WeConnect visualization and control. Contribute to tillsteinbach/VWsFriend development by creating an account on GitHub.

github.com

WegiTech · 23. März 2023

Seit zwei Tagen werden die Orte (Start, Ziel) der Trips nicht mehr erfasst. Die Trips selbst jedoch schon. Sie sind im Grafana Dashboard zu sehen, aber eben ohne konkrete Locations.

Interessanterweise scheint die Übergabe der Parkpositionsdaten von vwsfriend per MQTT an iobroker aber zu funktionieren. Die Felder parkingPosition Latitude und Logitude kommen dort an, und die Werte scheinen zu stimmen.

joernh · 23. März 2023

Zitat von WegiTech

Seit zwei Tagen werden die Orte (Start, Ziel) der Trips nicht mehr erfasst.

Bei mir wurde heute morgen der Trip nicht erfasst. SOC wird mittlerweile wieder richtig angezeigt. Scheint wohl ein Problem bei den VW Servern gewesen zu sein. Mal sehen wenn das Auto nachher wieder bewegt wird, ob die Trips dann wieder erfasst werden...

Das Log spuckt dazu folgende Fehler aus:

Code

2023-03-23T05:16:13+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:16:13+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:17:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:18:22+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:19:19+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:19:19+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:20:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:21:20+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:21:50+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:21:50+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:23:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:24:19+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:24:49+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:24:50+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:26:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:27:26+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:27:57+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:27:57+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:29:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:31:02+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:31:03+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:32:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:33:54+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:35:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:36:47+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:38:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:39:22+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:41:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:42:58+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:44:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:45:58+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:47:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:49:17+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:50:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:51:19+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:51:51+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:51:51+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:53:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:54:25+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T05:54:55+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:54:55+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:56:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T05:57:18+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T05:58:04+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T05:59:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T06:00:23+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZA1ZPV: Could not fetch data. Status Code was: 504
2023-03-23T06:01:14+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504
2023-03-23T06:01:14+0000:INFO:abrp_agent:ABRP send telemetry for vehicle WVGZZZE2ZPE for account : Missing telemetry: speed, 
2023-03-23T06:02:35+0000:INFO:vwsfriend_base:Updating data from WeConnect
2023-03-23T06:03:27+0000:ERROR:weconnect:Failed to retrieve data for VIN WVGZZZE2ZPE: Could not fetch data. Status Code was: 504

Alles anzeigen

stein · 23. März 2023

Wenn man neugestartet hat wenn das Auto keine Parkposition hatte dann denkt VWsFriend es müsste den alten Fallback machen. Dann einfach nochmal mit geparktem Auto neustarten

joernh · 25. März 2023

Moin zusammen und stein

gibt es eigentlich einen Grund warum der Intervall für die Datenabfrage auf ≥120 Sek begrenzt ist?

stein · 25. März 2023

Jo, wenn ich es raus nehme dann stellen das Leute auf 1 Sekunde und legen damit den Server lahm. Dann ist der Spaß für alle vorbei. Das Auto sendet ohnehin nicht öfter Daten, daher ist das kein Nachteil.

joernh · 25. März 2023

alles klar danke, so etwas dachte ich mir.

Ich bin gerade am rum probieren wie ich die gesicherte Datenbank in ein neu aufgesetztes VWsFriend bekomme. Allerdings bekomme ich jedes mal bei ausführen von

Code

sudo docker-compose --env-file ./myconfig.env up

egal wie ich es versuche folgenden Fehler

Code

ERROR: for vwsfriend  Container "c6815e437d1e" is unhealthy.
ERROR: Encountered errors while bringing up the project.

Der o.g. Container ist der postgresdb Container.

Was ich gemacht habe:

folgende Ordner gesichert Screenshot 2023-03-25 155434.png
sämtliche Container gestoppt und gelöscht (postgres, grafana, VWsFriend)
die dazugehörigen Volumes gelöscht.
per pull neu gezogen
per sudo docker-compose --env-file ./myconfig.env up neues VWsFriend aufgesetzt
sämtliche Container gestoppt (postgres, grafana, VWsFriend)
die unter 1. gezeigten Ordner unter /var/lib/docker/volumes eingefügt bzw. ersetzt
per sudo docker-compose --env-file ./myconfig.env up VWsFriend neu gestartet.

Irgendwo habe ich da doch einen Gedanken Fehler

stein · 25. März 2023

Ich würde mal im log vom postgres container schauen worüber er sich beschwert.

joernh · 25. März 2023

folgendes:

Code

ERROR: for vwsfriend  Container "a54833fba81f" is unhealthy.
ERROR: compose.cli.main.exit_with_metrics: Encountered errors while bringing up the project.
pi@pi64:~ $ sudo docker logs pi_postgresdb_1

PostgreSQL Database directory appears to contain a database; Skipping initialization

2023-03-25 15:38:43.451 UTC [1] LOG:  starting PostgreSQL 13.10 (Debian 13.10-1.pgdg110+1) on aarch64-unknown-linux-gnu, compiled by gcc (Debian 10.2.1-6) 10.2.1 20210110, 64-bit
2023-03-25 15:38:43.451 UTC [1] LOG:  listening on IPv4 address "0.0.0.0", port 5432
2023-03-25 15:38:43.452 UTC [1] LOG:  listening on IPv6 address "::", port 5432
2023-03-25 15:38:43.980 UTC [1] LOG:  listening on Unix socket "/var/run/postgresql/.s.PGSQL.5432"
2023-03-25 15:38:45.779 UTC [14] LOG:  database system was interrupted; last known up at 2023-03-25 14:44:02 UTC
2023-03-25 15:38:49.246 UTC [14] PANIC:  could not open file "pg_wal/000000010000000000000001": Permission denied
2023-03-25 15:38:52.433 UTC [22] FATAL:  the database system is starting up
2023-03-25 15:39:08.123 UTC [1] LOG:  startup process (PID 14) was terminated by signal 6: Aborted
2023-03-25 15:39:08.123 UTC [1] LOG:  aborting startup due to startup process failure
2023-03-25 15:39:08.185 UTC [1] LOG:  database system is shut down

Alles anzeigen

stein · 25. März 2023

Ich vermute es ist ein Problem mit den Dateirechten

joernh · 25. März 2023

du meinst von diesen Dateien?

Zitat von joernh

folgende Ordner gesichert

hab einfach mal alles auf 777 gesetzt. Bringt auch nichts

Eigene Visualisierung von Daten vom Auto

Jetzt mitmachen!

Benutzer online in diesem Thema