<html><head><meta http-equiv="content-type" content="text/html; charset=utf-8"></head><body dir="auto">Oder suchen wo die Daten herkommen, und die Quelle korrigieren.<div>Die DB ist es garantiert nicht.<br><br><div dir="ltr">Thomas <div><br></div><div>Mail: thomas@thhoe.de</div><div><br></div></div><div dir="ltr"><br><blockquote type="cite">Am 24.11.2020 um 10:27 schrieb John Doe <johndoe@null.net>:<br><br></blockquote></div><blockquote type="cite"><div dir="ltr"><div style="font-family: Verdana;font-size: 12.0px;"><div>Das führt zu 16. Januar 1975, 3:49b Uhr (UTC). Das scheint mir auch nicht viel richtiger zu sein ...</div>
<div>Ich würde händisch, d.h. visuell Woche für Woche im Frontend durchgehen, nach Auffälligkeiten suchen, entsprechende (kurze) Abschnitte ggfs. löschen und dann ein neues Backup nach wiki anlegen.</div>
<div>Grüße</div>
<div> </div>
<div>JD.</div>
<div>
<div>
<div name="quote" style="margin:10px 5px 5px 10px; padding: 10px 0 10px 10px; border-left:2px solid #C3D9E5; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;">
<div style="margin:0 0 10px 0;"><b>Sent:</b> Tuesday, November 24, 2020 at 9:56 AM<br>
<b>From:</b> "Frank Richter" <frank.richter83@gmail.com><br>
<b>To:</b> "volkszaehler.org - users" <volkszaehler-users@demo.volkszaehler.org><br>
<b>Subject:</b> Re: [vz-users] Image mit dd erstellen / Datenbackup</div>
<div name="quoted-content">
<div>Die Timestamps bei vz sind ms, also bitte vorher durch 1000 teilen :-)
<div> </div>
<div>Grüße</div>
<div>Frank</div>
</div>
<div class="gmail_quote">
<div class="gmail_attr">Michael Hartmann <<a href="mailto:hartmann-micha@web.de" target="_blank">hartmann-micha@web.de</a>> schrieb am Di., 24. Nov. 2020, 09:52:</div>
<blockquote class="gmail_quote" style="margin: 0 0 0 0.8ex;border-left: 1.0px rgb(204,204,204) solid;padding-left: 1.0ex;">
<div>
<div style="font-family: Verdana;font-size: 12.0px;">
<div>Der Timestamp der dort berichtet wird erscheint mir auch "surreal". Zumindest wenn man voraussetzt das es sich um einen UNIX-Timestamp handelt... und nicht um ein anderes Format.</div>
<div> </div>
<div>
<div>Ich habe das Backup der DB auf meinem NAS via Frontend von MariaDB geprüft. Der erste Eintrag liegt Ende Mai (Inbetriebnahme VZ), der letzte zum Zeitpunkt des Backups. Diesen auffälligen Timestamp finde ich dort nicht.</div>
<div> </div>
<div>
<div>Grüße</div>
<div> </div>
<div>Micha</div>
<div style="margin: 10.0px 5.0px 5.0px 10.0px;padding: 10.0px 0 10.0px 10.0px;border-left: 2.0px solid rgb(195,217,229);">
<div style="margin: 0 0 10.0px 0;"><b>Gesendet:</b> Dienstag, 24. November 2020 um 09:21 Uhr<br>
<b>Von:</b> "John Doe" <<a href="mailto:johndoe@null.net" target="_blank">johndoe@null.net</a>><br>
<b>An:</b> <a href="mailto:volkszaehler-users@demo.volkszaehler.org" target="_blank">volkszaehler-users@demo.volkszaehler.org</a><br>
<b>Betreff:</b> Re: [vz-users] Image mit dd erstellen / Datenbackup</div>
<div>
<div style="font-family: Verdana;font-size: 12.0px;">
<div>Hallo zusammen,</div>
<div> </div>
<div>der timestamp 1590761781023 ergibt Dienstag, 27 März 52379, 16:30:23 Uhr. Das klingt ein wenig surreal. Wie sehen denn die Daten per visueller Kontrolle im Verlauf der Monate aus ? Könnte ein Reboot bei noch nicht wieder vorliegender korrekter Systemzeit des Raspis da ein wenig Unordnung gemacht haben ? Ich tippe auf inkonsistente Datenbank an der Stelle. Gibt es eigentlich eine Möglichkeit, die "Richtigkeit" der DB im Sinne der Konsistenz, speziell bei der Uhr-/Systemzeit zu überprüfen ? Das Problem habe ich auch immer mal wieder und muss dann Daten per ....&action=delete solange bereinigen, bis es wieder passt, d.h. unsinnige Peaks verschwunden sind.</div>
<div>Grüße</div>
<div> </div>
<div>JD.</div>
<div>
<div>
<div style="margin: 10.0px 5.0px 5.0px 10.0px;padding: 10.0px 0 10.0px 10.0px;border-left: 2.0px solid rgb(195,217,229);">
<div style="margin: 0 0 10.0px 0;"><b>Sent:</b> Monday, November 23, 2020 at 8:48 PM<br>
<b>From:</b> "Michael Hartmann" <<a href="mailto:hartmann-micha@web.de" target="_blank">hartmann-micha@web.de</a>><br>
<b>To:</b> "<a href="http://volkszaehler.org" target="_blank">volkszaehler.org</a> - users" <<a href="mailto:volkszaehler-users@demo.volkszaehler.org" target="_blank">volkszaehler-users@demo.volkszaehler.org</a>><br>
<b>Subject:</b> Re: [vz-users] Image mit dd erstellen / Datenbackup</div>
<div>Hallo Thomas,<br>
<br>
Ich bin raus. Keine Ahnung, warum ich die Daten nicht retour bekomme. Es ist scheinbar nur für Menschen mit detailierten DB-Kenntmissen lösbar. Was solls...<br>
<br>
Grüße Micha<br>
<div class="gmail_quote">Am 22. November 2020 15:44:46 MEZ schrieb "Thomas Höpfner" <<a href="mailto:thomas@thhoe.de" target="_blank">thomas@thhoe.de</a>>:
<blockquote class="gmail_quote" style="margin: 0.0pt 0.0pt 0.0pt 0.8ex;border-left: 1.0px solid rgb(204,204,204);padding-left: 1.0ex;">
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;">Hallo Micha,</p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"> </p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">bei mir sieht es so aus:</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- NFS-Freigabe auf NAS backup/methusalix2 (muss einmal erstellt werden)</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- auf Rechner methusalix2 ein Script backup.sh mit folgenden Funktion:</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;"> 1. mounten der NFS -Freigabe nach /tmp/backup</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;"> 2. Backup der Datenbank mit dbcopy nach /tmp/backup/sqlite.db3</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;"> 3. umount /tmp/backup</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- das Script wird täglich über cron gestardet</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"> </p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">Für meinen Test habe ich </span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- VM methusalix3 erstellt </span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- volkszähler installeirt</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;">- die Datei sqlite.db3 in die vm kopiert</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- ein Restore der DB mit dbcopy gestardet,</span><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;"> das hat ca 2h gedauert</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- heute habe ich das Backup der letzen Nacht in die VM kopiert</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"><span style="font-size: 12.0pt;font-family: tahoma , arial , helvetica , sans-serif;">- und wieder ein Restore der DB mit dbcopy gestardet, diesmal hat es wenige Sekunden gedauert.</span></p>
<p style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;padding: 0;margin: 0;"> </p>
<pre> </pre>
<blockquote style="border-left: 2.0px solid rgb(50,95,186);padding-left: 5.0px;margin: 0.0px 5.0px 1.0em;"><span style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 10.0pt;">-----Ursprüngliche Nachricht-----<br>
<span><strong>Von:</strong> Michael Hartmann <<a href="mailto:hartmann-micha@web.de" target="_blank">hartmann-micha@web.de</a>></span><br>
<span><strong>Gesendet:</strong> Sonntag 22 November 2020 14:52</span><br>
<span><strong>An:</strong> '<a href="http://volkszaehler.org" target="_blank">volkszaehler.org</a> - users' <<a href="mailto:volkszaehler-users@demo.volkszaehler.org" target="_blank">volkszaehler-users@demo.volkszaehler.org</a>></span><br>
<span><strong>Betreff:</strong> Re: [vz-users] Image mit dd erstellen / Datenbackup</span></span><br>
<div>
<div>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">Hallo Thomas,</span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">was soll ich sagen? Ich bekomme die Daten weder in ein mit DD erstelltes Image, noch in ein komplett neu installiertes System zurückgespielt. Es läuft immer wieder auf diesen Fehler:</span></p>
<div style="border: none;border-bottom: solid windowtext 1.0pt;padding: 0.0cm 0.0cm 1.0pt 0.0cm;">
<p class="MsoNormal" style="border: none;padding: 0.0cm;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
</div>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">pi@SmartMeter:~ $ sudo /usr/bin/php /var/www/<a href="http://volkszaehler.org/vendor/bin/dbcopy" target="_blank">volkszaehler.org/vendor/bin/dbcopy</a> copy -c /etc/dbcopy_restore.yaml</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">entities: copying 7 rows (overwrite)</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">[============================] 100% < 1 sec/< 1 sec 7 rows</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">properties: copying 63 rows (overwrite)</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">[============================] 100% < 1 sec/< 1 sec 63 rows</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">entities_in_aggregator: copying 0 rows (overwrite)</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> 0 [->--------------------------] < 1 sec 4.0 MiB</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">data: copying 7855387 rows (overwrite)</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">[>---------------------------] 0% < 1 sec/< 1 sec 0 rows</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">In AbstractMySQLDriver.php line 74:</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> An exception occurred while executing 'INSERT INTO `data` (`id`,`channel_id`,`timestamp`,`value`) VALUES (?,?,?,?)' with para</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> ms ["1", "2", "1590761781023", "826598.2"]:</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> SQLSTATE[23000]: Integrity constraint violation: 1062 Duplicate entry '1' for key 'PRIMARY'</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">In Exception.php line 18:</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> SQLSTATE[23000]: Integrity constraint violation: 1062 Duplicate entry '1' for key 'PRIMARY'</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">In PDOStatement.php line 115:</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> SQLSTATE[23000]: Integrity constraint violation: 1062 Duplicate entry '1' for key 'PRIMARY'</span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<div style="border: none;border-bottom: solid windowtext 1.0pt;padding: 0.0cm 0.0cm 1.0pt 0.0cm;">
<p class="MsoNormal" style="text-align: justify;border: none;padding: 0.0cm;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">copy [-c|--config CONFIG] [-b|--batch BATCH] [-k|--keep-constraints] [--] [<tables>...]</span></p>
</div>
<p class="MsoNormal" style="text-align: justify;margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">Die Kanäle werde dabei korrekt zurückgespielt, den sie stehen mir im FE zur Verfügung.</span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">Das ist frustrierend. Nun habe ich mit eurer Hilfe eine DB auf meinem NAS generiert in die ich täglich die Daten sichere, aber scheinbar ohne nutzbaren Wert da ich sie nicht wieder heraus bekomme. :-/</span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">Grüße</span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);">Micha</span></p>
</div>
</div>
</blockquote>
<p style="padding: 0;margin: 0;">Wie gesagt, das währe mit Netzwerk zu erklären.</p>
<p style="padding: 0;margin: 0;"> </p>
<pre><span style="font-family: tahoma , arial , helvetica , sans-serif;font-size: 12.0pt;">Mit freundlichen Grüßen,
Thomas </span></pre>
<p> </p>
<p style="padding: 0;margin: 0;"> </p>
<blockquote style="border-left: 2.0px solid rgb(50,95,186);padding-left: 5.0px;margin: 1.0em 5.0px 0.0px;">
<div>
<div>
<p class="MsoNormal" style="margin: 0.0px;"><span style="font-size: 11.0pt;font-family: Calibri , sans-serif;color: rgb(31,73,125);"> </span></p>
</div>
</div>
</blockquote>
</blockquote>
</div>
<br>
--<br>
Diese Nachricht wurde von meinem Android-Gerät mit K-9 Mail gesendet.</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</blockquote>
</div>
</div>
</div>
</div>
</div></div>
</div></blockquote></div></body></html>