Seite 1 von 1

Cloud- bzw FTP-basierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 11:31 am
von 773H
Weil es gerade hier viewtopic.php?f=8&t=3072&start=40#p34942 angesprochen wurde und ich mich dafür interessiere:
Wer hat denn noch Interesse an einer externen Sicherungsmöglichkeit der TWS-Daten ohne die (nach einiger Laufzeit sicherlich unterdimensionierte) interne SD-Karte zu nutzen?
Man sollte ja eigentlich zu Sicherheit (z.B. gegen Elementraschäden) sowieso immer noch ein externes Backup machen und örtlich getrennt aufbewahren. Dazu bietet sich eine cloudbasierte Lösung ja vorbildlich an.


Hintergrund: Vielleicht bin ich nicht der einzige, der das momentan laufende (einmalige) Angebot eines SD-Upgrades nicht zeitnah wahrnehmen kann und andere haben auch ein Interesse an einer SD-losen deutlich erhöhten Sicherungsoption.

Gruß
Stephan

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 11:33 am
von 773H
PS: wenn dieser Beitrag nicht auf "abstimmbar" gesetzt ist, kann das vielleicht einer der Admins noch nachholen. Danke.

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 12:40 pm
von StefanW
Hallo Stephan,

ganz so leicht ist es nicht.

1. So ein Backup ist kein Stream, sondern - auch wegen der Verschlüsselung - werden die einzelnen Daten zunächst lokal auf der Platte weggeschrieben. Für die Influx-DB bedeutet das, das ein Export angestoßen wird, der richtig Platz braucht (durchaus in der Größe, wie die Influx-DB selbst). Dieser Export wird dann in eine verschlüsselte Datei auf dem Backup Device geschrieben.

2. Würden wir also ein Cloud-Backup machen, dann müsste man ebenfalls so vorgehen und zunächst die Einstellungen und die Datenexporte auf die Platte schreiben, dann hochladen

==> Wessen SSD dafür nicht groß genug ist, dem nutzt das also auch nichts. Darum ist die Erweiterung der SSD, die wir im FreshUp anbieten auch so wichtig. Später könnte man das optimieren, das man die Exports zunächst auf die Backup-SD schreibt und von dort auf einen externen Datenträger. Auch dafür macht eine große Backup-SD Sinn.

==> Daher ist mein Rat an alle: Bucht den FreshUp, damit die Datenträger auch die Größe bekommen, die dem erhöhten Datenaufkommen genügt und damit wir dann auch alternative Backup-Strategien - u.a. via Backup-SD - implementieren können.

So ein Cloud-Backup könnte teuer werden, weil da wir nicht ein Datensicherungsunternehmen mit Entwicklung eines komplexen Backups mit Deduplizierung einzelner Influx-Datensätze gründen wollten, wären das stets komplette Backups und 30 mal Im Monat 10 bis 20 GigaByte hochzuladen kostet durchaus.

Da 90% der Nutzer ein NAS haben dürften, das FTP beherrscht, würde ich das als primäre externe Sicherungsquelle sehen (auch hierfür ist mehr SSD / SD sinnvoll - für die Zwischendateien). Cloud-Backups für sein NAS wird man ohnehin als umsichtiger Mensch schon gebucht haben.


lg

Stefan

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 1:06 pm
von pbm
Regelmäßiges (automatisches) Backup mit anschließenden kopieren per (s)ftp auf ein beliebiges Ziel wäre ganz nett...

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 9:33 pm
von 773H
Ja. FTP wurde im oben erwähnten Beitrag auch genannt. Gerne auch das als Alternative zur Cloud.

Gruss Stephan

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 10:59 pm
von Sensej
Ja, lieber FTP als Cloud
MfG Juri

Re: Cloud- bzw FTP-basierte Backuplösung gewünscht?

Verfasst: So Nov 21, 2021 11:55 pm
von Chris M.
Und wenn man sich noch was wünschen darf: SMB / CIFS statt (bzw. vermutlich zusätzlich) zu (S)FTP.

Trotz reinem Linux-Netzwerk zu Hause nutze ich nur SMB/CIFS mit meinem NAS und würde ungern einen zusätzlichen Dienst installieren, der auch noch von mir unbemerkt immer funktionieren muss. Wenn es dagegen Probleme mit SMB gibt, dann bekomme ich das schnell mit, da ich den regelmäßig selbst nutze.

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: Mo Nov 22, 2021 9:08 am
von 773H
StefanW hat geschrieben: So Nov 21, 2021 12:40 pm ganz so leicht ist es nicht.
==> Wessen SSD dafür nicht groß genug ist, dem nutzt das also auch nichts. Darum ist die Erweiterung der SSD, die wir im FreshUp anbieten auch so wichtig. Später könnte man das optimieren, das man die Exports zunächst auf die Backup-SD schreibt und von dort auf einen externen Datenträger. Auch dafür macht eine große Backup-SD Sinn.
Danke für die Info. Das war mir SO nicht klar. Trotzdem an dieser Stelle die Frage, warum man denn als Zwischenspeicher nicht statt der SD-Karte die sehr gut dimensionierte SSD verwenden kann. Die Datensicherheit auf lange Sicht ist für ein (kurzes) Zwischenspeichern doch unerheblich.
==> Daher ist mein Rat an alle: Bucht den FreshUp, damit die Datenträger auch die Größe bekommen, die dem erhöhten Datenaufkommen genügt und damit wir dann auch alternative Backup-Strategien - u.a. via Backup-SD - implementieren können.
Ja, mache ich sehr gerne (ist schon 2x bestellt), habe aber Bedenken, dass es - warum auch immer - nicht klappt.
So ein Cloud-Backup könnte teuer werden, weil da wir nicht ein Datensicherungsunternehmen mit Entwicklung eines komplexen Backups mit Deduplizierung einzelner Influx-Datensätze gründen wollten, wären das stets komplette Backups und 30 mal Im Monat 10 bis 20 GigaByte hochzuladen kostet durchaus.
Nun ja, klar, wenn man das Backup auf 24h-Basis durchführen möchte, kommt da schon was zusammen. Dass das Kosten verursacht, ist auch klar. Aber dafür gibt es ja jetzt die Elab-ID :mrgreen:

Ich persönlich hatte eher im Sinn, die Cloud-Lösung als Ersatz für den zu klein gewordenen SD-Speicher zu nutzen. D.h. je 1x vor und 1x nach dem Update. Das dürfte deutlich weniger Traffic erzeugen.

Gruß
Stephan

Re: Cloudbasierte Backuplösung gewünscht?

Verfasst: So Mai 29, 2022 2:24 pm
von StefanW
Hallo Stephan,

wir sind inzwischen etwas weiter gekommen und hier noch einige Anmerkungen:
773H hat geschrieben: Mo Nov 22, 2021 9:08 amDanke für die Info. Das war mir SO nicht klar. Trotzdem an dieser Stelle die Frage, warum man denn als Zwischenspeicher nicht statt der SD-Karte die sehr gut dimensionierte SSD verwenden kann.
Als Zwischenspeicher wurde schon immer die SSD verwendet, erst von dort ging es auf die SD / µSD oder mittlerweile auch den Timberwolf Backup USB Stick.

Bei manchen TWS 350 / 950 / 960 wird die SSD mittlerweile zu knapp dafür, daher haben wir nun auch implementiert, dass als Zwischenspeicher für die Erstellung des Backup der Timberwolf Backup USB Stick (automatisch, soweit vorhanden) verwendet wird, auch wenn er selbst das Backup-Ziel ist.

Insofern geht der Backup Dienst nun deutlich intelligenter mit dem verfügbaren Speicherplatz vor.

Trotzdem ist ausreichend SSD wichtig, weil auch die Influx für das Reorganisieren der Datenbanken Platz auf der SSD benötigt.

773H hat geschrieben: Mo Nov 22, 2021 9:08 amIch persönlich hatte eher im Sinn, die Cloud-Lösung als Ersatz für den zu klein gewordenen SD-Speicher zu nutzen. D.h. je 1x vor und 1x nach dem Update. Das dürfte deutlich weniger Traffic erzeugen.
Wir sind bei dem Thema Cloud-Backup nun auch weiter, insbesondere was den Traffic betrifft, sollten wir eine kostenverträgliche Lösung haben. Speicherkosten sind aber ein Thema und hier müssen wir sehen, wie wir das künftig anbieten können.

Bislang ist das Interesse dafür aber offenbar verhalten. Weil diejenigen Power-User, die ein NAS besitzen, wollen das Backup natürlich dort drauf haben, wobei es per FTP den großen Nachteil hat, dass die ganzen Meta-Informationen zur Kompatibilität usw. nicht gelesen werden können (weil man keine "Teile" von Daten per FTP lesen kann). Womöglich ginge ein "Push auf FTP", aber Rücksichern dann nur via Stick, damit wir an die Meta-Daten kommen. Oder man separiert die Meta-Daten. Alles machbar, aber kostet auch Zeit und wir fragen uns, wer das bezahlen wird? Weil dem Neukunden ist es nichts wert (da er solche Funktionen nicht im Auge hat, andere Server bieten so ein eigenständiges Backup Modul nicht an, höchstens Sicherung aus der Config-Software).)


In der aktuellen Umfrage künftiger Leistungsmerkmale kann man hierzu abstimmen: viewtopic.php?f=9&t=3585

lg

Stefan