habe nun erfolgreich den Raspberry mit Nextcloud zum laufen gebracht.
An dem PI hängt eine ext. HDD die auch erkannt wird und funktioniert.
Meine konkrete Fragestellung:
Ich bin Fotograph und speichere meine Fotos (verschlüßelt mit Boxcryptor) als drittes Backup auf Strato HiDrive.
Der manuelle (direkte) Upload von vielen Fotos in die Cloud dauert ewig [PC --> Cloud].
Daher suche ich jetzt eine Möglichkeit, wie ich Nextcloud mit der angeschlossenen HDD dazu bringen kann, alle Dateien die sich auf der Festplatte befinden in die Cloud zu hiefen (optional mit einer Uploadbegrenzung).
[also PC --> PI --> Strato HiDrive]
Da der PI im Netzwerk mit 1GB angeschlossen ist, geht das syncronisieren vom lokalen PC recht fix. Für den Up- und Download kann er sich ruhig Zeit lassen und mir nicht die komplette Bandbreite belegen.
Die Dateien sollten gespiegelt sein, ähnlich einem Raid 1.
Ich kenne Strato HiDrive nicht. Aber auf der Seite https://www.strato.de/cloud-speicher steht, dass dir die folgenden Protokolle zur Verfügung stehen. FTP, SFTP, WebDAV, SMB/CIFS, rsync, SCP und Git.
(sinnvoll ist nur irgendwas mit SSH oder über SSH)
Wenn dir die Verschlüsselung der Daten nicht wichtig wäre, könntest du einfach die Datenbank dumpen und Daten und gedumpte Datenbank regelmäßig inkrementell z. B. per “rsync über ssh” zu Strato hochladen. Lese https://docs.nextcloud.com/server/19/admin_manual/maintenance/backup.html
Wenn du deinen Pi als Basis deiner Daten wählen willst, macht es natürlich keinen Sinn mehr vom PC die Daten per Boxcryptor zu Strato hochzuladen. Deine erste Kopie (unverschlüsselt) wäre der PC, die zweite Kopie (unverschlüsselt) wäre dein Pi und die dritte Kopie (verschlüsselt) wäre Strato.
Und die Frage an alle anderen:
Wie am besten die Daten clientseitig verschlüsseln und mit den obigen Protokollen per Script zu Strato hochladen? Jemand eine Idee? Die Idee muss man dann eben kurz in ein Script packen und das Script regelmäßig laufen lassen (CRON). Es sollte die Daten inkrementell hochladen. Dann läuft es auch jeweils nur wenige Sekunden bis Minuten pro Stunde oder Tag.
Verschlüsselter Übertragungsweg benötigt es eigentlich nicht, da die Daten bereits verschlüsselt auf allen Backups abgelegt werden.
Ja, alle meine lokalen Backups sind bereits verschlüsselt.
Ich habe mich damals für diesen Workflow entschieden, da ich häufig eine tragbare Festplatte mitführe um auch unterwegs meine Fotos zu bearbeiten. Sollte die Festplatte mal gestohlen werden oder ich sie verlege brauche ich mir um die Datensicherheit keine Sorgen machen.
Ja. Da auf der mobilen Festplatte nicht alle Daten enthalten sind, sondern nur das aktuelle Projekt.
Das erwähnen der ext. Festplatte hat den Thread nur verkompliziert und hat an sich nichts mit meinem ursprünglichen Problem zu tun, sorry.
Wenn ich das also richtig erkannt habe, bittet Nextcloud an sich keine “fertige” Lösung meines Problems und ich muss dies irgendwo in den Tiefen des Linux-System lösen, oder?
Möchte anmerken, daß ich leider kein Linux-Guru bin, aber bereit bin mir auch neues anzueignen (wenn es kein IT-Studium voraussetzt )
Ich bin die Links von Deinem ersten Beitrag mal durchgegangen. rsync würde doch die Möglichkeiten bieten, oder? Erstellt Nextcloud eine Dateiindexsystem? Also kann ich direkt die PI-Festplatte mit Strato HiDrive syncronisieren, ohne das Nextcloud meckert?
Wenn du sowieso Boxcryptor-verschlüsselte Daten zu HiDrive hochlädst, brauchst du doch eigentlich die Daten des Pi gar nicht mehr dort hochladen. Vielleicht eben kurz die Nextcloud-Installation selbst (ohne data-dir) und die gedumpte Datenbank. Das kannst du aber z. B. leicht verschlüsseln und dann hochladen.
Die eigentlichen Nextcloud-Daten (salopp gesagt das Betriebssystem) nicht, die zu speichernden Dateien jedoch schon.
Mein ursprünglicher Wunschgedanke war, daß ich z.B. 500GB (bereits verschlüsselte) Fotos in meinem lokalen Netzwerk auf den PI lade (das geht recht fix dank 1GB-Netzwerk) und der PI dann diese Dateien auf HiDrive hochlädt (am besten mit einer Bandbreitenbegrenzung).
Wie lange der PI dafür braucht ist mir eigentlich egal.
Aktuell lade ich die (verschlüsselten) Fotos über ein WEBDAV-Netzwerklaufwerk von meinem Hauptrechner direkt auf Strato, daß dauert ewig und ich muß den PC teiweilse 30 Stunden oder mehr anlassen. (so ein Fotoshooting kann schonmal 15-30 GB groß sein, mit Videocuts das doppelte). Das dauert mir ehrlich gesagt zu lange und ich mag den großen Rechner deshalb nicht so lange anlassen.
Leider ist WebDAV eine ziemlich schlechte Wahl. Wahrscheinlich wär es von deinen Desktop (wahrscheinlich Windows) mit z. B. https://rclone.org unter Verwendung von SFTP schon weit schneller als irgendwas mit WebDAV. Nutzt du dann noch https://rclone.org auf dem Pi (ok dann die Linux-Version) dann kann dein Pi langsam, länger und mit weniger Strom vor sich hinarbeiten. Durch inkrementelle Uplads sollten natürlich immer nur Änderungen hochgeladen werden.
)