Backup anfertigen mit vielen mittelgroßen Dateien auf FTP ohne imagelösung
es wird von einem Windows rechner aus gebackupt
wir haben eine Bilddatenbank. Die Bildatenbank muss gesichert bzw. auf einem Webserver hochgeladen werden damit die bilder per script in die Datenbank auf dem Webserver eingelesen und dargestellt werden können.
Für jede Unterkategorie gibt es einen Unterordner und darin die Jahre.
Ich Überprüfe derzeit nur das Jahr 2009/2010 auf allen Kategorien.
Insgesamt stehen in allen Kategorien für das Jahr 2009/2010 ~110.000 Dateien zur Verfügung, welche ein ungefähres Speichervolumen von ~440GB haben.
Derzeit wird dieses Backup von einem FTP-Client welches automatisch startet und die Kategorie für 2009/2010 durchsucht gestartet, ALLE Dateien werden vergleichen und welche nicht auf dem Server vorhanden ist wird hochgeladen. Dies dauert derzeit ungefähr 1sec pro Bild. Teilweise laufen 2 Kategorien gleichzeitig, und dort dauert es dann pro bild 1,2sek. Leider sind das dann bei 110.000 Dateien ~15h. Es wird jeden Tag geprüft. Da es Bidler sind müssen diese auch als Bilder hochgeladen werden damit Sie eingelesen werden können.
Kennt jemand eine andere Software zum Überprüfen der Dateien auf beiden Servern?
Vielen Dank.
wir haben eine Bilddatenbank. Die Bildatenbank muss gesichert bzw. auf einem Webserver hochgeladen werden damit die bilder per script in die Datenbank auf dem Webserver eingelesen und dargestellt werden können.
Für jede Unterkategorie gibt es einen Unterordner und darin die Jahre.
Ich Überprüfe derzeit nur das Jahr 2009/2010 auf allen Kategorien.
Insgesamt stehen in allen Kategorien für das Jahr 2009/2010 ~110.000 Dateien zur Verfügung, welche ein ungefähres Speichervolumen von ~440GB haben.
Derzeit wird dieses Backup von einem FTP-Client welches automatisch startet und die Kategorie für 2009/2010 durchsucht gestartet, ALLE Dateien werden vergleichen und welche nicht auf dem Server vorhanden ist wird hochgeladen. Dies dauert derzeit ungefähr 1sec pro Bild. Teilweise laufen 2 Kategorien gleichzeitig, und dort dauert es dann pro bild 1,2sek. Leider sind das dann bei 110.000 Dateien ~15h. Es wird jeden Tag geprüft. Da es Bidler sind müssen diese auch als Bilder hochgeladen werden damit Sie eingelesen werden können.
Kennt jemand eine andere Software zum Überprüfen der Dateien auf beiden Servern?
Vielen Dank.
Bitte markiere auch die Kommentare, die zur Lösung des Beitrags beigetragen haben
Content-ID: 135572
Url: https://administrator.de/contentid/135572
Ausgedruckt am: 25.11.2024 um 01:11 Uhr
1 Kommentar