Problem mit rSync (Arbeitsspeicher läuft bei großen Dateien voll)
Hallo zusammen,
ich möchte gerne meine BackUps mit dem Script von Heise und rSync realisieren, weil ich das Prinzip mit den Hardlinks ziemlich genial finde.
Hier gibts ein paar Infos zu dem Script http://alfafox.info/backup-auf-ntfs-festplatte-mit-rsync.htm
Nun hab ich aber auch recht große Dateien unter meinen Daten (>5GB) und immer wenn rSync anfängt diese Dateien zu kopieren läuft der Arbeitsspeicher voll. Ich schieß rSync dann immer ab wenn von dem Gigabyte RAM <100MB frei sind. Ich denke aber das es den Arbeitsspeicher komplett voll machen würde.
Das System ist ein Win2kSP4 Server mit rSync 3.04. Kopiert werden soll von einer internen auf eine externe USB Platte. Weil lange Pfade vorkommen mounte ich das Zielverzeichnis zunächst mit 'subst'.
Jemand ne Idee wie man das verhindern kann?
Ich würd mich auch über alternativ Programme freuen die das gleiche Leisten wie das Heise Script, also
- Dateien werden einzelnd abgelegt (nicht wie bei NTBackup in einer Datei)
- Die älteren BackUps erst nach einer gewissen Zeit gelöscht
- Es wird inkrementell gesichert aber der BackUp Ordner enthält alle Dateien (unveränderte Dateien werden mit Hardlinks eingefügt)
Vielen Dank und schönen Gruß,
bb
EDIT: Ok das ganze scheint kein rSync spezifisches Problem zu sein. Wenn ich die Dateien mit dem Total Commander kopiere hab ich dasselbe Problem mit dem Arbeitsspeicher. Dateisystem beides NTFS, Schreibcache is aktiviert, Virenscanner ist ESET NOD32 Problem besteht auch bei Deaktivierung von NOD32.
EDIT2: Das stimmt doch nicht ganz, bei der USB Platte ist der Schreibcache deaktiviert und das Kästchen ausgegraut. Ich weiß nicht ob das standardmäßig so sein soll. Könnte das die Ursache für das Problem sein?
ich möchte gerne meine BackUps mit dem Script von Heise und rSync realisieren, weil ich das Prinzip mit den Hardlinks ziemlich genial finde.
Hier gibts ein paar Infos zu dem Script http://alfafox.info/backup-auf-ntfs-festplatte-mit-rsync.htm
Nun hab ich aber auch recht große Dateien unter meinen Daten (>5GB) und immer wenn rSync anfängt diese Dateien zu kopieren läuft der Arbeitsspeicher voll. Ich schieß rSync dann immer ab wenn von dem Gigabyte RAM <100MB frei sind. Ich denke aber das es den Arbeitsspeicher komplett voll machen würde.
Das System ist ein Win2kSP4 Server mit rSync 3.04. Kopiert werden soll von einer internen auf eine externe USB Platte. Weil lange Pfade vorkommen mounte ich das Zielverzeichnis zunächst mit 'subst'.
Jemand ne Idee wie man das verhindern kann?
Ich würd mich auch über alternativ Programme freuen die das gleiche Leisten wie das Heise Script, also
- Dateien werden einzelnd abgelegt (nicht wie bei NTBackup in einer Datei)
- Die älteren BackUps erst nach einer gewissen Zeit gelöscht
- Es wird inkrementell gesichert aber der BackUp Ordner enthält alle Dateien (unveränderte Dateien werden mit Hardlinks eingefügt)
Vielen Dank und schönen Gruß,
bb
EDIT: Ok das ganze scheint kein rSync spezifisches Problem zu sein. Wenn ich die Dateien mit dem Total Commander kopiere hab ich dasselbe Problem mit dem Arbeitsspeicher. Dateisystem beides NTFS, Schreibcache is aktiviert, Virenscanner ist ESET NOD32 Problem besteht auch bei Deaktivierung von NOD32.
EDIT2: Das stimmt doch nicht ganz, bei der USB Platte ist der Schreibcache deaktiviert und das Kästchen ausgegraut. Ich weiß nicht ob das standardmäßig so sein soll. Könnte das die Ursache für das Problem sein?
Bitte markiere auch die Kommentare, die zur Lösung des Beitrags beigetragen haben
Content-ID: 102552
Url: https://administrator.de/forum/problem-mit-rsync-arbeitsspeicher-laeuft-bei-grossen-dateien-voll-102552.html
Ausgedruckt am: 23.12.2024 um 05:12 Uhr
2 Kommentare
Neuester Kommentar
Dann schaue Dir einmal Robocopy an. Siehe auch: http://www.heise.de/software/download/special/backup_mit_robocopy/17_1
Nun hab ich aber auch recht große Dateien unter meinen Daten (>5GB) und immer wenn rSync anfängt diese Dateien zu kopieren
läuft der Arbeitsspeicher voll. Ich schieß rSync dann immer ab wenn von dem Gigabyte RAM <100MB frei sind.
Warum machst Du nicht das Naheliegendste - Was sagt der Autor vom Tool dazu?läuft der Arbeitsspeicher voll. Ich schieß rSync dann immer ab wenn von dem Gigabyte RAM <100MB frei sind.
onegasee59