binbash86
Goto Top

Synchronisation eines großen Files über WAN bzw VPN

Hi

ich würde mich freuen wenn jemand eine Idee zu meinem Problem hat.

Standort 1: 192.168.100.0/24
Standort 2: 192.168.101.0/24

An Standort 1 steht eine QNAP-NAS mit einer SMB-Freigabe. Auf dieser Freigabe befindet sich ein 1-TB Files, welches täglich um ca. 25GB geändert wird. Dieses File soll nun auf eine SMB-Freigabe an Standort 2 repliziert werden. Problem dabei, der Upload ist nur 30 mbit/s. Die Synchronisation darf also wirklich nur die geänderten Datenblöcke schreiben.

Welche Technologie bzw. welche Freeware-Software kann ich dazu nutzen ? Auf beiden Seiten befinden sich ESXi-Hypervisor und Windows VMs auf die ich etwas installieren könnte.


Danke

Content-ID: 5755680212

Url: https://administrator.de/forum/synchronisation-eines-grossen-files-ueber-wan-bzw-vpn-5755680212.html

Ausgedruckt am: 22.12.2024 um 06:12 Uhr

2423392070
2423392070 31.01.2023 um 14:34:12 Uhr
Goto Top
Wenn es wirklich um die Blöcke gehen soll, dann musst du mit den Tools von QNAP dich begnügen.
Vielleicht gibt es im SD-WAN noch etwas. Passt aber nicht zu QNAP.
Spirit-of-Eli
Spirit-of-Eli 31.01.2023 um 14:36:31 Uhr
Goto Top
Moin,

an der Stelle kommst du wahrscheinlich nicht um eine Storage replication nicht herum. Denn auf Dateisystem Basis würde permanent die die Datei neu gesynct werden.
Beim Storage ginge allerdings eine Block basierte Synchronisation.

Was für ein Storage liegt denn darunter? Was für eine VMware Lizenz setzt ihr ein?

Gruß
Spirit
binBash86
binBash86 31.01.2023 um 14:42:07 Uhr
Goto Top
Ich habe gerade gesehen dass es doch eine uralte Thecus ist. Mhh...gibt es da keine Windows-Software die das kann ?
binBash86
binBash86 31.01.2023 um 14:43:20 Uhr
Goto Top
Ich erkläre mal was ich genau will. Veeam schreibt ein Backup und jeden Tag ein inkrementelles. Problem ist, wir haben keine Lizenz mit einem WAN-Accelerator. Das Backup soll aber zusätzlich auf einer externen NAS liegen.
ElmerAcmeee
ElmerAcmeee 31.01.2023 um 14:45:09 Uhr
Goto Top
Hi,
von Quantum (DXI V5000) oder DELL (virtual Datadomain) gibt es freie Dedupe Appliances. Dort kannst du NAS Shares anlegen und replizieren lassen. Diese übetragen nur geänderte Blöcke, welche die Gegenstelle noch nicht kennt.
U.U. können das auch bei TB großen Files nur wenige MB sein.
Hoffe das hilft weiter.
Wir replizieren so die Backupdaten von den Außenstandorten an die Zentrale.
Gruß
2423392070
2423392070 31.01.2023 um 14:48:51 Uhr
Goto Top
Zitat von @binBash86:

Ich habe gerade gesehen dass es doch eine uralte Thecus ist. Mhh...gibt es da keine Windows-Software die das kann ?

Wie soll Windows die Blöcke sehen können?
binBash86
binBash86 31.01.2023 um 14:59:29 Uhr
Goto Top
Vielleicht wenn es ein ISCSI-LUN ist. Die NAS kann ISCSI.
binBash86
binBash86 31.01.2023 um 15:01:31 Uhr
Goto Top
Danke, aber für DEDUP braucht man ja ebenfalls die große Veeam Lizenz

https://uploads-eu-west-1.insided.com/veeam-en/attachment/9e6ffe53-bcf7- ...
2423392070
2423392070 31.01.2023 um 15:12:02 Uhr
Goto Top
Zitat von @binBash86:

Vielleicht wenn es ein ISCSI-LUN ist. Die NAS kann ISCSI.

Das würde dich weiter bringen mit dem Ansatz.
Die Spielzeug-OEMs haben Block-Sync-Lösungen, so weit ich weiß.
Brauchst nur den selben OEM.
ElmerAcmeee
ElmerAcmeee 31.01.2023 um 15:29:41 Uhr
Goto Top
Hi,
nö, diese Variante hat mit Veeam nix zu tun. Veeam weiß davon nix. Appliance unter VMWare deployen, NAS Share anlegen und in Veeam dieses Share als Repository einbinden. Zweite Appliance am anderen Standort deployen, share anlegen und über die entsprechenden Optionen miteinander replizieren lassen.

Bei dem Screenshot läuft ein Plugin auf der DXI / Datadomain. Hier hast du dann noch zusätzliche Optionen.
Aber nur zum Repliziren brauchst du das nicht. Setzen wir an 20 Standorten weltweit ein.
Es gibt sowohl file and folder Replikation als auch Snaphots.

Passt also genau zu dem was du vor hast.
Gruß
binBash86
binBash86 31.01.2023 um 15:30:31 Uhr
Goto Top
OK ich bin schon am installieren, mal sehen ob es klappt face-smile Danke
binBash86
binBash86 31.01.2023 um 15:35:17 Uhr
Goto Top
Muss ich denn auf irgendwas spezielles achten ? Also irgendeine spezielle Art von Replication einrichten ? Filesystem-Sync oder Filesync ? Danke
ElmerAcmeee
ElmerAcmeee 31.01.2023 um 15:37:22 Uhr
Goto Top
Dann viel Erfolg.

Die Dedupe Apliances können im schreiben extrem schnell sein, da hoffentlich alles nur verpointert und kaum echt geschrieben wird.
Nachteil: lesen/wiederherstellen ist deutlich langsamer als von normalen NAS Systemen, da die ganzen Blöcke über die Pointer wieder zusammen gebastelt werden müssen.

Hier muss man Vor- und Nachteile einfach abwägen und gut testen.
Gruß
ElmerAcmeee
ElmerAcmeee 31.01.2023 um 15:39:27 Uhr
Goto Top
Beim FileSync wird die Datei / der Ordner sofort gesynct wenn geändert wird.
Ohne die Option wird ein Snapshot per Scheduler gesynct. Diesen müsste man zum lesen erst wieder in einen Share "recovern" und dann dem Veeam unterjubeln. wir nutzen erstes