Hardware oder Software RAID
Mahlzeit,
Kurz vorab eine Einigung darauf dass es kein Hardware RAID gibt, ich aber trotzdem differenziere zwischen:
Software RAID ( reine Software auf einem OS)
Hardware RAID (Software auf einem Asic etc. Auf der Hardware)
Nun zur Frage.
Ich habe heute einen neuen Kunden übernommen. Dieser hat Jahrelang so ziemlich alles nicht gemacht. Wir sind hier im XP Zeitalter stehengeblieben. Da der Kunde einen neuen Besitzer hat und dieser Wert auf eine vernünftige IT legt, darf ich jetzt Hand anlegen.
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Es handelt sich um insgesamt 21 Dual Laufwärksschächte mit als insgesamt 42 8TB WD Red jeweils 2 im RAID 1.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Würdet ihr diese Konstellation übernehmen?
Falls ja, Sollte ich das RAID 1 als Software RAID Ausführen oder diese Funktion auf die Kisten auslagern?
Kann ein OS eine Platte aus einem RAID 1 ohne RAID Controller direkt lesen? Wenn nicht steh ich ja schon blöd da wenn mir so ne Kiste verreckt.
Falls diese Installation nicht mehr in Frage kommt, welche "kosten nutzen effiziente" Möglichkeit habe ich 42 3,5" Platten aufzunehmen und zu raiden? Datenverlust der aktuellen Daten ist irrelevant da dort nur temporär Dateien lagern aber dann in enormer Größe.
Ich bin etwas hin und her gerissen, da ich so eine Installation noch nie beurteilen durfte. Vielleicht hat ja der ein oder andere ne Idee.
MFG
CrunkFX
Kurz vorab eine Einigung darauf dass es kein Hardware RAID gibt, ich aber trotzdem differenziere zwischen:
Software RAID ( reine Software auf einem OS)
Hardware RAID (Software auf einem Asic etc. Auf der Hardware)
Nun zur Frage.
Ich habe heute einen neuen Kunden übernommen. Dieser hat Jahrelang so ziemlich alles nicht gemacht. Wir sind hier im XP Zeitalter stehengeblieben. Da der Kunde einen neuen Besitzer hat und dieser Wert auf eine vernünftige IT legt, darf ich jetzt Hand anlegen.
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Es handelt sich um insgesamt 21 Dual Laufwärksschächte mit als insgesamt 42 8TB WD Red jeweils 2 im RAID 1.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Würdet ihr diese Konstellation übernehmen?
Falls ja, Sollte ich das RAID 1 als Software RAID Ausführen oder diese Funktion auf die Kisten auslagern?
Kann ein OS eine Platte aus einem RAID 1 ohne RAID Controller direkt lesen? Wenn nicht steh ich ja schon blöd da wenn mir so ne Kiste verreckt.
Falls diese Installation nicht mehr in Frage kommt, welche "kosten nutzen effiziente" Möglichkeit habe ich 42 3,5" Platten aufzunehmen und zu raiden? Datenverlust der aktuellen Daten ist irrelevant da dort nur temporär Dateien lagern aber dann in enormer Größe.
Ich bin etwas hin und her gerissen, da ich so eine Installation noch nie beurteilen durfte. Vielleicht hat ja der ein oder andere ne Idee.
MFG
CrunkFX
Bitte markiere auch die Kommentare, die zur Lösung des Beitrags beigetragen haben
Content-ID: 667601
Url: https://administrator.de/contentid/667601
Ausgedruckt am: 23.11.2024 um 16:11 Uhr
23 Kommentare
Neuester Kommentar
Hallo.
Nix Ungewöhnliches.
Foto, oder es ist nicht passiert <-- Scherz
Nein. Besser zwei NAS Geräte anschaffen. Eines für den Produktiv-Betrieb und dieses dann via iSCSi an den Server binden.
Das andere Gerät als Backup (idealerweise Offsite / stark abhängig von der Internetanbindung und dem Datenvolumen). Wie sieht denn aktuell die Backup Strategie aus? Oder sind von den theoretischen 160 TB auch welche für das Backup gedacht?
Ist der Speicherbedarf tatsächlich so hoch?
Das Budget gibt ja die möglichen Szenarien vor. Daher gehe ich davon aus, dass nicht gerade 20K für einen HCI Knoten-Verbund (kleinste Ausbaustufe) ins Auge gefasst wurden.
In jedem Fall würde ich auch den vorhandenen Server (welche Hardware isses denn in deinem Fall?) umziehen vom physischen weg zu einer Virtualisierungs-Umgebung hin. Allein aus Gründen der Datensicherung, eventueller Migration auf neue Hardware und Kosteneffektivität.
Gruß
Marc
Zitat von @CrunkFX:
Nun zur Frage.
Ich habe heute einen neuen Kunden übernommen. Dieser hat Jahrelang so ziemlich alles nicht gemacht. Wir sind hier im XP Zeitalter stehengeblieben. Da der Kunde einen neuen Besitzer hat und dieser Wert auf eine vernünftige IT legt, darf ich jetzt Hand anlegen.
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Nun zur Frage.
Ich habe heute einen neuen Kunden übernommen. Dieser hat Jahrelang so ziemlich alles nicht gemacht. Wir sind hier im XP Zeitalter stehengeblieben. Da der Kunde einen neuen Besitzer hat und dieser Wert auf eine vernünftige IT legt, darf ich jetzt Hand anlegen.
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Nix Ungewöhnliches.
Es handelt sich um insgesamt 21 Dual Laufwärksschächte mit als insgesamt 42 8TB WD Red jeweils 2 im RAID 1.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Foto, oder es ist nicht passiert <-- Scherz
Würdet ihr diese Konstellation übernehmen?
Nein. Besser zwei NAS Geräte anschaffen. Eines für den Produktiv-Betrieb und dieses dann via iSCSi an den Server binden.
Das andere Gerät als Backup (idealerweise Offsite / stark abhängig von der Internetanbindung und dem Datenvolumen). Wie sieht denn aktuell die Backup Strategie aus? Oder sind von den theoretischen 160 TB auch welche für das Backup gedacht?
Ist der Speicherbedarf tatsächlich so hoch?
Das Budget gibt ja die möglichen Szenarien vor. Daher gehe ich davon aus, dass nicht gerade 20K für einen HCI Knoten-Verbund (kleinste Ausbaustufe) ins Auge gefasst wurden.
In jedem Fall würde ich auch den vorhandenen Server (welche Hardware isses denn in deinem Fall?) umziehen vom physischen weg zu einer Virtualisierungs-Umgebung hin. Allein aus Gründen der Datensicherung, eventueller Migration auf neue Hardware und Kosteneffektivität.
Gruß
Marc
Sehr schwer zu beurteilen aber erstmal würde ich sagen, ich würde eventuell nicht mal den Kunden haben wollen
Ich bin auch ein Kostenfuchs aber Daten sind nun mal wertvoll. Du sagst es sind nur temporäre Daten, gibt es eine Datensicherung?
Um was für Daten handelt es sich? Große Dateien wie Bild und Video Material oder aberwitzig viele kleine Dateien? Wie findet der Zugriff statt, über SMB?
Was passiert denn wenn ein Laufwerk ausfällt? Große Systeme haben den Vorteil von Hotspares aber bei 8 TB Platten ist die Wahrscheinlichkeit hoch das wenn eine Platte ausfällt und die andere aus dem RAID-Verbund alle Daten liefern muss es auch hier zu Fehlern kommt.
Ich bin auch ein Kostenfuchs aber Daten sind nun mal wertvoll. Du sagst es sind nur temporäre Daten, gibt es eine Datensicherung?
Um was für Daten handelt es sich? Große Dateien wie Bild und Video Material oder aberwitzig viele kleine Dateien? Wie findet der Zugriff statt, über SMB?
Was passiert denn wenn ein Laufwerk ausfällt? Große Systeme haben den Vorteil von Hotspares aber bei 8 TB Platten ist die Wahrscheinlichkeit hoch das wenn eine Platte ausfällt und die andere aus dem RAID-Verbund alle Daten liefern muss es auch hier zu Fehlern kommt.
Zitat von @CrunkFX:
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Es handelt sich um insgesamt 21 Dual Laufwärksschächte mit als insgesamt 42 8TB WD Red jeweils 2 im RAID 1.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Der alte Besitzer hat vermutlich aus Spargründen den kompletten Firmenspeicher auf externen Festplattengehäusen mit RAID Funktion gespeichert ( ICY-BOX ).
Es handelt sich um insgesamt 21 Dual Laufwärksschächte mit als insgesamt 42 8TB WD Red jeweils 2 im RAID 1.
Angebunden sind alle Platten an einem Server via PCI Express USB3.1 Karten.
Kann mir gerade schwer vorstellen. dass einer wirklich diese Bastellösung gebaut hat. Foto?
Ansonsten würde ich erstmal versuchen zu analysieren wie viel Speicherplatz wirklich gennötigt wird. 160TB ist eine ganze Menge Holz...
Sollte das Budget da sein, würde ich zu einem Storage raten im Raid 5 oder 6 mit einer Platte im Hot-Standby.
VG
Zitat von @CrunkFX:
Es handelt sich hierbei um ein Krematorium mit insgesamt 4 Säälen die jeweils 4 Kameras haben. Zu Beginn einer Sitzung nehmen alle Kameras (analog, aber irgendsoein Uhd analog) die Sitzung auf und senden ihr analog Signal an einen Videoserver(AMD Opteron 1218, 16g RAM) und dann im Rohformat auf die Platten.
Es handelt sich hierbei um ein Krematorium mit insgesamt 4 Säälen die jeweils 4 Kameras haben. Zu Beginn einer Sitzung nehmen alle Kameras (analog, aber irgendsoein Uhd analog) die Sitzung auf und senden ihr analog Signal an einen Videoserver(AMD Opteron 1218, 16g RAM) und dann im Rohformat auf die Platten.
Ok. Danke für Info. Bei der Konstellation würde ich parallel dazu mal durchrechnen ob es für den Kunden nicht günstiger wird, wenn er auf modernere Kamerasysteme umstellt, welche dann die Daten direkt Netzwerkspeicher ablegen. Vermutlich werden dann keine 160 TB mehr benötigt. Danach ein entsprechendes Storage auslegen.
VG
PS: Bin mal gespannt auf die Fotos. Mit Sichert zu verwenden als Beispielbild wie man es nicht machen sollte.
Interessante Umgebung. Also die Titelfrage "Hardware" vs. Software RAID würde ich mir mit Logik beantworten:
Bei Software RAID muss der Server die Daten über eine USB Verbindung zwei mal senden. Bei RAID durch einen Controller in der ICY Box ja eigentlich nur einmal, also müsste sich die Bandbreite theoretisch verdoppeln. Nun schafft USB 3.1 vermutlich problemlos die zwei Platten, vielleicht einfach mal einen Speedtest für beide Konfigurationen machen? - Tendenziell bin ich bei Hardware RAID.
4 Kameras in einem Raum pro "Session" würde noch eine Möglichkeit eröffnen. Angenommen, der Server Macht Blödsinn, dann sind erstmal alle Aufnahmen weg (also nicht nur die auf einer Platte). Das Aufgenommene kann nicht wiederholt werden... Vielleicht sollte man die Boxen und Kameras gleichmäßig auf zwei Serversysteme aufteilen?
Bei Software RAID muss der Server die Daten über eine USB Verbindung zwei mal senden. Bei RAID durch einen Controller in der ICY Box ja eigentlich nur einmal, also müsste sich die Bandbreite theoretisch verdoppeln. Nun schafft USB 3.1 vermutlich problemlos die zwei Platten, vielleicht einfach mal einen Speedtest für beide Konfigurationen machen? - Tendenziell bin ich bei Hardware RAID.
4 Kameras in einem Raum pro "Session" würde noch eine Möglichkeit eröffnen. Angenommen, der Server Macht Blödsinn, dann sind erstmal alle Aufnahmen weg (also nicht nur die auf einer Platte). Das Aufgenommene kann nicht wiederholt werden... Vielleicht sollte man die Boxen und Kameras gleichmäßig auf zwei Serversysteme aufteilen?
Moin,
Z.B. mit solchen Teilen:
https://www.reichelt.de/ethernet-ueber-koax-1800-mbps-einzelgeraet-eoc-1 ...
https://www.reichelt.de/smartsolutions-c8262.html?&nbc=1
Zum Rest:
Erst einmal alles sauber analysieren und aufschreiben. Danach ein "rundes Konzept" erarbeiten.
Ich würde da, je nach wichtigkeit der Daten auf ein vernünftiges Storage gehen. Schlimmstenfalls irgendwas von IBM/ Lenovo/ HP/ Fujitsu mit zwei Canistern und einer iSCSI-Anbindung. Allerdings bedarfs es dazu noch einen (kleinen) Server, der den Blockspeicher auch mit Daten füttert. DIe andere Variante wäre dann ein QNAP/ Synology aus der größeren Serie. Dort kannst du im Bedarfsfall auch Speichereinheiten (Enclosures) via eSATA o.Ä. nachrüsten. Vorteil bei den NAS-Systemen: du hättest einen zentralen Kameraserver dabei. Bei Synology als "Oberklasse" die FS3400 oder SA3200D - kostet aber auch, da lohnt es sich ggf, dann doch zu den anderen, o.g Herstellern zu gehen.
Gruß
em-pie
Zitat von @CrunkFX:
... Nur hab ich dann natürlich die Kabel Problematik. Aktuell liegt dort ja RG58 oder 59 jedenfalls coax.
Das kann man ggf. auch "umgehen", Artet nur in einer kleinen Geräteschlacht aus:... Nur hab ich dann natürlich die Kabel Problematik. Aktuell liegt dort ja RG58 oder 59 jedenfalls coax.
Z.B. mit solchen Teilen:
https://www.reichelt.de/ethernet-ueber-koax-1800-mbps-einzelgeraet-eoc-1 ...
https://www.reichelt.de/smartsolutions-c8262.html?&nbc=1
Zum Rest:
Erst einmal alles sauber analysieren und aufschreiben. Danach ein "rundes Konzept" erarbeiten.
Ich würde da, je nach wichtigkeit der Daten auf ein vernünftiges Storage gehen. Schlimmstenfalls irgendwas von IBM/ Lenovo/ HP/ Fujitsu mit zwei Canistern und einer iSCSI-Anbindung. Allerdings bedarfs es dazu noch einen (kleinen) Server, der den Blockspeicher auch mit Daten füttert. DIe andere Variante wäre dann ein QNAP/ Synology aus der größeren Serie. Dort kannst du im Bedarfsfall auch Speichereinheiten (Enclosures) via eSATA o.Ä. nachrüsten. Vorteil bei den NAS-Systemen: du hättest einen zentralen Kameraserver dabei. Bei Synology als "Oberklasse" die FS3400 oder SA3200D - kostet aber auch, da lohnt es sich ggf, dann doch zu den anderen, o.g Herstellern zu gehen.
Gruß
em-pie
Zitat von @CrunkFX:
Moin,
Nachdem ich heute Mal wieder bei meinem neuen Lieblingskunden war möchte ich euch dann doch Mal an dem Setup teilhaben lassen.
[Bilder]
Heilig's Blechle... (⊙_⊙)Moin,
Nachdem ich heute Mal wieder bei meinem neuen Lieblingskunden war möchte ich euch dann doch Mal an dem Setup teilhaben lassen.
[Bilder]
Wir haben uns nun insofern geeinigt als das die analogen Kameras inkl. Server wegkommen und dafür pro Raum erstmal jeweils 1 IP Kamera installiert wird die auf einem QNAP Nas speichert. Der Speicherplatz ist dort völlig übertrieben und eine Begründung weshalb das so ist gibt es nicht. Pro Tag/Raum entstehen aktuell ca. 3TB, macht bei 4 Säälen 12 und bei einer Speicherdauer von 7Tagen hätte die Hälfte gereicht, vorausgesetzt jeder Raum ständig belegt.
Gute Idee:
Hier wird man ja hinsichtlich SOftware und Kamers fündig:
https://www.qnap.com/de-de/software/surveillance-station
https://www.qnap.com/de-de/compatibility-surveillance/
https://software.qnap.com/surveillance-station.html
Die Frage ist, ob es am Ende wirklich 3TB pro Raum/ Tag sein werden.
Welche Auflösung wird benötigt? FHD/ 4K oder doch eher weniger?
Müssen die Videos mit 24FPS aufgezeichnet werden, oder reicht auch 0,5 - 1FPS ?
Das würde den Speicherbedarf ja deutlich reduzieren.
Eine Frage bleibt mir dennoch, kann ich Platten die in einem HW RAID1 saßen direkt am PC Lesen?
Meiner Erfahrung nach geht das. Die Daten werden ja quasi nur gespiegelt. Bei RAID 5 (als Beispiel) ist das nicht so ganz trivial.Optimal wäre es aber: Platte per DD(Rescue) virtualisieren und dann mal "experimentieren" - oder die Daten direkt vom aktuellen System wegkopieren.
MFG
CrunkFX
CrunkFX
Gruß
em-pie
Moin,
was heisst denn mit 8TB Pro NAS auskommen?
Ich würde da EIN NAS für alle Kameras hinstellen und ggf. ein zweites (weniger Leistungsstarkes) fürs Backup.
Das NAS dann so wählen, dass es a) ausreichend Bays hat und/ oder b) via eSATA erweitert werden kann.
An HDDs mangelt es dir ja tatsächlich nicht
Bei 5 HDDs, je 8TB hast du bei einem RAID 5 schon mal 32TB Platz oder 24TB, wenn du eine Hotspare einsetzen willst
was heisst denn mit 8TB Pro NAS auskommen?
Ich würde da EIN NAS für alle Kameras hinstellen und ggf. ein zweites (weniger Leistungsstarkes) fürs Backup.
Das NAS dann so wählen, dass es a) ausreichend Bays hat und/ oder b) via eSATA erweitert werden kann.
An HDDs mangelt es dir ja tatsächlich nicht
Bei 5 HDDs, je 8TB hast du bei einem RAID 5 schon mal 32TB Platz oder 24TB, wenn du eine Hotspare einsetzen willst
Zitat von @em-pie:
Ich würde da EIN NAS für alle Kameras hinstellen und ggf. ein zweites (weniger Leistungsstarkes) fürs Backup.
Das NAS dann so wählen, dass es a) ausreichend Bays hat und/ oder b) via eSATA erweitert werden kann.
An HDDs mangelt es dir ja tatsächlich nicht
Bei 5 HDDs, je 8TB hast du bei einem RAID 5 schon mal 32TB Platz oder 24TB, wenn du eine Hotspare einsetzen willst
Ich würde da EIN NAS für alle Kameras hinstellen und ggf. ein zweites (weniger Leistungsstarkes) fürs Backup.
Das NAS dann so wählen, dass es a) ausreichend Bays hat und/ oder b) via eSATA erweitert werden kann.
An HDDs mangelt es dir ja tatsächlich nicht
Bei 5 HDDs, je 8TB hast du bei einem RAID 5 schon mal 32TB Platz oder 24TB, wenn du eine Hotspare einsetzen willst
Das ist hier die einzig vernünftige Empfehlung.
Die Bilder anzusehen macht einem Angst und Bange. Was da an Netzteilen vorhanden ist und was passiert, wenn dir eines oder mehrere davon flöten gehen?
Kaufe dir ein großes Synology oder QNAP NAS. Damit fährst du deutlich seriöser an der Stelle. Definitiv auch über einen Schrank nachdenken, damit das da nicht aussieht wie: "Ist das Kunst oder kann das weg?"
Gruß
Marc
Mit einem 4Bay-Nas wirst du nicht weit kommen. Und beim Thema "Preis" begibst du dich aufs Glatteis. Kosten und Nutzen hast du ja bereits beim Ex-Dienstleister deines Kunden montiert.
Gruß
C.C.
Gruß
C.C.
Zitat von @148656:
Mit einem 4Bay-Nas wirst du nicht weit kommen. Und beim Thema "Preis" begibst du dich aufs Glatteis. Kosten und Nutzen hast du ja bereits beim Ex-Dienstleister deines Kunden montiert.
Mit einem 4Bay-Nas wirst du nicht weit kommen. Und beim Thema "Preis" begibst du dich aufs Glatteis. Kosten und Nutzen hast du ja bereits beim Ex-Dienstleister deines Kunden montiert.
Absolut korrekt.
Stell dich auf eine hohe, vierstellige Summe ein für das was es können soll.
Beispielsweise das Leergehäuse des Synology RS4021xs kostet schon mal über 5,5K.
https://geizhals.de/synology-rackstation-rs4021xs-a2466139.html
Denn die Anforderungen bekommst du nur mit sehr großen Platten in wenigen oder großen Platten in vielen Schächten abgedeckt.
Gruß
Marc
Zitat von @radiogugu:
Stell dich auf eine hohe, vierstellige Summe ein für das was es können soll.
Beispielsweise das Leergehäuse des Synology RS4021xs kostet schon mal über 5,5K.
https://geizhals.de/synology-rackstation-rs4021xs-a2466139.html
Das finde ich wiederum arg übertrieben. Erstmal muss es kein Rack sein, da steht ja jetzt noch nicht mal ein Rack, da kann man auch ein Standgehäuse nehmen. Dann braucht man ja auch nicht mehr so viel Platz, wie viel genau muss natürlich ermittelt werden und Ausbaufähig sein. Aber 8 oder 12 Bay Standgehäuse gibt's auch für 1000 Euro problemlos.Stell dich auf eine hohe, vierstellige Summe ein für das was es können soll.
Beispielsweise das Leergehäuse des Synology RS4021xs kostet schon mal über 5,5K.
https://geizhals.de/synology-rackstation-rs4021xs-a2466139.html
Bitte auch nicht viele große HDDs in einen RAID 5 oder 6 aufnehmen. Rauscht eine Platte ab müssen alle! Platten alle Daten auslesen für den Restore. Die Wahrscheinlichkeit eines zweiten Defekts während des Rebuilds steigt dann enorm. Dann lieber 2x RAID5 mit global Hot-Spare.