pharaun
Goto Top

Intel-E810 QSFP28 to Mikrotik QSPF+ mit 40Gbit Verbindung

Hallo Zusammen,

wir haben folgende Situation:

Wir haben einen Server mit einer Intel E810-CQDA2.
Diese Karte hat 2xQSFP28 Ports.
In den Ports sind die folgenden Module verbaut: 36281 ( https://www.fs.com/products/36281.html )

Auf der Gegenseite haben wir einen Mikrotik Switch CRS326-24S+2Q+RM ( https://mikrotik.com/product/crs326_24s_2q_rm ).
Dieser hat 2xQSFP+ Ports. Verbaut sind dort folgende Module: 84681 ( https://www.fs.com/products/84681.html )

Verbunden sind die Ports mit folgendem Kabel: 130658 ( https://www.fs.com/products/130658.html )

Dir Firmware der Intel Netwerkkarte am Server hat die aktuellste Firmware (4.60).

Unser Problem ist nun, dass wir nur 10G als Verbindung bekommen, und nicht 40G.

Kann einer sagen, ob dies mit der Intel Karte möglich ist? Wir finden dort keine Möglichkeit, diese auf 40G einzustellen. Braucht es dafür DAC Kabel ?

Oder benötigen wir spezielle Treiber für die Intel Karte?

Über jede Hilfe wären wir dankbar!

Content-ID: 669581

Url: https://administrator.de/contentid/669581

Ausgedruckt am: 18.11.2024 um 15:11 Uhr

aqui
Lösung aqui 18.11.2024 aktualisiert um 16:14:05 Uhr
Goto Top
Braucht es dafür DAC Kabel ?
Sehr wahrscheinlich nicht.
Alle diese 40G SR4 Optiken sind Breakout fähig.
https://www.cisco.com/c/en/us/products/collateral/interfaces-modules/tra ...
D.h. wenn das entsprechende Endgerät es supportet kann man so einen 40G SR4 Port in den Breakout Mode versetzen was dann 4 separate 10G Ports erzeugt. Auf dem Switch z.B. um mit einem 40G Port reine 10G Endgeräte wie Server/Switches etc. zu versorgen.
Es ist anzunehmen das einer deiner Endgeräte die QSFP Optik in den Breakout Mode versetzt und so nur 10G aktiviert. Du musst also herausfinden wer da der Verursacher ist. Mikrotik scheidet da aus da sie keinen Breakout Mode supporten.
Das kannst du auch temporär einmal selber testen indem du im Mikrotik mal ein 40G Loop steckst über beide 40G Ports. RSTP verhindert hier Böses aber du kannst über den Port Status sehen ob die MT Switchports physisch einen 40G Port herstellen. Das verifiziert das Kabel und QSFP Optiken OK sind.
Der Mikrotik macht übrigens kein Vendor Checking so das hier auch alle anderen QSFP SR4 Optiken von der Stange rennen wie z.B. dieser hier. 😉

Vermutlich ist es die Intel Seite wo du im Adapter Setup einmal checken musst ob dort ggf. Breakout aktiviert ist die dann 4mal 10G Ports aktiviert. Intel erwähnt dazu ein "Port Configuration Tool":
https://www.intel.com/content/www/us/en/download/19436/ethernet-port-con ...
Aktelle Treiber auf der Intel Seite:
https://www.intel.de/content/www/de/de/products/sku/192558/intel-etherne ...

Alternative aber teurer ist moderne MMF BiDi QSFP Optiken zu verwenden die mit klassischem Duplex LC Patchkabeln statt MTP funktionieren und kein Breakout kennen.
Pharaun
Lösung Pharaun 18.11.2024 um 16:11:42 Uhr
Goto Top
Hi aqui,

Vielen Dank für die schnelle Antwort.

Ich hätte vielleicht noch dazusagen sollen, dass wir ohne Anpassung am Mikrotik keinen Link bekommen.
Nur wenn dort das erste Interface des QSFP Ports manuell auf 10G einstellen, anstatt auto Negotiation, bekommen wir diesen.

Deinen Tipp mit dem Breakout Modus hat dazu geführt, dass ich mich mehr mit der Intel Seite beschäftigt habe.

Nachdem das Configuration Tool wenig gebracht hat, habe ich nochmal im Bios alles geprüft.
Dort kann man unter NIC Configuration dann die "Port Option" konfigurieren mit "2x4x10G".
Kaum war das umgestellt hat man sowohl im BIOS als auch im Windows dann logischerweise 4 Interfaces pro NIC Port.

Damit funktioniert das Ganze nun so wie es soll.

Vielen Dank für die Grundlegende Info dass es gehen müsste und dem Schubs in die richtige Richtung!
aqui
aqui 18.11.2024 aktualisiert um 16:21:07 Uhr
Goto Top
Glückwunsch! 👏 👍
Nur wenn dort das erste Interface des QSFP Ports manuell auf 10G einstellen, anstatt auto Negotiation, bekommen wir diesen.
Bei (Q)SFP Ports am Mikrotik größer 1G sollte man generell nie irgendwelche Negotiation wählen sondern den Port immer auf feste Speed und Duplex Werte stellen die zur im Port verwendeten Optik passen. (Q)SFP Optiken supporten bekanntlich keine Autonegotiation! Ggf. fixt das schon das Problem bei dir?!
Eine einfache SR4 QSFP Optik mit MTP wie die oben genannte rennt hier fehlerlos in einem Mikrotik zu Cisco und Ruckus ICX Switches. face-wink