Interface breakout + PortChannel

[roracz]

Hej, natknąłem się na taką konfigurację na Nexus 6004 + N6004-M12Q

Kod: Zaznacz cały

N6004# show running-config |in breakout
interface breakout slot 2 port 1-9 map 10g-4x

N6004# show running-config interface | beg Ethernet2/4
interface Ethernet2/4/1
  description FEX_168
  switchport mode fex-fabric
  fex associate 168
  channel-group 168

interface Ethernet2/4/2
  description FEX_168
  switchport mode fex-fabric
  fex associate 168
  channel-group 168

interface Ethernet2/4/3
  description FEX_168
  switchport mode fex-fabric
  fex associate 168
  channel-group 168

interface Ethernet2/4/4
  description FEX_168
  switchport mode fex-fabric
  fex associate 168
  channel-group 168

Pytanie - z jaką prędkością pracuje Po168 ?

Kod: Zaznacz cały

N6004# show int po168
port-channel168 is up
 vPC Status: Up, vPC number: 168
  Hardware: Port-Channel, address: 5ca4.8a0e.642c (bia 5ca4.8a0e.642c)
  Description: FEX_168
  MTU 1500 bytes, BW 40000000 Kbit, DLY 10 usec
  reliability 255/255, txload 1/255, rxload 1/255
  Encapsulation ARPA
  Port mode is fex-fabric
  full-duplex, 10 Gb/s
  Input flow-control is off, output flow-control is off
  Switchport monitor is off
  EtherType is 0x8100
  Members in this channel: Eth2/4/1, Eth2/4/2, Eth2/4/3, Eth2/4/4

[martino76]

Hej, natknąłem się na taką konfigurację na Nexus 6004 + N6004-M12Q
N6004# show running-config |in breakout
interface breakout slot 2 port 1-9 map 10g-4x

Masz ustawione porty w slot 2 1-9 jako 10G wiec port-channel bedzie mial 40G.

[EDIT] zerknij na link

Jesli chcialbys uzywac ich jako 40 to musisz zrobic

Kod: Zaznacz cały

no interface breakout slot 2 port 1-9 map 10g-4x

Pozdro,

[roracz]

Jak działa i po do czego służy breakout już wiem.

Zastanawiam się nad sensem tej konfiguracji.

Z nexusami nie miałem za dużo do czynienia, rozumiem że wynik show int po168:

Kod: Zaznacz cały

full-duplex, 10 Gb/s

nie oznacza że pracuje on na 10G? A zapis

Kod: Zaznacz cały

BW 40000000 Kbit

mówi nam że mamy 40Gb?

[martino76]

Jak działa i po do czego służy breakout już wiem.

Zastanawiam się nad sensem tej konfiguracji.

Z nexusami nie miałem za dużo do czynienia, rozumiem że wynik show int po168:

Kod: Zaznacz cały

full-duplex, 10 Gb/s

nie oznacza że pracuje on na 10G? A zapis

Kod: Zaznacz cały

BW 40000000 Kbit

mówi nam że mamy 40Gb?

Jeśli chodzi o output z port-channel gdzie masz full-duplex, 10 Gb/s jest to prędkość jaka jest ustawiona na fizycznym linku, a BW jest przypisany do interfejsu logicznego, którym jest port-channel i jest suma ilości fizycznych interfejsow w port-channel w twoim przypadku tak to 40Gb/s

Pamiętaj o tym, ze port-channel zapewnia redundancje oraz load balancing. Pojedynczy IP flow nigdy nie będzie większy niż prędkość fizycznego interfejsu w twoim przypadku to 10Gb/s.

Pozdro,

[roracz]

z tymi ograniczeniami per flow to też wiem. g
to teraz, dodam, że do tego portu jest wstawione SFP (przez adapter QSFP). Zonk ?

[martino76]

z tymi ograniczeniami per flow to też wiem. g
to teraz, dodam, że do tego portu jest wstawione SFP (przez adapter QSFP). Zonk ?

I co z tego ze jest wstawiony SFP o czym ma to świadczyć, bo nie bardzo rozumiem?

Masz QSFP które są ustawione full duplex, 10Gb/s a to ze mogą obsługiwać 40Gb/s to już inna sprawa. Jeśli nie jesteś w stanie tego zrozumieć, to ja już ci nie pomogę

Pozdro,

[roracz]

No bo cały portchannel jest de facto na jednym fizycznym porcie, który normalnie obsługuje 40Gb.
Został podzielony na 4x10Gb.
Następnie te 4x10G, agregujemy z powrotem do 40Gb.
A do portu zapinamy SFP/SFP+ (nie jestem pewien co tam siedzi).

Więc ja się zastanawiam "co ja paczę", co autor miał na myśli i jaką prędkość ten PortChannel ma. Rozumiem że jakbym zapiął na tym normalne QSFP to miałbym normalnie 40Gb (z pominięciem ograniczenia per-flow o którym wspomniałeś)?

Jeśli tak by było, to ma to sens - można zrobić breakout całej grupy portów, a tam gdzie trzeba 'odzyskać' 40Gb możemy to zrobić przez zrobienie PortChannela.

[martino76]

No bo cały portchannel jest de facto na jednym fizycznym porcie, który normalnie obsługuje 40Gb.
Został podzielony na 4x10Gb.
Następnie te 4x10G, agregujemy z powrotem do 40Gb.
A do portu zapinamy SFP/SFP+ (nie jestem pewien co tam siedzi).

Więc ja się zastanawiam "co ja paczę", co autor miał na myśli i jaką prędkość ten PortChannel ma. Rozumiem że jakbym zapiął na tym normalne QSFP to miałbym normalnie 40Gb (z pominięciem ograniczenia per-flow o którym wspomniałeś)?

Jeśli tak by było, to ma to sens - można zrobić breakout całej grupy portów, a tam gdzie trzeba 'odzyskać' 40Gb możemy to zrobić przez zrobienie PortChannela.

Nie wiem co autor ma w głowie widocznie stwierdził, ze nie potrzeba mu 12 portów 40G i pierwsze 9 z nich zamienił na 10G co dało mu 36 portów 10G.

Pierwsze 4 porty później wrzucił w PO co nie zmienia faktu, ze aggregate BW jest 40G a kazdy memeber port ma fizycznie 10G, dodatkowo zostało mu 32 porty 10G do wykorzystania

Pozdro,

[krisiasty]

No bo cały portchannel jest de facto na jednym fizycznym porcie, który normalnie obsługuje 40Gb.
Został podzielony na 4x10Gb.
Następnie te 4x10G, agregujemy z powrotem do 40Gb.
A do portu zapinamy SFP/SFP+ (nie jestem pewien co tam siedzi).

Więc ja się zastanawiam "co ja paczę", co autor miał na myśli i jaką prędkość ten PortChannel ma. Rozumiem że jakbym zapiął na tym normalne QSFP to miałbym normalnie 40Gb (z pominięciem ograniczenia per-flow o którym wspomniałeś)?

Jeśli tak by było, to ma to sens - można zrobić breakout całej grupy portów, a tam gdzie trzeba 'odzyskać' 40Gb możemy to zrobić przez zrobienie PortChannela.

a może po prostu fex który jest na drugim końcu tego linka ma tylko porty 10GE?
co tam konkretnie masz zapięte?

[roracz]

No i na to czekałem zaślepiony swoją teorią którą chciałem sam sobie udowodnić nie pomyślałem o najprostszym rozwiązaniu czyli drugiej końcówce... Rzeczywiście jest tam FEX N2K-C2232PP-10GE...
Czyli użyty jest kabel breakout "QSFP to Four SFP+", a nie żadne SFP...
Teraz mi się wszystko zgadza...

To teraz pytanie:
Chciałbym połączyć 2 takie PortChannele na 2 Nexusach. Czy zadziała to po połączeniu zwykłym kablem QSFP?

[krisiasty]

To teraz pytanie:
Chciałbym połączyć 2 takie PortChannele na 2 Nexusach. Czy zadziała to po połączeniu zwykłym kablem QSFP?

może jestem już za stary, albo po prostu przemęczony, ale nie łapię co co konkretnie pytasz?
chcesz spiąć dwa nexusy ze sobą kablem breakout QSFP-to-4xSFP+, czy QSFP-QSFP na portach gdzie masz skonfigurowany breakout?

[roracz]

QSFP-QSFP. na portach breakout.

[krisiasty]

QSFP-QSFP. na portach breakout.

pomijając sens takiego rozwiązania, to nie widzę powodu dla którego miałoby nie zadziałać, aczkolwiek nigdy nie testowałem w praktyce.

chyba że masz na myśli użycie wkładek/kabli breakout innych producentów które np. zamienią ci QSFP na 4x LC duplex, to chcesz przepuścić przez jakieś path-panele i spowrotem zagregować analogicznym kablem do QSFP - też powinno zadziałać o ile nie pomieszasz kolejności włókien.

mamy instalację nexusów 3172tq ze standardową wkładką qsfp i stykiem mpo12 do której mam podpięty zewnętrzny patch-panel który rozszywa mi mpo12 na 6x duplex lc i z tego robię normalnie 4x 10ge (dwie pary są nieużywane) - działa.

jeszcze jedno: przejrzyj sobie ten dokument - jest tam kilka ciekawych scenariuszy opisanych.

[horac]

No i na to czekałem zaślepiony swoją teorią którą chciałem sam sobie udowodnić nie pomyślałem o najprostszym rozwiązaniu czyli drugiej końcówce... Rzeczywiście jest tam FEX N2K-C2232PP-10GE...
Czyli użyty jest kabel breakout "QSFP to Four SFP+", a nie żadne SFP...
Teraz mi się wszystko zgadza...

To teraz pytanie:
Chciałbym połączyć 2 takie PortChannele na 2 Nexusach. Czy zadziała to po połączeniu zwykłym kablem QSFP?

nie lepiej ci w ogole uzyc wkladek 10Gbps FET ? Wkladasz 4 wkladki w uplinki FEXa i po sprawie a i taniej niz QSFP

[michal_basta]

nie lepiej ci w ogole uzyc wkladek 10Gbps FET ? Wkladasz 4 wkladki w uplinki FEXa i po sprawie a i taniej niz QSFP

I do czego te FETy podlaczymy w 6004?