EMC 5400 - mirror view

Problemy i dyskusje z zakresu rozwiązań i technologii Data Center

Moderatorzy: mikrobi, aron, garfield, gangrena, Seba

Wiadomość
Autor
piter1789
wannabe
wannabe
Posty: 175
Rejestracja: 01 wrz 2014, 10:46

EMC 5400 - mirror view

#1

#1 Post autor: piter1789 » 30 sie 2016, 18:33

Witam,

Czy spotkał się ktoś z tematem:
EMC 5400 i Cisco Nexus serii 5000.
Dwie lokalizacje spięte bezpośrednio po 10G. I chciałem uruchomić mirror view.
Komunikacja pomiędzy EMC a Nexus po FCoE.

Czy próbował ktoś tego?

Awatar użytkownika
konradrz
CCIE
CCIE
Posty: 333
Rejestracja: 23 sty 2008, 14:21
Lokalizacja: Singapore, SG
Kontakt:

Re: EMC 5400 - mirror view

#2

#2 Post autor: konradrz » 31 sie 2016, 06:43

Czołem,
piter1789 pisze:Dwie lokalizacje spięte bezpośrednio po 10G. I chciałem uruchomić mirror view.
Komunikacja pomiędzy EMC a Nexus po FCoE.
Czy próbował ktoś tego?
No więc tak -- tak, ktoś tego próbował :)

Mirrorview -> Clariion. (ważne info, serio) Oh, teraz się VNX nazywa.
Clariion-5k po FCoE, OK -- ale co między sajtami jest (mówisz 10G, ale co - Eth? fiber?)? Czyste FC? FCoE? Jaki dystans? Jakie 5k (są DUŻE różnice)? Jaki soft do Clar^WVNXa?

Piter, daj detale.

piter1789
wannabe
wannabe
Posty: 175
Rejestracja: 01 wrz 2014, 10:46

Re: EMC 5400 - mirror view

#3

#3 Post autor: piter1789 » 31 sie 2016, 20:54

Jeśli chodzi o połączenia pomiędzy Nexus to jest Ethernet(po światełku:p) i na nim FCoE ;)

Nexus 5672UP

Jeśli chodzi o EMC 5400 to soft w wersji: 05.33.008.5.119
jeśli chodzi o połączenie pomiędzy Nexus to około 10-12 km.

Awatar użytkownika
konradrz
CCIE
CCIE
Posty: 333
Rejestracja: 23 sty 2008, 14:21
Lokalizacja: Singapore, SG
Kontakt:

Re: EMC 5400 - mirror view

#4

#4 Post autor: konradrz » 01 wrz 2016, 10:58

piter1789 pisze:Jeśli chodzi o połączenia pomiędzy Nexus to jest Ethernet(po światełku:p) i na nim FCoE ;)
Nie do końca rozumiem. Masz dark fiber, czy jakiś operator Ci udostępnił port ethernetowy 10g?
Jeśli to pierwsze, to czemu nie 40Gbit (z laserami ER), skoro masz porty?
Jeśli to drugie, upewnij się że operator wspiera jumbo frames (min MTU 2300) i DCB (data center bridging).
piter1789 pisze:[Nexus 5672UP (...) jeśli chodzi o połączenie pomiędzy Nexus to około 10-12 km.
Zadziałać - zadziała, ale będziesz musiał stjunować (co za słowo heh) bufory. Bez tego nie pójdzie.
FCoE nie przepada za długimi dystansami (delikatnie powiedziane), spodziewaj się dużej ilości PFC on/off. (coś jak pauza ethernetowa; dlatego właśnie DCB jest wymagane)
Co do buffer-tuningu, ustaw wielgachne bufory dla interfejsów VE (czyli portów między N56), wcale niegłupie też by duże bufory były dla interfejsów VF (tych idących do maciorki), bo MirrorView lubi burstować.
Dla osiągnięcia maksymalnego bufora, umieść VNX w innym UPC (Unified Port Controller) niż linki między sajtami. Bo wiszpan, ten UPC ma 25MB bufora (16MB ingress, 9MB egress) współdzielonego między portami. Porty 1-12 to jeden UPC, 13-24 to kolejny UPC itd. O, dam Ci obrazek.

Obrazek i Obrazek
piter1789 pisze:Jeśli chodzi o EMC 5400 to soft w wersji: 05.33.008.5.119
Pogadaj ze swoim EMC-partnerem, czy nie wiedzą o jakichś bugach w implementacji, czy nie lepiej by było zaplanować apgrejd.

piter1789
wannabe
wannabe
Posty: 175
Rejestracja: 01 wrz 2014, 10:46

Re: EMC 5400 - mirror view

#5

#5 Post autor: piter1789 » 01 wrz 2016, 11:35

konradrz pisze:
piter1789 pisze:Jeśli chodzi o połączenia pomiędzy Nexus to jest Ethernet(po światełku:p) i na nim FCoE ;)
Nie do końca rozumiem. Masz dark fiber, czy jakiś operator Ci udostępnił port ethernetowy 10g?
Jeśli to pierwsze, to czemu nie 40Gbit (z laserami ER), skoro masz porty?
Jeśli to drugie, upewnij się że operator wspiera jumbo frames (min MTU 2300) i DCB (data center bridging).
Hehe, mam swoje światełko;) bo kasy nie dali na wkładki;)
Z tymi u góry ciężko się rozmawia;)

piter1789 pisze:[Nexus 5672UP (...) jeśli chodzi o połączenie pomiędzy Nexus to około 10-12 km.
Zadziałać - zadziała, ale będziesz musiał stjunować (co za słowo heh) bufory. Bez tego nie pójdzie.
FCoE nie przepada za długimi dystansami (delikatnie powiedziane), spodziewaj się dużej ilości PFC on/off. (coś jak pauza ethernetowa; dlatego właśnie DCB jest wymagane)
Co do buffer-tuningu, ustaw wielgachne bufory dla interfejsów VE (czyli portów między N56), wcale niegłupie też by duże bufory były dla interfejsów VF (tych idących do maciorki), bo MirrorView lubi burstować.
Dla osiągnięcia maksymalnego bufora, umieść VNX w innym UPC (Unified Port Controller) niż linki między sajtami. Bo wiszpan, ten UPC ma 25MB bufora (16MB ingress, 9MB egress) współdzielonego między portami. Porty 1-12 to jeden UPC, 13-24 to kolejny UPC itd. O, dam Ci obrazek.

Obrazek i Obrazek
sprawdzę konfig i dam znać jak to wygląda u mnie.
piter1789 pisze:Jeśli chodzi o EMC 5400 to soft w wersji: 05.33.008.5.119
Pogadaj ze swoim EMC-partnerem, czy nie wiedzą o jakichś bugach w implementacji, czy nie lepiej by było zaplanować apgrejd.

piter1789
wannabe
wannabe
Posty: 175
Rejestracja: 01 wrz 2014, 10:46

Re: EMC 5400 - mirror view

#6

#6 Post autor: piter1789 » 01 wrz 2016, 21:14

Ale czy FCoE można na VSAN zrobić czy musi być na fizycznym porcie? w sensie samej replikacji ;)

Awatar użytkownika
konradrz
CCIE
CCIE
Posty: 333
Rejestracja: 23 sty 2008, 14:21
Lokalizacja: Singapore, SG
Kontakt:

Re: EMC 5400 - mirror view

#7

#7 Post autor: konradrz » 02 wrz 2016, 16:23

piter1789 pisze:Ale czy FCoE można na VSAN zrobić
Nnnnnie rozumiem pytania.
Musisz mieć i VSAN skonfigurowany, i konfigurację VE/VF przypiętą do fizycznych interfejsów. A fizyczne interfejsy muszą mieć (ręcznie) ustawione wielgachne bufory, i system musi być odpowiednio skonfigurowany pod MTU i FCoE.

Jeśli nigdy tego nie robiłeś, może pobaw się najpierw w labie.

martino76
CCIE
CCIE
Posty: 807
Rejestracja: 17 gru 2010, 15:23
Lokalizacja: Dublin

Re: EMC 5400 - mirror view

#8

#8 Post autor: martino76 » 12 wrz 2016, 22:46

Witam,

To ja się podepnę pod temat. Jaki jest maksymalny dystans dla FCoE platforma N5600. Widziałem jakąś prezentacje z Cisco Live i mówią o 3km. Czy jest to dalej limit dla tej platformy, czy może się cos zmieniło ostatnio w zależności od zastosowanego SFP?

Pozdro,

Awatar użytkownika
konradrz
CCIE
CCIE
Posty: 333
Rejestracja: 23 sty 2008, 14:21
Lokalizacja: Singapore, SG
Kontakt:

Re: EMC 5400 - mirror view

#9

#9 Post autor: konradrz » 12 wrz 2016, 23:28

martino76 pisze:Jaki jest maksymalny dystans dla FCoE platforma N5600.
Wg tego dokumentu: "PFC link distance support: 20 km".

martino76
CCIE
CCIE
Posty: 807
Rejestracja: 17 gru 2010, 15:23
Lokalizacja: Dublin

Re: EMC 5400 - mirror view

#10

#10 Post autor: martino76 » 13 wrz 2016, 10:04

konradrz pisze:
martino76 pisze:Jaki jest maksymalny dystans dla FCoE platforma N5600.
Wg tego dokumentu: "PFC link distance support: 20 km".
Konrad to rozumiem, ze z odpowiednimi wkładkami SFP oraz SMF można puścić FCoE do 20km. Czy trzeba, modyfikować bufory jak to ma miejsce w p[przypadku natywnego FC?

Pozdro,

Awatar użytkownika
konradrz
CCIE
CCIE
Posty: 333
Rejestracja: 23 sty 2008, 14:21
Lokalizacja: Singapore, SG
Kontakt:

Re: EMC 5400 - mirror view

#11

#11 Post autor: konradrz » 14 wrz 2016, 09:04

martino76 pisze:Czy trzeba, modyfikować bufory jak to ma miejsce w p[przypadku natywnego FC?
Trzeba. I ze względu na inną architekturę wewnętrzną, robi się trochę inaczej niż z 55xx -- też trzeba system queuing zmienić (inne - większe - wartości), dodatkowo jeszcze wypada zmienić ustawienia portu VE (żeby więcej dedykowanego bufora, a mniej shared).

ODPOWIEDZ