100G lik umurtqa{1}}barg matosi zamonaviy maʼlumotlar markazida 25G serverlari, 100G yuqoriga ulanishlari, saqlash klasterlari va sharq{4}}gʻarbiy{5}}ogʻir ish yuklarini ulashning eng ishonchli usullaridan biridir. QSFP28 ning jozibadorligi uning moslashuvchanligidir: bitta port mahalliy 100G havolasini olib yurishi yoki to'rtta 25G server ulanishiga bo'linishi mumkin, shuning uchun bitta kalit ham kirish chekkasiga, ham mato yadrosiga xizmat qilishi mumkin.
Tez o'zgartirishlar oson qismdir. 100G dizayni xarid buyurtmasidan oldin qabul qilingan qarorlar asosida yashaydi yoki o'ladi: har bir port qanday taqsimlanadi, normal va nosozlik sharoitida ortiqcha obuna koeffitsienti qanday ko'rinadi, qaysi optika haqiqiy kabel liniyalariga mos keladi, bu optika qancha issiqlik qo'shadi va forkliftni yangilamasdan mato 400G gacha o'sishi mumkinmi.
Ushbu qoʻllanma tarmoq va infratuzilma jamoalari uchun-neytral rejalashtirish boʻyicha maʼlumotnoma hisoblanadi. Quyidagi raqamlar joriy IEEE 802.3 Ethernet spetsifikatsiyalari va tegishli optik koʻp{3}}manba kelishuvlariga mos keladi, lekin har bir kalit va qabul qiluvchi qurilmaning oʻz maʼlumotlar jadvaliga ega, shuning uchun siz sotib olgan uskunaning aniq raqamlarini tasdiqlang.
Ushbu qo'llanmadagi misollarni qanday o'qish kerak.Aksi koʻrsatilmagan boʻlsa, ular-har biri bittadan 25G NIC, har bir bargda 48 ta xost porti, 100G barg-umurtqa pogʻonasiga ulanishi, har bir barg umurtqa pogʻonasiga ulanadigan toʻliq toʻr va optika talab qilgan joylarda xatoliklarni toʻgʻrilash funksiyasi yoqilgan-yakka uyali serverlarni nazarda tutadi. Ikkita{7}}homing, tezroq NIClar yoki turli portlar soni keyingi har bir raqamni o'zgartiradi.
100G orqa miya-barg tarmog'i nima?
Spine{0}}barg - bu barg kalitlari va umurtqa pog'onasi kalitlari asosida qurilgan ikki-darajali ma'lumot markazi arxitekturasidir. Barg kalitlari har bir tokchaning tepasida joylashgan va serverga qaragan-portlar hamda umurtqa pog‘onasiga yuqoriga havolalar beradi. Orqa miya kalitlari yuqori{5}}tezkor magistralni tashkil qiladi. Har bir barg har bir umurtqa pog'onasiga ulanadi, shuning uchun tokchalar orasidagi harakat bargdan umurtqaga bargni teng uzunlikdagi-yo'l bo'ylab harakatlantiradi.
Dizayn mashhur, chunki u quyidagilarni taqdim etadi:
- Har qanday ikkita raf o'rtasida bashorat qilinadigan, teng yo'l uzunligi
- Sharqiy{0}}gʻarbiy yoʻnalishdagi tirbandlik uchun mahalliy yordam
- Barcha ulanishlar ECMP orqali faol bo'ladi, o'rniga oraliq daraxt bilan bloklanadi
- Oddiy gorizontal masshtablash - portlar uchun barglar qo'shing, sig'im uchun tikanlar qo'shing
100G matoda barg{1}}to{2}}umurtqa pogʻonasi 100G tezlikda ishlaydi, serverga qaragan portlar esa ish yukiga qarab-10G, 25G, 50G yoki 100G da ishlaydi. Bugungi kunda 100G uplinks bilan 25G kirish eng keng tarqalgan korporativ birikma hisoblanadi.
Jismoniy dizayn va mantiqiy dizayn
"Tarmoq dizayni" birlashtirish oson bo'lgan ikkita qatlamni o'z ichiga oladi. Ushbu qoʻllanmada asosiy eʼtibor jismoniy va sigʻimli qatlam - portlari, optika, ortiqcha obuna, kabellar -ga qaratilgan, chunki siz apparat sotib olayotganda aynan shu narsaga eʼtibor qaratasiz. Ammo mantiqiy qatlam matoning traffikni qanday yo'naltirishini hal qiladi va u bir nechta jismoniy tanlovlarni shakllantiradi.
Jismoniy tomondan o'tirish tugmasi va portni tanlash, NIC tezligi, ortiqcha obuna, optika, kabel, quvvat va sovutish. Mantiqiy tomonda ECMP yuki-yuqoriga havolalarni muvozanatlash; marshrutlangan taglik ustidagi ko'p{2}}ijarachi Layer 2 va Layer 3 uchun BGP EVPN boshqaruv tekisligiga ega VXLAN kabi qoplama; kirish chekkasida MLAG yoki MC-LAG va LACP bilan ikki-homing; va xatolik-domen hajmi. RDMA matolari uchun, shuningdek, quyida koʻrib chiqiladigan -yaqin tarmoqni yaratishingiz kerak. Mantiqiy modelni erta hal qiling, chunki u yuqoriga ulanish soniga ta'sir qiladi, ECMP kengligi uchun qancha tikanlar kerak va barglar MLAG juftlari sifatida joylashtiriladimi yoki yo'qmi.
1 --qadam Server tezligi va ish yukini aniqlang
Optika bilan emas, balki ish yukidan boshlang. Umumiy virtualizatsiya klasteri, saqlash moslamasi va sun'iy intellektni o'rgatuvchi podkastlar har xil ehtiyojlarga ega va to'g'ri dizayn trafikni kuzatib boradi.
100G ulanishga ega 25G serverlari
Aksariyat korporativ va xususiy{0}}bulutli muhitlar uchun 100G barg-to-umurtqaga yuqoriga ulanishi bilan 25G ulanish qulay nuqtadir: NIC, kabel va kommutator xarajatlarini maqbul ushlab turganda 10G dan katta sakrash. Oddiy tuzilma 25G pastga ulanishlarni, 100G yuqoriga ulanishlarni va umumiy hisoblash uchun 2:1 dan 3:1 nisbatini birlashtiradi, kamroq ortiqcha obuna saqlash va kechikish-sezgir darajalari uchun ajratilgan. Bu virtualizatsiya, shaxsiy bulut, veb-darajalar va korporativ ma'lumotlar markazlarining asosiy qismiga mos keladi.
Saqlash, AI va HPC uchun mahalliy 100G
Ba'zi ish yuklari serverga mahalliy 100G kerak: taqsimlangan va NVMe{1}}oF xotirasi, AI va mashina{2}}o'quv mashg'ulotlari, HPC, keng miqyosdagi-tahlil va past-kechikish muddati RDMA. Bu yerda ortiqcha obuna past - boʻlishi kerak, koʻpincha-bloklanmaydi yoki unga yaqin - boʻlishi kerak, chunki muammo nafaqat ovoz balandligida, balki tirbandlik holatidadir.
AI, HPC va RDMA ish yuklari zich, sinxronlangan, barcha{0}}barcha sharqiy{1}}g‘arbiy{2}}trafikni hosil qiladi: ko‘plab tugunlar bir vaqtning o‘zida bir nechta tugunlarga uzatiladi, shuning uchun virtualizatsiya tizimida sizni tejaydigan statistik silliqlash endi qo‘llanilmaydi. Konverged Ethernet (RoCE) orqali RDMA ikkinchi cheklovni qo'shadi, chunki u deyarli yo'qotishsiz to'qimalarni kutadi, chunki amalda bu Priority Flow Control (PFC) va Aniq tiqilib qolish bildirishnomasi (ECN) uchdan oxirigacha sozlangan degan ma'noni anglatadi. Tiklanish ostida ramkalarni tushiradigan mato RoCE ishlashining pasayishini kuzatadi, shuning uchun bu klasterlar odatda 1:1 nisbatda ehtiyotkorlik bilan bufer va tiqilinch konfiguratsiyasi bilan qurilgan.
2 --qadam 100G mato uchun barg va umurtqa pogʻonasini almashtirish portlarini qanday hisoblash mumkin
Portni rejalashtirish umurtqa pog'onasidan emas, balki bargdan boshlanadi. Serverlardan tashqarida ishlash:
- Har bir raf uchun{0}}serverga qaragan portlarni hisoblang.
- Ularning har biri mahalliy 25G, mahalliy 100G yoki ajralish yo‘li ekanligini aniqlang.
- Orqa miya ulanishlari uchun QSFP28 portlarini zaxiralang.
- O'sish, ortiqcha, sinov va almashtirish uchun zaxira portlarni qo'shing.
- Ortiqcha obunani oldindan emas, uzilish tayinlangandan keyin qayta hisoblang.
Serverga qaragan-portlarni sanang
Har bir raf uchun serverlar soni, NIC tezligi, har bir server uchun NIClar, bitta- yoki ikkita-homeed va zarur ehtiyot qismlar. Bitta 25G NICga ega 48 ta serverdan iborat tokchaga 48 ta host port kerak. Bu serverlarni barg juftiga-dual va juftlikdagi kirish portlari soni ikki barobar ortadi.
Yuqoriga ulanish portlarini zaxiralang va ikki barobar-hisobga qarang
Xost portlaridan so'ng, orqa miya uchun QSFP28 portlarini zaxiralang. Bu erda eng keng tarqalgan xato yashiringan: agar bir xil QSFP28 portlari 4x25G uzilishi uchun ishlatilsa, ular endi yuqoriga ulanish sifatida mavjud emas. Rejalashtirishdagi eng katta xato bu 100G yuqoriga ulanishlarni noto'g'ri hisoblash emas, balki uzilish natijasida qolgan ulanish portlarini ortiqcha baholashdir. Ortiqcha obuna matematikasidan oldin uzilishni belgilang yoki siz hisoblagan nisbat fantastikadir.
Ishlangan misol yordam beradi. 48 SFP28 xost portlari va 8 QSFP28 portlari bilan umumiy 1U bargni oling:
| Port guruhi | Rol | Imkoniyat |
|---|---|---|
| 48 x 25G (SFP28) | Yagona{0}}uydagi serverga kirish | 1,200G |
| 6 x 100G (QSFP28) | Orqa miya ko'tarilishi | 600G |
| 2 x 100G (QSFP28) | Zaxiralangan: o'sish, saqlash yoki zaxira | - |
1200G kirish trafigini tashiydigan oltita yuqori ulanish bilan barg 2:1 da ishlaydi va ikkita QSFP28 porti zaxirada qoladi. Boshqa narsalarni o'lchashdan oldin har bir portga elektron jadvalda bitta, aniq rol bering.
Zaxira quvvatni qoldiring
Birinchi kuni har bir portni iste'mol qilmang. Yangi serverlar, qoʻshimcha tikanlar, vaqtinchalik sinov havolalari, muvaffaqiyatsiz-port almashish, kranlarni kuzatish va migratsiya uchun joy zaxiralang. Bir oz foydalanilmagan quvvat qayta loyihalashdan ancha arzon.
3 --qadam Ortiqcha obunani, shu jumladan N-1ni hisoblang
Haddan tashqari obuna bargdagi serverning umumiy oʻtkazish qobiliyatini-umurtqa pogʻonasi bilan yuqoriga ulanishning umumiy oʻtkazish qobiliyati bilan solishtiradi:
Haddan tashqari obuna koeffitsienti=umumiy pastga ulanish oʻtkazish qobiliyati / umumiy yuqoriga ulanish oʻtkazish qobiliyati
Yuqoridagi barg uchun 48 x 25G=1, 200G pastga va 6 x 100G=600G yuqoriga, 1,200 / 600=2:1 beradi. Bu degani, nazariy kirish o‘tkazish qobiliyati yuqoriga ulanish o‘tkazish qobiliyatidan ikki baravar ko‘pdir - odatda umumiy hisoblash uchun yaxshi, bunda serverlar kamdan-kam hollarda bir vaqtning o‘zida liniya tezligida uzatiladi, lekin saqlash, AI, HPC va RDMA uchun haqiqiy cheklov.
Har doim N-1 qutisini tekshiring
Mato normal ishlaganda sog'lom ko'rinishi va nosozlik paytida bo'g'ilib qolishi mumkin. To'rtta umurtqa pog'onasi bo'ylab teng ravishda yoyilgan 100G quvvatga ega bo'lgan bargni ko'rib chiqaylik - umurtqa pog'onasida ikkitadan, jami 800G, shuning uchun 1200G kirish 1,5:1 beradi. Bir umurtqa pog'onasini yo'qotib qo'ying va barg 600G ga ikkita yuqoriga ko'tarilib, uzilish muddati davomida nisbatni 2: 1 ga tushiradi. Agar sizning maqsadingiz "muvaffaqiyatsiz bo'lgan taqdirda ham 2: 1 dan yomon bo'lmagan" bo'lsa, siz 1,5: 1 dan boshlashingiz kerak. Bir umurtqa pog'onasini yoki yuqoriga ulanishni yo'qotgandan keyin ham normal nisbatni, ham N-1 nisbatini hisoblang; ikkinchi raqam - parvarishlash vaqtida tishlaydigan raqam.
Rejalashtirish ish yuki bo'yicha
Umumjahon nisbat yo'q, shuning uchun quyidagilarni standartlar emas, rejalashtirish diapazonlari sifatida ko'rib chiqing va o'lchangan trafik bilan tasdiqlang:
| Ish yuki | Dizayn yo'nalishi |
|---|---|
| AI / HPC / RDMA | 1:1 yoki deyarli bloklanmaydigan- |
| Tarqalgan saqlash | 1:1 dan 2:1 gacha |
| Umumiy virtualizatsiya | 2:1 dan 3:1 gacha |
| Veb/ilova darajalari | 3:1 yoki undan yuqori, agar tirbandlikni oldindan aytish mumkin bo'lsa |
| Dev / sinov | Xarajat{0}}optimallashtirilgan nisbatlar qabul qilinadi |
Yangilashda nisbatni belgilashdan oldin joriy yuqoriga ulanishdan foydalanish, eng yuqori va sharqiy{0}}g‘arb namunalari, xotira oqimlari va zaxira oynalarini ko‘rib chiqing.
4 --qadam QSFP28 optikasi va kabellarini tanlang
QSFP28 100G interfeyslari IEEE 802.3 - tomonidan standartlashtirilgan802.3bm tuzatishLR4 PHY yagona-rejimi bilan birga 100GBASE-SR4 qo‘shildi. Masofa, tola turi, ulagich, quvvat va kalit mosligi bo'yicha optikani tanlang va eng uzoq masofaga sukut bo'yicha qarshilik ko'rsating: sizga kerak bo'lmagan yetib borish odatda sizga kerak bo'lmagan xarajat va quvvatni anglatadi. Modulni oqilona chegara bilan ishlashga moslang.
Qisqa server havolalari uchun DAC va AOC
QSFP28 to'g'ridan-to'g'ri-to'g'ridan-to'g'ri biriktiruvchi mis (DAC) va faol optik kabellar (AOC)-rack va qo'shni-rack ulanishlari uchun amaliydir. Passiv DAC eng kam xarajat va quvvat bilan - bir necha metrga - qisqa sakrashlarga mos keladi, AOC esa foydalanish imkoniyatini kengaytiradi va mis massasi muammoga aylanganda engilroq va moslashuvchan bo'ladi. 25G ulanishi uchun QSFP28-dan 4xgacha bo'lgan SFP28 uzilish DAC yoki AOC kaliti uzilishni qo'llab-quvvatlasa keng tarqalgan.
Qisqa multimodli havolalar uchun 100GBASE-SR4
SR4 100G ni o'tkazadiparallel multimodning sakkiz tolasiMPO/MTP konnektoridan foydalanish, bu esa u -qisqa barg{1}}to{2}}qator ichida umurtqa pogʻonasi yugurish uchun tejamkor tanlovdir. Uning yetib borishi tola darajasiga bog'liq - OM3 da taxminan 70 m va OMda 100 m4 -, shuning uchun siz kutishingiz mumkin bo'lgan masofani bilish to'laydi.OM3, OM4 va OM5 ko'p rejimli tolalarsizning qavatingizda. Rejalashtirishning asosiy cheklovi - bu parallel kabel yotqizish: MPO yamoqlari va polaritesini oldindan ishlab chiqish kerak.
Yagona rejim uchun CWDM4 yoki FR -taxminan 2 km gacha ishlaydi
Qatorlararo, xonalararo-yoki zallararo-bog'lanishlar uchun CWDM4 yoki FR kabi bir-rejimli optika yaxshiroq mos keladi. The100G CWDM4 MSAdupleks LC ulagichi va FEC bilan bir juft-rejimli tolalar orqali 2 km masofani aniqlaydi. Parallel MPO o'rniga dupleks toladan foydalanganligi sababli, CWDM4 va FR optikasi ko'pincha SR4 - ga qaraganda bir{4}}rejimli zavodga toza tushadi va bu masofalar oralig'ida tanlash mumkin.OS1 va OS2 yagona rejimli tolali-sizning yo'qotish byudjetingiz uchun ahamiyatli bo'la boshlaydi. DR kabi qisqaroq{1}}bir rejim variantlari taxminan 500 m masofani qoplaydi, bu yerda sizga kerak bo'lgan narsa shu.
Kampus va DCI uchun 100GBASE-LR4
LR4 uzoq masofali{1}}opsiya boʻlib, u 100Gdupleks yagona rejimli tolali-taxminan 10 km gachakampus, binodan{0}}binoga-yoki maʼlumotlar{2}}markazi{3}}oʻzaro bogʻlanishlari uchun. Uni faqat masofa haqiqatan ham talab qiladigan joyda foydalaning; Uzoq{5}}qisqa ichki-maʼlumotlar markazi-xopslarida uzoq masofali optika matoni yaxshilamasdan, shunchaki xarajat, quvvat va issiqlikni oshiradi.
QSFP28 100G optikasini solishtirish
Jadvalda har bir variant qayerga mos kelishi umumlashtiriladi. Etishmalarni odatiy rejalashtirish raqamlari sifatida ko'rib chiqing va har bir modulning ma'lumotlar varag'ida aniq raqamlar, tolalar darajasi va FEC talablarini tasdiqlang.
| Variant | Media / tola | Ulagich | Oddiy kirish | Qaerga mos keladi |
|---|---|---|---|---|
| QSFP28 DAC (passiv mis) | Twinax mis | Integratsiyalashgan | ~1–3 m | -rack serverida yoki barg-to-barg |
| QSFP28 AOC | Ko'p rejimli (birlashtirilgan) | Integratsiyalashgan | ~30 m gacha | Qo'shni{0}}rack serverlar, qisqa havolalar |
| 100GBASE-SR4 | Parallel multimod, 8 tolali (OM3/OM4) | MPO/MTP | ~70 m OM3 / 100 m OM4 | Qisqa-qator bargi-umurtqa pogʻonasigacha- |
| 100G CWDM4 | Dupleks yagona-rejimi | LC | ~2 km gacha | -qatorlararo / zallararo{1}}yuqoriga havolalar |
| 100GBASE-FR / DR | Dupleks yagona-rejimi | LC | ~500 m (DR) dan ~2 km (FR) | Oʻrtacha bitta{0}}rejim ishlaydi |
| 100 GBASE-LR4 | Dupleks yagona-rejimi | LC | ~10 km gacha | Kampus/bino-to{1}}bino / DCI |
Ishlangan misollar: Kichik, o'rta va katta matolar
Bu rejalar emas, balki soddalashtirilgan rejalashtirish modellari. Orqa miya soni odatda yuqoriga ulanishlarni teng taqsimlash va ECMP kengligini o'rnatish uchun tanlanadi: ikkita umurtqa pog'onasi ortiqcha uchun amaliy minimaldir, to'rttasi N-1 nozikligi va yukning yaxshi tarqalishini beradi va sakkiztasi katta matolarga mos keladi. Barglar soni sizga kerak bo'lgan server portlari bilan o'lchanadi.
Kichik mato
- 8 bargli kalit
- 2 ta orqa miya kaliti
- Har bir barg uchun 48 x 25G server portlari
- Har bir barg uchun 4 x 100G yuqoriga ulanish
- 384 ta yakka{1}}25G server portlari
Har bir barg uchun: 1200G pastga, 400G yuqoriga, shuning uchun 3:1. Umumiy hisoblash uchun ishlaydi, lekin og'ir saqlash yoki AI uchun qattiq. Agar pastroq nisbat kerak bo'lsa, yuqoriga ulanishlarni qo'shing yoki har bir bargga kirishni qisqartiring.
O'rta mato
- 16 bargli kalit
- 4 ta orqa miya kaliti
- Har bir barg uchun 48 x 25G server portlari
- Har bir barg uchun 6 x 100G yuqoriga ulanish
- 768 ta yagona{1}}25G server portlari
Har bir barg uchun: 1200G pastga, 600G yuqoriga, shuning uchun 2:1. Virtualizatsiya va korporativ ish yuklari uchun mustahkam muvozanat va to'rtta umurtqa ECMPni ikkitadan yaxshiroq tarqatadi.
Katta mato
- 32 bargli kalit
- 8 ta orqa miya kaliti
- Har bir barg uchun 48 x 25G server portlari
- Har bir barg uchun 8 x 100G yuqoriga ulanish
- 1536 ta yagona{2}}25G server portlari
Har bir barg: 1200G pastga, 800G yuqoriga, shuning uchun 1,5:1. Ko'proq yuqoriga ulanish bo'sh joy, lekin boshqarish uchun ko'proq optika, tola, narx, quvvat va kabellar. Ushbu miqyosda hujjatlar dizaynning bir qismidir: yorliqlash, port xaritalari, qutblanish, zaxira optika, havo oqimi va monitoring o'rnatishdan oldin rejalashtirilgan bo'lishi kerak.
QSFP28 Breakout Rejalashtirish (100G dan 4x25G gacha)
Breakout QSFP28 dizaynining eng foydali va eng tushunarsiz qismidir. Kommutator, kabel va konfiguratsiya imkon bersa, bitta QSFP28 porti bitta 100G portidan to‘rtta 25G serverni ulab, to‘rtta 25G SFP28 havolasiga bo‘linadi. Yuqori 25G zichlikka muhtoj bo'lganingizda, ko'p QSFP28 portlariga ega bo'lsangiz, har bir server ulanishi narxini kamaytirmoqchi bo'lsangiz yoki QSFP28-dan 4xgacha bo'lgan SFP28 DAC, AOC yoki 25G/100G o'tish davrini yaratmoqchi bo'lsangiz, u o'z o'rnini egallaydi.MTP/MPO uzilish kabellarimasofaga qarab.
Gap shundaki, uzilish QSFP28 portlarini iste'mol qiladi. Agar 32-portli QSFP28 kaliti 4x25G uzilish uchun 16 portni ajratsa, bu 16 port 64 ta serverni qo‘llab-quvvatlaydi, lekin yuqoriga ulanish, saqlash, o‘zaro ulanishlar va zaxira qismlar uchun faqat 16 ta QSFP28 porti qoladi. Asosiy qoida birinchi navbatda uzilish portlarini sanash, keyin yuqoriga ulanish uchun qolgan narsalarni hisoblashdir.
Qabul qilishdan oldin, bir nechta narsalarni tasdiqlang va har bir yugurish a bo'lishi kerakmi yoki yo'qligini erta hal qilingmagistral yoki sindirish moslamasi:
- Qaysi portlar uzilishni qo'llab-quvvatlaydi va portlar guruhlari-cheklovlari bormi?
- Buzilishni yoqish qo'shni portlarni o'chiradimi?
- Switch operatsion tizimi sizga kerakli rejimni qo'llab-quvvatlaydimi?
- Har bir ishga tushirish uchun DAC, AOC yoki uzilish optikasi?
- Barcha to'rtta yo'lak hozir kerakmi yoki faqat keyinmi?
- Buzilish kelajakda mahalliy 100G serverlariga o'tishga qanday ta'sir qiladi?
Quvvat, sovutish va kabelni boshqarish
100G mato o'tkazish qobiliyatidan - ko'proq issiqlik, havo oqimi yuki va kabel zichligini ishlab chiqaradi. Quvvat byudjeti kalit shassilari va ventilyatorlari, QSFP28 optik modullari (va agar foydalanilganda DAC yoki AOC), ortiqcha materiallar, raf{4}}darajali sig'im va o'sish chegarasini qamrab olishi kerak. Sovutish issiq- va sovuq-yo‘lakning joylashishini, old{8}}oldindan{9}}orqaga yoki orqaga-oldindan{11}}to‘g‘ri keladigan havo oqimi, bo‘sh panellar, kabel to‘siqlari, atrof-muhit harorati va modul{12}}harorat monitoringini hisobga olishi kerak, chunki umurtqa pog‘onasi haqiqiy optika bilan to‘la.
Kabellar tez o'zgaradi: 16 bargdan 4 ta umurtqa pog'onasi allaqachon 64 barg{3}}umurtqa pog'onasiga-bog'lanadi, ularning har biri etiketlanishi, yo'naltirilishi, sinovdan o'tkazilishi va hujjatlashtirilishi kerak. Toʻliq{6}}toʻrli matoni oldindan tugatilgan-bilan qurish va saqlash ancha osonMPO/MTP magistral kabellaridala bilan yakunlangan-tolaga qaraganda. Jamoalar, shuningdek, ulagich va qutblilik qoidalarini oldindan hal qilishlari kerak; theMTP va MPO o'rtasidagi amaliy farqlarbuyurtma berishdan oldin tasdiqlashga arziydi. Noqonuniy hujjatlar birinchi kunida hech qanday xarajat qilmaydi va birinchi uzilish paytida juda qimmatga tushadi.
400G yangilash uchun loyihalash
Haqiqiy yangilanish yo'li bilan matoni loyihalash. Birinchi kuni hamma joyda 400G kerak emas, lekin keyinchalik harakatni og'riqli qiladigan tanlovlardan qochish kerak. Umurtqa pogʻonasini koʻtaruvchi ulanishlar allaqachon yuklanganda, 100G ni qoʻshish noqulay boʻlganda, ECMP yoʻllari soni platforma chegarasiga yaqinlashganda yoki AI, saqlash yoki sharq{5}}gʻarbda oʻsish tezlashayotganda 400G tayyorligi haqida oʻylang.
Odatiy strategiya birinchi navbatda umurtqa pog'onasini yangilashdir: barglar 100G yuqoriga ulanishini saqlab qoladi, shu bilan birga yuqoriroq-umurtqa pog'onasi - kabi portlar yordamidaQSFP-DD- boʻsh joy qoʻshadi, koʻpincha 400G portlari mavjud barglar tomon 4x100G ga boʻlinadi. Kengroq traektoriya sanoat tomonidan belgilanadi: theEthernet Alliance yo'l xaritasiendi 400G, 800G va undan tashqarida ishlaydi, asosan AI tomonidan boshqariladi. Kalitlarni baholashda platforma tezlikni, optikani, uzilish rejimlarini va bosqichma-bosqich yangilash kerak bo'lgan dasturiy ta'minot xususiyatlarini qo'llab-quvvatlashini tekshiring.
Qachonki 100G orqa miya-barg dizayni toʻgʻri tanlov emas
Ushbu dizayn universal emas va bir nechta holatlar boshqa narsalarni talab qiladi. Bir yoki ikkita stenddagi bir nechta serverlar kamdan-kam hollarda to'liq umurtqa pog'onasi{1}}barg tuzilishini oqlaydi, bunda bir juft ortiqcha kalitlar oddiyroq va arzonroq. Juda katta sun'iy intellekt o'quv klasterlari boshidanoq 400G yoki 800G matolarga - yoki hatto maxsus InfiniBand tarmog'iga - tushib, 100G kirish va 100G umurtqa pog'onasi matolari yaxshi ishlov beradigan narsadan o'tib ketishi mumkin. Va agar deyarli barcha transport-ravonlar oʻrtasida sharq{11}}gʻarbga emas, shimolga{10}}shlyuzga yoʻnalgan boʻlsa, umurtqa pogʻonasi barglarining sharqiy-gʻarbiy- afzalliklari kamroq ahamiyatga ega, shuning uchun topologiyani taxmin qilishdan koʻra, oʻsish va ekspluatatsiya asosida asoslash kerak. Arxitekturani boshqa yo'l bilan emas, balki harakat va miqyosga moslang.
100G umurtqa pogʻonasi-barg dizaynidagi keng tarqalgan xatolar
- QSFP28 portlarini ikki marta hisoblash.Port - bu 4x25G uzilish yoki 100G yuqoriga ulanish, hech qachon ikkalasi ham bo'lmaydi. Har bir portga bitta rol bering.
- Optikani maksimal kirish orqali tanlash.Uzoqroq kirish xarajat va quvvatni oshiradi; optikani haqiqiy tola masofasi va turiga moslang.
- N-1ga e'tibor bermaslik.Oddiy ish paytida va orqa miya yo'qolganidan keyin nisbatni tekshiring.
- Optik quvvat va issiqlikni unutish.QSFP28 modullari bilan to'la umurtqa pog'onasi haqiqiy termal yukdir, shuning uchun quvvat va sovutish matematikasiga optikani qo'shing.
- Kabelni o'ylab ko'rish.Marshrutlash, etiketkalash, qutblanish va hujjatlar o'rnatishga emas, balki dizaynga tegishli.
- Faqat bugungi server tezligi uchun dizayn.Agar 25G ulanishi 100G ga oʻtsa, mahalliy 100G yoki 400G umurtqa pogʻonasi uchun joy qoldiring.
TSS
Savol: 100G umurtqa{1}}barg tarmog‘i uchun eng yaxshi obuna bo‘lish nisbati qanday?
Javob: Yagona eng yaxshi nisbat yo'q. Umumiy hisoblash uchun 2: 1 yoki 3: 1 ko'pincha amaliydir. Saqlash, AI, HPC yoki RDMA ish yuklari uchun iloji boricha 1:1 yoki undan pastroq{8}}ortiqcha obuna dizaynidan foydalaning va oʻlchangan trafik bilan tasdiqlang.
Savol: QSFP28 SR4 yoki CWDM4 ni barg{3}}to{4}}umurtqa pog‘onasiga bog‘lash uchun ishlatishim kerakmi?
Javob: MPO/MTP kabellari mavjud bo'lgan qisqa multimodli ishga tushirish uchun SR4 dan foydalaning. Masofa uzoqroq bo'lganda yoki dupleks LC{4}}bir rejimli qurilma afzal bo'lganda, taxminan 2 kmgacha bo'lgan-CWDM4 yoki shunga o'xshash yagona rejimli optikadan foydalaning.
Savol: QSFP28 4x25G ga ajralishi mumkinmi?
Javob: Ha, ko'pgina QSFP28 platformalari 4x25G uzilishni qo'llab-quvvatlaydi, ammo qo'llab-quvvatlash kalit modeliga, port guruhiga, operatsion tizimga va kabel turiga bog'liq. Buzilish atrofida loyihalashdan oldin har doim kalit moslik matritsasini tekshiring.
Savol: 400G mavjud bo‘lgandan keyin ham 100G umurtqa{1}}bargiga arziydimi?
Javob: Ha, 25G yoki 100G serverga kirish imkoniga ega koʻpgina korporativ va bulutli muhitlar uchun . 400G yuqoriga ulanish sigʻimi, sunʼiy intellekt trafiki yoki katta-sharq{4}}gʻarbiy tarmoqli kengligi oqlansa, yuqori narxga ega boʻladi.
Savol: Menga qancha orqa miya kaliti kerak?
Javob: Ortiqchalik uchun kamida ikkitasi. Kattaroq matolar ko'pincha ECMPni yaxshiroq taqsimlash va ko'proq ulanish qobiliyati uchun to'rt yoki undan ko'proq foydalanadi. To'g'ri raqam barglar soniga, yuqoriga ulanish tezligiga, ortiqcha obuna maqsadiga va platforma chegaralariga bog'liq.
Savol: Eng keng tarqalgan dizayn xatosi nima?
Javob: Portni noto'g'ri hisoblash. Jamoalar birinchi navbatda yuqoriga ulanishni rejalashtiradilar va keyinroq uzilish kabellari umurtqa pog'onasi uchun foydalanishi kutilgan QSFP28 portlarini iste'mol qilishini aniqlaydilar. Yuqori ulanish hajmini yakunlashdan oldin uzilish portlarini tayinlang.
Xulosa
Yaxshi 100G umurtqa pogʻonasi{1}}barg dizayni apparat kelishidan oldin qabul qilingan qarorlar yigʻindisidir: ish yukini aniqlang, portlarni toʻgʻri hisoblang, oddiy va nosozlik sharoitida ortiqcha obunani hisoblang, optikani masofa boʻyicha tanlang, uzilishni ataylab rejalashtiring, quvvat va sovutish uchun byudjet va 400G uchun joy qoldiring. Aksariyat korporativ maʼlumotlar markazlari uchun 100G QSFP28 ulanishlari bilan 25G ulanishi unumdorlik, xarajat va masshtabning kuchli muvozanati boʻlib qolmoqda, saqlash, AI va HPC esa ortiqcha obunani kamaytirish va qattiqroq tekshirishni talab qiladi. Ishonchli yondashuv o'zgarmaydi: serverdan tashqariga qarab loyihalash, oddiy va N-1 sharoitlarida matematikani isbotlash va joylashtirishdan oldin har bir havolani hujjatlashtirish.
