Przewodnik po okablowaniu światłowodowym AI Data Center: projektowanie MTP/MPO 400G/800G, budżet strat i lista kontrolna BOM|Optyka chwały

Odpowiedź projektowa w 60 sekund

W przypadku nowego centrum danych AI nazwy produktów, takie jak „skrzynka światłowodowa” lub „kabel MPO”, nie wystarczą, aby zdefiniować niezawodną instalację światłowodową. Zacznij odLista kontrolna projektu 400G/800G i ścieżka BOM: potwierdź PMD transceivera, zmapuj każdy port na wymaganą liczbę włókien, wybierz bazę MTP/MPO pasującą do torów optycznych, poprowadź łącza trunkingowe przez udokumentowane panele krosowe, zarezerwuj pojemność szkieletu OS2, gdy ścieżka aktualizacji jest niepewna, oblicz budżet strat i zdefiniuj testy akceptacyjne przed wydaniem zamówienia.

Lista kontrolna projektu 400G/800G przed złożeniem zapytania o wycenę

Proces projektowania okablowania 400G/800G: port przełącznika → PMD nadajnika-odbiornika → baza MTP/MPO i liczba włókien → panel krosowy i polaryzacja kasety → szkielet OS2 → arkusz budżetu strat →-gotowe BOM dostawcy.

Architektura AI Fabric: dlaczego okablowanie musi być zgodne z topologią GPU

Okablowanie centrum danych AI nie jest zwykłym okablowaniem serwera-do-rdzenia. Duże klastry procesorów graficznych stale przenoszą ruch ze wschodu- na zachód w celu trenowania, przetwarzania wsadowego wnioskowania i dostępu do pamięci masowej. Zakład włóknisty musi zatem obsługiwać projekty tkanin zoptymalizowane-grzbiet lub szyny-bez powodowania niejednoznaczności polaryzacji, zatorów w strefach łatania lub nieudokumentowanych włókien zapasowych.

NVIDIA publicznie opisuje Spectrum-X jako platformę Ethernet przeznaczoną do sieci AI, obejmującą projekty wielopłaszczyznowe-, które skalują obciążenia AI poza ograniczenia pojedynczej-płaszczyzny. Dla zespołów zajmujących się okablowaniem lekcja jest praktyczna: każda ścieżka szyny, płaszczyzny lub grzbietu- liścia musi mieć fizyczną etykietę, udokumentowaną mapę włókien i możliwy do przetestowania budżet łącza.Informacje o platformie NVIDIA Spectrum-X.

Architektura sieci szkieletowej AI typu Leaf-spine: stojaki GPU łączą się z przełącznikami typu Leaf ToR za pośrednictwem łączy trunkingowych Base-8 lub Base-16 MTP/MPO; panele krosowe o dużej gęstości zarządzają polaryzacją i ciągłością etykiety na każdym przeskoku; Szkielet OS2 łączy warstwy kręgosłupa i agregacji z oznakowaniem topologii poszczególnych szyn.

Oznacz osobno różne grupy łączy centrum danych AI

Mapowanie transceivera-na-światłowód: rozpocznij tutaj przed wybraniem dowolnego kabla

Każdy błąd BOM zaczyna się od błędu mapowania. Transceiver określa liczbę linii, interfejs złącza, zasięg, polerowanie i maksymalną tłumienność kanału. Łącznik MTP/MPO i panel krosowy muszą być zgodne z tym interfejsem.

TheKonsorcjum technologiczne TIA Fiber Optics 400GBASE-Przegląd DR4podaje maksymalną tłumienność wtrąceniową 3,0 dB i zasięg operacyjny OS2 wynoszący 500 m dla 400GBASE-DR4. JegoPrzegląd 800GBASE-DR8opisuje transmisję równoległą PAM4 800 Gb/s na 16 włóknach jednomodowych o zasięgu do co najmniej 500 m. Publiczny arkusz danych Cisco 800G OSFP pokazuje również, dlaczego potwierdzenie interfejsu dostawcy-ma znaczenie: jeden model DR8 wykorzystuje podwójny MPO-12 APC, a drugi model DR8P wykorzystuje MPO-16 APC, oba obsługują przerwania 800GBASE-DR8 i 2×400GBASE-DR4.Referencja dotycząca transceivera Cisco 800G OSFP.

Projekt bagażnika MTP/MPO: podstawa, polaryzacja, płeć i język polski

MTP/MPO nie jest jednym typem kabla. W przypadku sieci 400G/800G zespół zakupowy musi określić co najmniej cztery zmienne:liczba zasad/włókien, biegunowość, płećIpolski. Cytat mówiący tylko o „MPO trunk, OS2, 30 m” jest niekompletny.

Wybór bazy określa, czy wszystkie włókna przenoszą ścieżki optyczne. Baza-8 idealnie pasuje do 400GBASE-DR4 (cztery linie Tx + cztery linie Rx). MPO-16 lub podwójny MPO-12 zwykle pasuje do 800GBASE-DR8 (osiem Tx + osiem Rx), w zależności od modułu. Base-12 zastosowany na ślepo w projekcie DR4 może splatać cztery włókna na pień i zwiększać złożoność polaryzacji bez wyraźnych korzyści.

Panele krosowe, kasety i ODF: warstwa krosowa w okablowaniu centrum danych AI

W centrum danych AI warstwa łatania -Panel światłowodowy do montażu w stojaku, obudowa kasety MPO lub ODF- to miejsce, w którym kończą się łącza MTP/MPO, zarządzane są przerwy LC, kontrolowany jest promień zgięcia i wprowadzane są przyszłe zmiany bez zakłócania szkieletu. W przypadku projektów sieci AI 400G i 800G wybór panelu bezpośrednio wpływa na integralność pasa, zarządzanie polaryzacją i kontrolę zmian operacyjnych przy każdym zdarzeniu dotyczącym-dodania-zmiany ruchu.

Ustal priorytetypanele krosowe światłowodowe, Systemy okablowania MTP/MPOIrozwiązania w zakresie okablowania centrów danychzaprojektowany z myślą o równoległej-gęstości optycznej i udokumentowanej polaryzacji. Aby zapoznać się z kategoriami obudów spoza kontekstu centrum danych AI, zobaczPrzewodnik dla kupujących Fibre Box.

OS2 vs OM4 w centrach danych AI: dlaczego tryb jednomodowy powinien być domyślny w nowych kompilacjach

OM4 i OM5 pozostają poprawne w zastosowaniach z krótkim SR, szczególnie w rzędzie, w którym odległość łącza jest stabilna, a ścieżka aktualizacji do trybu jednomodowego nie jest planowana w najbliższej przyszłości. W przypadku nowych strukturalnych tras szkieletowych - kręgosłupa-do-liście,-rzędu, między-pokojami lub dowolnej trasy, na której przyszły plan działania dotyczący prędkości jest niepewny -Tryb jednomodowy OS2 jest, zgodnie z zaleceniem inżynierii Glory Optical, bezpieczniejszym domyślnym rozwiązaniem podczas planowania. Zapewnia większy zasięg, obsługuje rodziny optycznych DR/FR/LR i zmniejsza ryzyko, że aktualizacja przepustowości stanie się projektem ponownego okablowania szkieletu.

Ścieżka decyzji o wyborze światłowodu: stabilne-rzędowe łącza SR mogą wykorzystywać OM4/OM5, gdy odległość i ścieżka aktualizacji są stałe; skala{3}}pokoju i{4}}budynku. Łącza DR lub FR domyślnie obsługują OS2; każda trasa szkieletowa, która może przenosić ruch 800G lub w przyszłości 1,6T, powinna być systemem OS2 z zarezerwowaną gęstością paneli od pierwszego dnia.

Arkusz budżetu strat 400G/800G: Zamień projekt okablowania na wynik pozytywny/negatywny

Budżet strat to miejsce, w którym architektura staje się mierzalna. Przydatne zestawienie komponentów powinno zawierać nie tylko listę kanałów i paneli; powinien określać oczekiwaną tłumienność wtrąceniową i zarezerwowany margines dla każdego typu łącza.

Przykład: 400GBASE-DR4, OS2, 120 m, dwa przeskoki między panelami

Podział budżetu strat dla przykładowego łącza 400GBASE-DR4 przy 120 m OS2 z dwoma przeskokami panelu: tłumienie światłowodu ~0,048 dB + 1.00 dB dla czterech połączonych par MPO (0,25 dB każda)=1.05 dB planowana strata kanału, pozostawiając margines ~1,95 dB przed limitem zastosowania 3,0 dB. Każda dodatkowa para złączy, interfejs kasety lub zanieczyszczona ferrula zmniejszają ten margines.

Testy akceptacyjne: sprawdź instalację, zanim klaster AI zostanie uruchomiony

Raporty z testów fabrycznych są cenne, ale nie zastępują akceptacji zainstalowanego-łącza. TIA-568.3-E obejmuje okablowanie i komponenty światłowodowe, w tym wymagania dotyczące wydajności, transmisji, testów i pomiarów oraz metody zmiany polaryzacji.Przegląd TIA-568.3-E.

Czystość złączy zasługuje na osobną linię w planie odbiorów. IEC 61300-3-35:2022 dotyczy obserwacji i klasyfikacji zanieczyszczeń, zadrapań i defektów na powierzchniach końcowych złączy światłowodowych.Odniesienie do normy IEC 61300-3-35. Aby uzyskać szczegółowe informacje na temat praktycznych procedur czyszczenia, odsyłacz czytelników do Glory Opticalinstrukcja czyszczenia złącza światłowodowego.

Trzy-etapowy przebieg testów akceptacyjnych: (1) przed połączeniem sprawdź każdą powierzchnię czołową złącza MPO i LC pod kątem kryteriów pozytywnego/negatywnego wyniku IEC 61300-3-35; (2) Test-straty, długości i polaryzacji OLTS Tier 1 w odniesieniu do docelowego budżetu-strat projektu; (3) Dokumentacja śledzenia i tabeli zdarzeń OTDR poziomu 2 dla długich tras szkieletowych oraz pełna dokumentacja powykonawcza.

Lista kontrolna BOM 400G/800G: skopiuj to do zapytania ofertowego

Dobry dostawca może podać dokładną wycenę tylko wtedy, gdy BOM zawiera założenia inżynieryjne. Użyj poniższej tabeli jako głównej listy kontrolnej zapytania ofertowego dla Glory Optical lub innego kwalifikującego się producenta.

Przykładowy scenariusz zapytania ofertowego dla małej struktury AI

Sprawy publiczne: dlaczego-dyscyplina w warstwie fizycznej ma znaczenie w skali sztucznej inteligencji

Zadania szkoleniowe AI są wrażliwe na przerwy w infrastrukturze, ponieważ wiele obciążeń działa synchronicznie w dużych pulach procesorów graficznych. Data Center Dynamics zgłosiło przebieg szkolenia Meta Llama 3 z wykorzystaniem 16 384 procesorów graficznych NVIDIA H100: w ciągu 54 dni firma Meta odnotowała 419 nieoczekiwanych awarii komponentów, a problemy z przełącznikami sieciowymi i kablami były przyczyną 35 przerw, czyli 8,4%.Podsumowanie Metaraportu Data Center Dynamics.

Przykłady dostawców publicznych pokazują również, dlaczego przed złożeniem zamówienia należy zapoznać się ze szczegółami interfejsu. Dokumentacja Cisco 800G OSFP DR8 zawiera listę wariantów podwójnego-MPO-12 APC i MPO-16 APC, przy czym oba obsługują przerwania 800GBASE-DR8 i 2×400GBASE-DR4. Ten pojedynczy przykład wystarczy, aby uzasadnić bardziej rygorystyczne zapytanie ofertowe:nigdy nie zamawiaj „łącza 800G MPO” bez dokładnego interfejsu modułu i mapy przerwań.

Typowe błędy w okablowaniu 400G/800G, których należy unikać

1. Kupuję Base-12, bo jest znajomy.Base-12 może splatać włókna w konstrukcjach DR4 i może komplikować migrację 800G.
2. Ignorowanie wariantów złączy transiwera.800G DR8 może występować jako MPO-16 lub podwójny MPO-12, w zależności od dostawcy i modelu.
3. Traktowanie polaryzacji jako refleksja.Należy zaplanować polaryzację pomiędzy magistralą, kasetą, adapterem i kablem krosowym.
4. Wliczanie do budżetu strat wyłącznie długości kabla.Pary złączy i interfejsy kaset często dominują w krótkich łączach w centrach danych.
5. Używanie trybu wielomodowego jako domyślnego szkieletu bez sprawdzania planu odświeżania.OM4/OM5 może być poprawny w przypadku stałych łączy SR, ale OS2 jest zwykle bezpieczniejszy w przypadku-długich tras szkieletowych i niepewnej migracji struktury AI.
6. Pomijam końcową-kontrolę twarzy.Złącza MPO zwielokrotniają ryzyko, ponieważ jedna tulejka przenosi wiele torów.
7. Oddzielenie BOM i planu testów.Jeżeli wycena nie określa raportów z testów, akceptacja staje się negocjacją po montażu.
8. Etykietowanie tylko obu końców, a nie topologii.Sztuczna inteligencja wymaga identyfikatorów stojaków, paneli, portów, szyn/samolotów i-odległych miejsc.

Wyjścia Glory Optical BOM według warstw

Lista kontrolna projektu 400G/800G jest bezpośrednio powiązana z kategoriami produktów. Każdą warstwę struktury AI - równoległą optykę, łatanie i szkielet - należy podać jako wynik BOM ze zdefiniowanym pakietem testowym, formatem etykiety i założeniami migracji.

Często zadawane pytania

P: Jaki jest najlepszy typ światłowodu dla nowego szkieletu centrum danych AI?

O: Zgodnie z zaleceniem inżynierii Glory Optical, tryb jednomodowy OS2 jest domyślnym wyborem w przypadku nowych projektów strukturalnych szkieletów, w których zasięg, przyszła ścieżka aktualizacji lub migracja do 800G/1,6T są niepewne. Obsługuje rodziny optyki DR, FR i LR i zmniejsza ryzyko ponownego okablowania. OM4 i OM5 pozostają przydatne w przypadku krótkich łączy SR, gdzie ustalone są plany odległości i odświeżania.

P: Czy powinienem używać Base-8 lub Base-16 MTP/MPO dla 400G/800G?

Odp.: Dopasuj bazę do liczby torów optycznych.. 400GBASE-DR4 zwykle mapuje osiem włókien w interfejsie mechanicznym MPO-12. 800GBASE-DR8 wykorzystuje szesnaście włókien i może używać MPO-16 lub podwójnego MPO-12, w zależności od transceivera. Nie wybieraj Base-12 tylko dlatego, że jest powszechny w starszych ekwipunkach.

P: Czy polaryzacja typu-B jest zawsze prawidłowa w przypadku okablowania centrum danych AI?

O: Typ-B jest szeroko stosowany w optyce równoległej, ponieważ odwraca mapę światłowodów od końca do końca. Jednakże jest to poprawne tylko wtedy, gdy transceiver, kaseta i łącze są projektowane razem. Wymagaj mapy pasów ruchu i fabrycznego raportu dotyczącego polaryzacji dla każdego zespołu.

P: Ile par złączy może zawierać łącze 400GBASE-DR4?

Odp.: Zacznij od maksymalnego tłumienia wtrąceniowego kanału aplikacji i pracuj wstecz. W przypadku 400GBASE-DR4 przegląd TIA FOTC podaje maksymalną tłumienność wtrąceniową 3,0 dB. Jeśli dla każdej sparowanej pary zaplanowano poziom 0,25 dB, cztery pary zużywają 1,0 dB przed utratą włókna i marginesem. Dokładna dopuszczalna liczba zależy od wybranego gatunku komponentu, współczynnika odbicia i wymagań transceivera.

P: Co powinno znaleźć się w zestawieniu komponentów okablowania 400G/800G?

Odp.: Kompletne zestawienie komponentów powinno zawierać PMD i zasięg transiwera, typ światłowodu, bazę MTP/MPO i liczbę włókien, rodzaj złącza, polaryzację, połysk, długość magistrali, typ przerwy, konfigurację panelu krosowego lub kasety, płaszcz kabla/odporność ogniową, schemat etykietowania, wolną pojemność, docelowy budżet{{0}strat oraz wymagane dokumenty testowe, takie jak tłumienność wtrąceniowa, tłumienność odbiciowa, polaryzacja, kontrola czoła-czopu i raporty OTDR, jeśli to konieczne.

P: Jak obliczyć budżet strat w światłowodzie 400G/800G?

O: Zacznij od określenia maksymalnej tłumienności wtrąceniowej kanału aplikacji ze standardu transiwera lub arkusza danych. Dodaj tłumienie światłowodu w oparciu o długość, a następnie dodaj każdą dopasowaną parę złączy, kasetę, interfejs adaptera i złącze. Porównaj sumę z dozwoloną stratą kanału i marginesem rezerwy na zanieczyszczenie, obsługę i przyszłe łatanie. W przypadku równoległej optyki jednomodowej należy sprawdzić także współczynnik odbicia i wypolerowanie złącza, a nie tylko tłumienie wtrąceniowe.

P: Jakie raporty z testów powinien dostarczyć dostawca okablowania światłowodowego?

Odp.: W przypadku-zespołów wstępnie zakończonych poproś o tłumienie wtrąceniowe, tłumienie odbiciowe, polaryzację, kontrolę-powierzchni czołowej i geometrię 3D, jeśli ma to zastosowanie. W przypadku zainstalowanych łączy należy wymagać zapisów strat/długości/polaryzacji poziomu 1 i śladów OTDR poziomu 2, jeśli właściciel projektu potrzebuje dokumentacji na poziomie-zdarzenia.

Standardy, źródła publiczne i dalsza lektura

• TIA FOTC: 400GBASE-Omówienie aplikacji DR4Zasięg - 500 m OS2 i maksymalna strata wtrąceniowa 3,0 dB-odniesienie.
• TIA FOTC: Omówienie aplikacji 800GBASE-DR8- 800 Gb/s PAM4 na 16 włóknach jednomodowych.
• Przegląd TIA-568.3-E- wymagania dotyczące okablowania światłowodowego i komponentów, transmisji, testów i polaryzacji; odwołuje się także do wartości planowania strat-wstawiania par-.
• Zalecenie ITU-T G.652.D- Charakterystyka tłumienia światłowodu jednomodowego i kabla stosowana do wartości planowania szkieletu OS2.
• IEC 61300-3-34- podstawowe procedury testowe i pomiarowe dotyczące tłumienia losowo-łączonych złączy, odniesienie do klasyfikacji strat w połączonych parach MPO/LC.
• IEC 61300-3-4- podstawowe procedury testowe i pomiarowe dotyczące tłumienia, obejmujące wartość planistyczną stosowaną w przypadku utraty spawu.
• IEC 61300-3-35:2022- kontrola wizualna powierzchni końcowych złączy światłowodowych.
• Arkusz danych modułów nadawczo-odbiorczych Cisco OSFP 800G- przykład wariantów podwójnego interfejsu MPO-12 i MPO-16 800G DR8.
• Platforma Ethernet NVIDIA Spectrum-X- Odniesienie do publicznej struktury Ethernet AI.
• Dynamika centrum danych: przerwy w szkoleniu Meta Llama 3- publiczna sprawa pokazująca problemy z przełącznikami sieciowymi i kablami w skali klastra AI.