Bądźmy przez chwilę prawdziwi. Wydałeś miliony na serwery, przełączniki i pamięć masową, ale Twoje centrum danych nadal brzmi jak silnik odrzutowy, a sprzęt się przegrzewa. Jaki jest problem? Często znajduje się tuż pod twoimi stopami – podwyższonymi płytkami podłogowymi. Konkretnie te perforowane. Jeśli nie wykonasz tych płytek prawidłowo, rachunki za chłodzenie poszybują w górę, a Twój sprzęt IT zwolni. W tym przewodniku pokażę Ci wszystko, co musisz wiedzieć o perforowanych płytach podłogowych podniesionych, aby poprawić przepływ powietrza. Zacznijmy.
Dlaczego Twoje centrum danych przypomina saunę
Czy kiedykolwiek wszedłeś do serwerowni i poczułeś podmuch gorącego powietrza? To nie jest zabawa. Większość menedżerów uważa, że rozwiązaniem jest podkręcenie klimatyzacji. Ale to tak, jakby próbować ochłodzić dom, zostawiając otwarte drzwi wejściowe – marnujesz tylko energię. Perforowane płytki podłogowe są strażnikami zimnego powietrza. Pobierają zimne powietrze spod podłogi i kierują je do zimnych przejść. Jeśli te płytki zostaną wybrane lub źle ułożone, powietrze uchodzi przez otwory na kable, przecieka wokół nieuszczelnionych połączeń lub wydostaje się pod tak małym ciśnieniem, że ledwo dociera do serwerów. Musimy to naprawić. Dziś zrobimy z Ciebie eksperta w zakresie przepływu powietrza.
Czym są perforowane płytki podłogowe podniesione?
Mówiąc najprościej, są to panele podłogowe z otworami. Zastępują pełne panele w niektórych miejscach centrum danych z podniesioną podłogą. Podczas gdy pełne panele zatrzymują zimne powietrze, umożliwiają one przepływ zimnego powietrza do serwerów. Występują w wykonaniu ze stali, aluminium lub materiałów kompozytowych. Kluczem nie są same otwory – to układ otworów. Niektóre mają okrągłe otwory; niektóre mają ustawione pod kątem otwory wentylacyjne, które kierują przepływ powietrza. Jednak w większości centrów danych standardowa płytka z okrągłymi otworami sprawdza się dobrze. Bez tych płytek fani Twojego serwera mieliby trudności z uzyskaniem wystarczającej ilości powietrza.
Jak działają otwory: wyjaśniono współczynniki perforacji
Zajmijmy się na chwilę kwestiami technicznymi. Usłyszysz termin „Procent otwartej powierzchni” — to po prostu całkowita powierzchnia otworu podzielona przez całkowitą powierzchnię płytki. Na przykład płytka z 25% otwartą powierzchnią oznacza, że 75% z niej jest nadal pełne. Liczba ta wpływa na ciśnienie i przepływ powietrza. Oto wyzwanie: zbyt wiele otworów przy niskim ciśnieniu = powietrze wypływa zbyt wolno. Za mało otworów pod wysokim ciśnieniem = powietrze wystrzeliwuje jak z węża strażackiego, ale nie pokrywa wystarczającej przestrzeni. Wszystko zależy od równowagi. Potrzebujesz wystarczającego oporu, aby równomiernie rozprowadzić powietrze na wszystkie płytki, ale nie na tyle, aby Twoje urządzenia chłodzące miały z nim trudności.
Płytki pełne czy perforowane: który wygrywa?
Płytki pełne są nudne i niezawodne. Uszczelniają podłogę. Chodzisz po nich, kładziesz na nich stojaki. Ich zadaniem jest zatrzymywanie zimnego powietrza na zewnątrz. Płytki perforowane są inne – ich zadaniem jest unoszenie zimnego powietrza do góry. Największy błąd? Używanie płytek perforowanych tam, gdzie nie ma sprzętu. Jeśli umieścisz wentylowaną płytkę w gorącym przejściu, gorące powietrze z serwerów będzie przepływać z powrotem przez ten otwór i miesza się z zimnym powietrzem poniżej. To źle.
Prosta zasada: używaj pełnych płytek wszędzie, z wyjątkiem zimnego przejścia tuż przed wentylatorami wlotowymi serwera.
Dlaczego naprawa przepływu powietrza ma znaczenie
Ignorowanie przepływu powietrza jest kosztowne. Nie chodzi tylko o wyższe rachunki za prąd — chodzi o żywotność serwerów. Wzrost temperatury o każde 10°C (18°F) może skrócić żywotność sprzętu o połowę. Płytki perforowane to najtańsze ubezpieczenie, jakie można kupić. Jeśli prawidłowo je umieścisz i wybierzesz, możesz faktycznie podnieść termostat. Tak, dobrze to przeczytałeś. ASHRAE (grupa ds. standardów chłodzenia) zaleca obecnie wyższe temperatury – często 75–80°F – jeśli dobrze zarządza się przepływem powietrza. Pozwala to zaoszczędzić dużo pieniędzy na chłodzeniu. Zatem naprawianie płytek nie tylko chłodzi sprzęt; pozwala zaoszczędzić pieniądze.
Typowe błędy blokujące przepływ powietrza (i niszczące sprzęt)
Widziałem kilka złych konfiguracji. Centra danych, w których każda płytka ma dziury — podłoga wygląda jak ser szwajcarski, a pod spodem nie ma ciśnienia powietrza. Powietrze po prostu tam siedzi. Co gorsza, widzę duże wiązki kabli biegnące przez nieuszczelnione otwory w podłodze, wypuszczające całe zimne powietrze, zanim dotrze do drugiego końca rzędu. Nie zostawiłbyś otwartego okna zimą, więc po co zostawiać dziury pod regałami? Unikaj tych pułapek.
Błąd nr 1: Użycie niewłaściwej ilości otworów
Korzystasz z pamięci masowej o małej gęstości, ale używasz 56% otwartych płytek? Zalewasz obszar zimnym powietrzem, które po prostu się rozlewa i nic nie robi. Z drugiej strony, uruchamianie klastrów szkoleniowych AI w wysokiej temperaturze, ale przy użyciu tanich 12% otwartych płytek? Twojemu sprzętowi brakuje powietrza. Dopasuj płytkę do ciepła. Wysoka temperatura = więcej dziur. Niskie ciepło = mniej dziur lub solidnych płytek.
Błąd nr 2: Ignorowanie ciśnienia powietrza pod podłogą
Przestrzeń pod podłogą to zbiornik powietrza. Jeśli utworzysz zbyt wiele otworów (dziury w płytkach + dziury na kable + nieszczelności), ciśnienie spadnie. Kiedy ciśnienie spada, powietrze zwalnia. Powolne powietrze nagrzewa się, zanim w ogóle dotrze do serwerów. Potrzebujesz dodatniego ciśnienia. Prosty test: weź chusteczkę. Połóż go na dziurawej płytce. Czy daje się zassać? To źle (ujemne ciśnienie). Czy wybucha i pływa? To dobrze. Czy to nic nie da? To martwa strefa.
Jak wybrać odpowiednią perforowaną płytkę do swojego stojaka
Nie martw się — nie musisz być inżynierem. Wystarczy skorzystać z prostego wzoru: Całkowite zapotrzebowanie powietrza na szafę ÷ Liczba płytek przed regałem = Ilość powietrza potrzebna na płytkę. Większość producentów serwerów podaje wymagany przepływ powietrza w swoich specyfikacjach. Dodaj te liczby. Następnie sprawdź arkusz danych producenta płytek. Standardowa płytka z 25% otworami zwykle zapewnia 400-600 CFM przy normalnym ciśnieniu. Jeśli Twój stojak wymaga 1000 CFM, potrzebujesz dwóch takich płytek lub jednej płytki z 56% otworami. Prosta matematyka oszczędza Twój sprzęt.
Krok 1: Zmierz wydatek powietrza z urządzenia chłodzącego
Zanim kupisz jakąkolwiek płytkę, wiedz, z czym pracujesz. Urządzenie CRAC tłoczy określoną ilość powietrza. Jeśli łącznie wytworzy się tylko 10 000 CFM, nie można zainstalować 20 płytek, z których każda będzie wymagać 1000 CFM – zabraknie im powietrza. Użyj kamery termowizyjnej lub anemometru (miernika prędkości wiatru), aby sprawdzić przepływ powietrza na poziomie podłogi. Jeśli prędkość powietrza wydobywającego się z obecnie używanych płytek jest niższa niż 300 stóp na minutę (FPM), oznacza to, że ciśnienie jest za niskie. Przed wymianą płytek należy uszczelnić wycieki lub dodać więcej urządzeń chłodzących.
Krok 2: Dopasuj wielkość otworu do poziomu ciepła
Oto moja ściągawka:
Niska temperatura (poniżej 2 kW na szafę): 15–20% dziurawych płytek
Średnie ciepło (2–5 kW na stojak): 25–35% dziurawych płytek
Wysoka temperatura (5–10 kW na szafę): 40–56% dziurawych płytek
Ekstremalne ciepło (10 kW+): Wymagane są aktywne kratki podłogowe lub kanały. Nie próbuj chłodzić 15 kW za pomocą prostych otworów – to jak napełnienie basenu wężem ogrodowym.
25%, 35% czy 56% otworów? Który kupić?
Przejdźmy przez opcje. Większość starszych centrów danych radzi sobie dobrze z 25% dziurami. Zapewnia dobry opór, co oznacza równomierny nacisk na podłogę. Otwory 35% to idealne rozwiązanie dla nowoczesnych serwerów kasetowych — przepuszczają więcej powietrza bez utraty prędkości. 56% otworów (zwanych „wysokim przepływem”) przypomina kratki — można przez nie widzieć. Używaj ich tylko w przypadku „gorących punktów”, takich jak wiersze obliczeniowe o dużej gęstości. Używaj ich oszczędnie, w przeciwnym razie ukradną całe powietrze z pobliskich płytek.
Zasada 25%: rzędy serwerów o małej gęstości
Nazywam to płytką „w sam raz”. Nie za dużo dziur, nie za mało. Jeśli masz przełączniki sieciowe, półki do przechowywania lub starsze serwery zużywające około 300 W każdy, 25% jest idealne. Wytwarza ciśnienie wsteczne, które równomiernie rozpycha powietrze po wszystkich płytkach w zimnym przejściu. Nie będziesz mieć silnych podmuchów — uzyskasz płynny, stały przepływ. Właśnie tego chcą fani serwerów: stałego, cichego strumienia chłodnego powietrza, a nie huraganu.
Bestia 56%: obliczenia o dużej wydajności
Teraz o ciężkich rzeczach. Jeśli masz klastry GPU, akceleratory AI lub gęste węzły obliczeniowe, 25% je zadusi. Potrzebujesz 56% dziurawych płytek. Ale uwaga: te płytki drastycznie zmniejszają ciśnienie pod podłogą. Może być konieczne uszczelnienie reszty podłogi dobrymi przelotkami i listwami szczotkowymi. Nie kładź także płytki 56% obok płytki 25%. Powietrze przepłynie przez otwór 56% i pozostawi płytkę 25% całkowicie martwą. Zgrupuj swoje szafy wysokotemperaturowe i przydziel im własną „strefę wysokiego przepływu”.
Gdzie położyć te dziurawe płytki
To jak gra „Operacja” — ale z powietrzem. Umieść dziurawe płytki tylko bezpośrednio przed miejscami, w których serwery pobierają powietrze. To zimne przejście. Umieść je tak, aby zakrywały przód stojaka. Nie umieszczaj ich pod tylną częścią szafy (gorące przejście). Nie umieszczaj ich w pustej przestrzeni. I proszę, nie umieszczaj ich pod dużym zasilaczem UPS, który nie ma wentylatorów — po prostu marnujesz zimne powietrze na cegłę. Użyj wzoru siatki. Jeśli masz rząd 10 stojaków, umieść po 2 dziurkowane płytki na stojaku, lekko przesunięte, jeśli stojak ma centralną listwę zasilającą.
Ograniczenie gorącego/zimnego przejścia i płytki otworów
Jeśli dodałeś bariery oddzielające gorące i zimne powietrze, zasady nieco się zmieniają. W całkowicie zamkniętym zimnym przejściu ciśnienie wewnątrz jest uwięzione. Oznacza to, że zazwyczaj można używać płytek z mniejszą liczbą otworów, ponieważ powietrze nie ma innego wyjścia, jak tylko przez serwery. Możesz spaść z 35% dołków do 25%. Jednak hermetyzacja pogarsza wycieki. Pojedyncza brakująca płytka w zamkniętym, zimnym przejściu przypomina pęknięty balon – całe ciśnienie natychmiast znika. Trzymaj szczelnie zamknięte.
Przygotowanie na przyszłe procesory graficzne
Spójrzmy w przyszłość. Chipy nowej generacji stają się coraz cieplejsze, a nie chłodniejsze. I są coraz ciaśniej upakowane. Oczekuje się, że w ciągu najbliższych 3–5 lat moc szafy osiągnie 30–50 kW na szafę. Podstawowe dziurawe płytki nie wystarczą. Prawdopodobnie będziesz musiał całkowicie zrezygnować z podłóg podniesionych na rzecz chłodzenia cieczą. Jeśli jednak przez następne dwa lata pozostaniesz przy podłogach podniesionych, kup regulowane płytki z otworami. Posiadają przesuwany otwór wentylacyjny. Możesz ręcznie zmienić otwarty obszar od 0% do 60%. Kiedy więc w przyszłym miesiącu dodasz nowy serwer GPU, po prostu podejdziesz, przekręcisz pokrętło i uzyskasz większy przepływ powietrza. Nie ma potrzeby kupowania nowych płytek.
Pomyśl o swojej podłodze jak o głowicy prysznicowej
Podnieś rękę, jeśli korzystałeś z taniej słuchawki prysznicowej. Włączasz, woda kapie z każdego otworu, ale nie ma ciśnienia. Nie możesz spłukać włosów. To podłoga ze zbyt dużą liczbą dziurawych płytek. Teraz wyobraź sobie dobrą głowicę prysznicową z otworami o odpowiedniej wielkości, która tworzy silny strumień. To podłoga z odpowiednią mieszanką litych i dziurawych płytek. Przestrzeń pod podłogą to rura wodociągowa. Płytki są dyszą. Chcesz, aby silny, mocny strumień (duża prędkość) dotarł do górnej części kosza, a nie słaba mżawka. Optymalizując kafelki, zmieniasz swoje centrum danych ze smutnego zraszacza w ciśnieniową myjkę dla swoich serwerów.
Wniosek: oddychaj spokojnie, licz mocniej
Udało nam się. Nie jesteś już początkującym jeśli chodzi o przepływ powietrza. Teraz wiesz, że perforowane płytki podłogowe to nie tylko „podłogi z dziurami” – to precyzyjne narzędzia. Dopasowując wielkość otworów (25%, 35% lub 56%) do poziomu ciepła szafy, uszczelniając nieszczelności pod podłogą i umieszczając płytki tylko w zimnym przejściu, możesz obniżyć współczynnik PUE (efektywność zużycia energii) o 15% lub więcej.
Idź i sprawdź swoje centrum danych już teraz. Czy widzisz dziurawą płytkę w gorącym przejściu? Przesuń to. Czy istnieje solidna płytka głodująca procesor graficzny? Zamień to.
Twoje serwery będą działać ciszej. Twoja klimatyzacja będzie działać rzadziej. A Twój szef będzie zachwycony niższymi rachunkami za prąd.
A teraz idź i napraw ten przepływ powietrza. Masz to.
