Gəlin bir anlıq real olaq. Siz serverlərə, açarlara və yaddaşa milyonlarla pul xərcləmisiniz, lakin məlumat mərkəziniz hələ də reaktiv mühərrik kimi səslənir və avadanlığınız həddən artıq qızır. Problem nədir? Çox vaxt ayaqlarınızın altındadır - qaldırılmış döşəmə plitələriniz. Konkret olaraq delikli olanlar. Bu plitələri düzgün qəbul etməsəniz, soyutma ödənişləriniz damdan keçəcək və İT avadanlıqlarınız yavaşlayacaq. Bu təlimatda mən sizə hava axını düzəltmək üçün perforasiya edilmiş döşəmə plitələri haqqında bilmək lazım olan hər şeyi göstərəcəyəm. Başlayaq.
Nə üçün Data Mərkəziniz Sauna kimi Hiss olunur
Heç server otağına girib isti havanı hiss etmisiniz? Əyləncəli deyil. Əksər menecerlər AC-ni yandırmağın həll yolu olduğunu düşünür. Ancaq bu, ön qapını açıq qoyaraq evinizi sərinlətməyə çalışmaq kimi bir şeydir - siz sadəcə enerji sərf edirsiniz. Delikli qaldırılmış döşəmə plitələri soyuq havanın qapıçılarıdır. Döşəmə altından soyuq havanı götürür və onu soyuq keçidlərə yönəldirlər. Əgər bu plitələr seçilibsə və ya pis yerləşdirilibsə, hava kabel dəliklərindən qaçır, bağlanmamış birləşmələrin ətrafına sızır və ya o qədər az təzyiqlə çıxır ki, serverlərinizə çətinliklə çatır. Biz bunu düzəltmək lazımdır. Bu gün sizi hava axını mütəxəssisi edəcəyik.
Delikli qaldırılmış döşəmə plitələri nədir?
Sadəcə olaraq, bunlar içərisində deşik olan döşəmə panelləridir. Onlar yüksək mərtəbə məlumat mərkəzinin müəyyən yerlərində bərk panelləri əvəz edirlər. Möhkəm panellər soyuq havanı aşağı saxlasa da, bunlar soyuq havanın serverlərinizə axmasına imkan verir. Onlar polad, alüminium və ya kompozit materiallarda olurlar. Açar yalnız deşiklər deyil, çuxur nümunəsidir. Bəzilərində yuvarlaq deşiklər var; bəzilərində hava axını yönləndirən bucaqlı havalandırma dəlikləri var. Lakin əksər məlumat mərkəzləri üçün standart dəyirmi deşikli kafel yaxşı işləyir. Bu plitələr olmadan, server pərəstişkarlarınız kifayət qədər hava almaq üçün mübarizə aparacaqlar.
Deliklər necə işləyir: Perforasiya nisbətləri izah olunur
Gəlin bir dəqiqəlik bir az texniki məlumat verək. Siz 'Açıq Sahə Faizi' ifadəsini eşidəcəksiniz - bu, yalnız ümumi kafel sahəsinə bölünən ümumi deşik sahəsidir. Məsələn, 25% açıq sahəsi olan bir kafel onun 75% -i hələ də möhkəmdir. Bu rəqəm hava təzyiqinə və axınına təsir göstərir. Çətinlik budur: aşağı təzyiqli çoxlu deşik = hava çox yavaş çıxır. Yüksək təzyiqli çox az dəlik = hava atəş borusu kimi çıxır, lakin kifayət qədər yer tutmur. Hər şey tarazlığa aiddir. Havanı bütün plitələrə bərabər yaymaq üçün kifayət qədər müqavimət lazımdır, lakin soyutma qurğularınız buna qarşı mübarizə aparacaq qədər deyil.
Bərk və Delikli Plitələr: Hansı Qazanır?
Möhkəm plitələr darıxdırıcı, etibarlıdır. Döşəməni möhürləyirlər. Onların üstündə gəzirsən, rəflər qoyursan. Onların işi soyuq havanı aşağı salmaqdır. Delikli plitələr fərqlidir - onların işi soyuq havanı qaldırmaqdır. Ən böyük səhv? Avadanlıq olmayan yerlərdə perforasiya edilmiş plitələrdən istifadə edin. Əgər isti koridorda havalandırılan kafel qoysanız, serverlərdən gələn isti hava həmin dəlikdən aşağıya doğru gedəcək və aşağıda olan soyuq hava ilə qarışacaq. Bu pisdir.
Sadə qayda: Hər yerdə bərk plitələrdən istifadə edin, serverinizin qəbulu fanatlarının qarşısındakı soyuq keçiddən başqa.
Hava axınının tənzimlənməsi niyə vacibdir
Hava axınına məhəl qoymamaq baha başa gəlir. Söhbət təkcə yüksək elektrik ödənişləri ilə bağlı deyil, bu, serverlərinizin xidmət müddətindən gedir. Hər 10°C (18°F) temperatur artımı aparatın ömrünü yarıya endirə bilər. Delikli plitələr ala biləcəyiniz ən ucuz sığortadır. Onları düzgün yerləşdirib seçdiyiniz zaman termostatınızı həqiqətən qaldıra bilərsiniz. Bəli, düz oxudunuz. ASHRAE (soyutma standartları qrupu) indi hava axını yaxşı idarə olunarsa, daha yüksək temperaturları (çox vaxt 75-80°F) tövsiyə edir. Bu, soyutma üçün çox pula qənaət edir. Beləliklə, plitələrinizi düzəltmək yalnız avadanlıqlarınızı soyutmur; pulunuza qənaət edir.
Hava axınına mane olan ümumi səhvlər (və avadanlığı öldürür)
Mən bəzi pis quraşdırmalar görmüşəm. Hər bir kafelin deşik olduğu məlumat mərkəzləri - döşəmə İsveçrə pendirinə bənzəyir və altında hava təzyiqi yoxdur. Hava sadəcə orada oturur. Daha da pisi odur ki, mən döşəmədəki möhürlənməmiş deşiklərdən keçən böyük kabel dəstələrini görürəm və bütün soyuq havanın cərgənin ən ucuna çatmasına imkan vermir. Qışda pəncərəni açıq qoymazdınız, bəs niyə raflarınızın altında deşiklər buraxırsınız? Bu tələlərdən çəkinin.
Səhv №1: Səhv çuxur miqdarından istifadə
Aşağı sıxlıqlı yaddaş işlədir, lakin 56% açıq plitələrdən istifadə edirsiniz? Siz ərazini soyuq hava ilə doldurursunuz. Digər tərəfdən, AI təlim qruplarını yüksək istiliklə işlədirsiniz, lakin ucuz 12% açıq plitələrdən istifadə edirsiniz? Avadanlıqlarınız havaya ac qalır. Kafelni istiliyə uyğunlaşdırın. Yüksək istilik = daha çox deşik. Aşağı istilik = daha az deşik və ya bərk plitələr.
Səhv №2: Döşəmə altındakı hava təzyiqinə məhəl qoymamaq
Döşəmə altındakı yer sizin hava anbarınızdır. Həddindən artıq boşluqlar (çuxur plitələr + kabel dəlikləri + sızmalar) yaratsanız, təzyiq azalır. Təzyiq azaldıqda, hava yavaşlayır. Yavaş hava hətta serverlərinizə çatmazdan əvvəl qızdırılır. Sizə müsbət təzyiq lazımdır. Sadə bir test: salfet götürün. Bir deşik plitə üzərinə qoyun. O, aşağı sorulur? Bu pisdir (mənfi təzyiq). O, partlayıb uçurmu? Bu yaxşıdır. Heç nə etmir? Bu ölü zonadır.
Rafınız üçün düzgün perforasiya edilmiş plitəni necə seçmək olar
Narahat olmayın - mühəndis olmağa ehtiyac yoxdur. Sadəcə bu sadə düsturdan istifadə edin: Rafın tələb etdiyi ümumi hava ÷ Rafın qarşısındakı plitələrin sayı = Hər kafel üçün lazım olan hava. Əksər server istehsalçıları tələb olunan hava axınını spesifikasiya vərəqində qeyd edirlər. Bu nömrələri əlavə edin. Sonra kafel istehsalçınızın məlumat vərəqini yoxlayın. 25% deşikli standart bir kafel adətən normal təzyiqdə 400-600 CFM verir. Rəfinizə 1000 CFM lazımdırsa, bu plitələrdən ikisi və ya 56% deşikli bir kafel lazımdır. Sadə riyaziyyat avadanlıqlarınızı saxlayır.
Addım 1: Soyutma Bölmənizin Hava Çıxışını ölçün
Hər hansı bir kafel almadan əvvəl, nə ilə işlədiyinizi bilin. Sizin CRAC bölməniz müəyyən miqdarda hava itələyir. Əgər cəmi 10.000 CFM çıxarırsa, hər biri üçün 1000 CFM tələb edən 20 plitə quraşdıra bilməzsiniz - onlar havadan məhrum olacaqlar. Döşəmə səviyyəsində hava axını yoxlamaq üçün termal kamera və ya anemometrdən (külək sürətini ölçən) istifadə edin. Cari plitələrinizdən çıxan hava dəqiqədə 300 futdan (FPM) aşağıdırsa, təzyiqiniz çox aşağıdır. Plitələr dəyişdirməzdən əvvəl sızıntıları möhürləməlisiniz və ya daha çox soyutma qurğusu əlavə etməlisiniz.
Addım 2: Delik miqdarını istilik səviyyəsinə uyğunlaşdırın
Budur mənim fırıldaqçı vərəqim:
Aşağı istilik (hər bir rafa 2 kVt-dan az): 15-20% deşik plitələr
Orta istilik (hər raf üçün 2-5 kVt): 25-35% deşik plitələr
Yüksək istilik (hər rafa 5-10kW): 40-56% deşik plitələr
Həddindən artıq istilik (10kW+): Aktiv döşəmə barmaqlıqları və ya kanallar lazımdır. 15 kVt-ı əsas deşiklərlə soyutmağa çalışmayın - bu, hovuzu doldurmaq üçün bağ şlanqından istifadə etmək kimidir.
25%, 35% və ya 56% Deliklər? Hansı birini almaq lazımdır?
Gəlin variantları nəzərdən keçirək. Əksər köhnə məlumat mərkəzləri 25% deşiklərlə yaxşı işləyir. Yaxşı müqavimət təmin edir, bu da döşəmə boyunca bərabər təzyiq deməkdir. 35% deşiklər müasir blade serverləri üçün əla yerdir - onlar sürəti itirmədən daha çox hava keçirməyə imkan verir. 56% deşiklər ('yüksək axın' adlanır) demək olar ki, barmaqlıqlara bənzəyir - siz onların arasından birbaşa görə bilərsiniz. Bunları yalnız yüksək sıxlıqlı hesablama sıraları kimi 'qaynar nöqtələr' üçün istifadə edin. Onları az istifadə edin, əks halda yaxınlıqdakı plitələrdən bütün havanı oğurlayacaqlar.
25% Qaydası: Aşağı Sıxlıqlı Server Sıraları
Mən bunu 'doğru' kafel adlandırıram. Çox dəlik deyil, çox az deyil. Şəbəkə açarları, saxlama rəfləri və ya hər biri təxminən 300W istifadə edən köhnə serverləriniz varsa, 25% mükəmməldir. Soyuq koridorunuzdakı bütün plitələrə havanı bərabər şəkildə itələyən əks təzyiq yaradır. Güclü partlayışlar əldə etməyəcəksiniz - hamar, sabit bir axın əldə edəcəksiniz. Server pərəstişkarlarının istədiyi məhz budur: qasırğa deyil, ardıcıl, sakit sərin hava axını.
56% Canavar: Yüksək Performanslı Hesablama
İndi ağır işlərə. GPU klasterləriniz, AI sürətləndiriciləriniz və ya sıx hesablama qovşaqlarınız varsa, 25% onları boğacaq. 56% deşikli plitələrə ehtiyacınız var. Ancaq xəbərdarlıq: bu plitələr döşəmənin altındakı təzyiqi kəskin şəkildə azaldır. Döşəmənin qalan hissəsini yaxşı grommets və fırça zolaqları ilə möhürləməlisiniz. Həmçinin, 25% kafelin yanında 56% kafel qoymayın. Hava 56% çuxurdan keçəcək və 25% kafel tamamilə ölü qalacaq. Yüksək istilik rəflərinizi birlikdə qruplaşdırın və onlara öz 'yüksək axın zonası' verin.
Bu deşik plitələri hara qoymaq olar
Bu, 'Əməliyyat' oyununa bənzəyir - lakin hava ilə. Delikli plitələri yalnız serverlərin havaya çəkdiyi yerin önünə qoyun. Bu soyuq keçiddir. Onları rafın ön hissəsini örtəcək şəkildə yerləşdirin. Onları rəfin arxasına (isti keçidin) altına qoymayın. Onları boş yerə qoymayın. Xahiş edirəm, onları pərəstişkarları olmayan böyük bir UPS qurğusunun altına qoymayın - siz sadəcə soyuq havanı kərpicə sərf edirsiniz. Şəbəkə modelindən istifadə edin. Əgər 10 rəfdən ibarət bir sıra varsa, rafın mərkəzi elektrik zolağı varsa, hər rəfə 2 deşik plitə qoyun, bir az səndələn.
İsti keçid/soyuq koridorun saxlanması və çuxur plitələri
İsti və soyuq havanı ayırmaq üçün maneələr əlavə etmisinizsə, qaydalar bir qədər dəyişir. Tamamilə qapalı soyuq koridorda içəridəki təzyiq sıxılır. Bu o deməkdir ki, siz adətən daha az deşikli plitələrdən istifadə edə bilərsiniz, çünki havanın serverlərdən başqa heç bir yeri yoxdur. Siz 35%-dən 25%-ə enə bilərsiniz. Lakin saxlama sızmaları daha da pisləşdirir. Qapalı soyuq koridorda bir itkin kafel atılan şar kimidir - bütün təzyiqiniz dərhal yox olur. Sıx möhürlənmiş vəziyyətdə saxlayın.
Gələcək GPU-lara hazırlıq
Gəlin qabağa baxaq. Növbəti nəsil çiplər daha da istiləşir, soyudulmur. Və daha sıx yığılırlar. Qarşıdakı 3-5 ildə rack gücünün hər rack üçün 30kW-50kW-a çatacağı gözlənilir. Əsas delikli plitələr kifayət etməyəcək. Yəqin ki, yüksək mərtəbələrdən tamamilə maye soyutmaya doğru hərəkət etməlisiniz. Ancaq növbəti iki il ərzində yüksək mərtəbələrlə yapışırsınızsa, tənzimlənən çuxurlu plitələr alın. Bunlarda sürüşmə ventilyasiyası var. Siz əl ilə açıq sahəni 0%-dən 60%-ə dəyişə bilərsiniz. Beləliklə, gələn ay həmin yeni GPU serverini əlavə etdikdə, sadəcə yeriyirsiniz, siferbatı çevirirsiniz və daha çox hava axını əldə edirsiniz. Yeni plitələr almağa ehtiyac yoxdur.
Döşəmənizi duş başlığı kimi düşünün
Ucuz duş başlığı istifadə etmisinizsə, əlinizi qaldırın. Onu yandırırsan və hər çuxurdan su damlayır, amma təzyiq yoxdur. Saçınızı yuya bilməzsiniz. Bu, həddən artıq çuxurlu plitələr olan bir mərtəbədir. İndi güclü bir sprey yaradan yaxşı ölçülü deşikləri olan yaxşı bir duş başlığını təsəvvür edin. Bu, bərk və çuxurlu plitələrin düzgün qarışığı olan bir mərtəbədir. Döşəmə altındakı boşluq sizin su borunuzdur. Plitələr burundur. Güclü, güclü bir sprey (yüksək sürət) zəif çiskin deyil, rafın yuxarı hissəsinə çatmaq istəyir. Plitələrinizi optimallaşdırdığınız zaman məlumat mərkəzinizi kədərli bir çiləyicidən serverləriniz üçün elektrik yuyucuya çevirirsiniz.
Nəticə: Asan nəfəs alın, daha çətin hesablayın
Biz bacardıq. Siz artıq hava axını ilə yeni başlayan deyilsiniz. İndi bilirsiniz ki, perforasiya edilmiş qaldırılmış döşəmə plitələri sadəcə 'deşikli döşəmələr' deyil, onlar dəqiq alətlərdir. Çuxur miqdarını (25%, 35% və ya 56%) rəfinizin istilik səviyyəsinə uyğunlaşdırmaqla, döşəmənin altındakı sızmaları möhürləməklə və bu plitələri yalnız soyuq koridorda yerləşdirməklə, PUE-ni (Güc İstifadə Effektivliyi) 15% və ya daha çox azalda bilərsiniz.
Get indi məlumat mərkəzini yoxlayın. İsti koridorda çuxurlu bir kafel görürsən? Köçürün. GPU-nu açan möhkəm bir kafel varmı? Dəyişdirin.
Serverləriniz daha sakit işləyəcək. AC daha az işləyəcək. Və müdiriniz aşağı elektrik hesabını sevəcək.
İndi get o hava axını düzəldin. Sizdə bu var.
