Bir saniyeliğine gerçekçi olalım. Sunuculara, anahtarlara ve depolamaya milyonlar harcadınız ancak veri merkeziniz hâlâ jet motoru gibi ses çıkarıyor ve ekipmanınız aşırı ısınıyor. Sorun ne? Çoğunlukla ayaklarınızın altındadır; yükseltilmiş yer karolarınız. Özellikle delikli olanlar. Bu parçaları doğru şekilde yapmazsanız, soğutma faturalarınız tavan yapacak ve BT donanımınız yavaşlayacaktır. Bu kılavuzda, hava akışınızı düzeltmek için delikli yükseltilmiş yer karoları hakkında bilmeniz gereken her şeyi size göstereceğim. Haydi başlayalım.
Veri Merkeziniz Neden Sauna Gibi Hissediyor?
Hiç bir sunucu odasına girip sıcak hava patlamasını hissettiniz mi? Hiç eğlenceli değil. Çoğu yönetici klimayı açmanın çözüm olduğunu düşünüyor. Ancak bu, ön kapıyı açık bırakarak evinizi soğutmaya çalışmak gibidir; yalnızca enerji israfı yaparsınız. Delikli yükseltilmiş yer karoları soğuk havanın bekçileridir. Zeminin altından soğuk havayı alıp soğuk koridorlara yönlendiriyorlar. Bu döşemeler kötü seçilirse veya yerleştirilirse, hava kablo deliklerinden kaçar, yalıtılmamış bağlantı noktalarının etrafından sızar veya sunucularınıza zar zor ulaşacak kadar az bir basınçla dışarı çıkar. Bunu düzeltmemiz gerekiyor. Bugün sizi hava akışı uzmanı yapacağız.
Delikli Yükseltilmiş Yer Karosu Nedir?
Basitçe söylemek gerekirse bunlar, içinde delikler bulunan zemin panelleridir. Yükseltilmiş zemin veri merkezinin belirli noktalarındaki katı panellerin yerini alırlar. Katı paneller soğuk havayı aşağıda tutarken, bunlar soğuk havanın sunucularınıza doğru akmasını sağlar. Çelik, alüminyum veya kompozit malzemelerden üretilirler. Önemli olan sadece delikler değil, delik düzenidir. Bazılarının yuvarlak delikleri vardır; bazılarında hava akışını yönlendiren açılı havalandırma delikleri bulunur. Ancak çoğu veri merkezi için standart yuvarlak delikli döşeme gayet iyi çalışıyor. Bu parçalar olmadan sunucu fanlarınız yeterli havayı almakta zorlanır.
Delikler Nasıl Çalışır: Perforasyon Oranlarının Açıklaması
Bir dakikalığına biraz teknik konuşalım. 'Açık Alan Yüzdesi' terimini duyacaksınız; bu yalnızca toplam delik alanının toplam döşeme alanına bölümüdür. Örneğin %25 açık alana sahip bir karonun %75'inin hala sağlam olduğu anlamına gelir. Bu sayı hava basıncını ve akışını etkiler. Zorluk şu: Düşük basınçlı çok fazla delik = hava çok yavaş çıkıyor. Yüksek basınçlı çok az delik = hava, yangın hortumu gibi dışarı fırlar ancak yeterli alanı kaplamaz. Her şey dengeyle ilgili. Havayı tüm döşemelere eşit bir şekilde yaymak için yeterli dirence ihtiyacınız var, ancak soğutma ünitelerinizin buna karşı mücadele edeceği kadar fazla değil.
Katı ve Delikli Fayanslar: Hangisi Kazanır?
Masif fayanslar sıkıcı ve güvenilir olanlardır. Zemini kapatıyorlar. Üzerlerinde yürürsün, üzerlerine raflar koyarsın. Görevleri soğuk havayı aşağıda tutmaktır. Delikli fayanslar farklıdır; görevleri soğuk havayı yukarı çıkarmaktır. En büyük hata? Ekipmanın bulunmadığı yerlerde delikli fayansların kullanılması. Sıcak koridora havalandırmalı bir döşeme koyarsanız, sunuculardan gelen sıcak hava doğrudan bu delikten aşağı inecek ve aşağıdaki soğuk havayla karışacaktır. Bu kötü.
Basit kural: Sunucu giriş fanlarınızın hemen önündeki soğuk koridor dışında her yerde sağlam döşemeler kullanın.
Hava Akışını Düzeltmek Neden Önemlidir?
Hava akışını göz ardı etmek pahalıdır. Bu sadece elektrik faturalarının artmasıyla ilgili değil; sunucularınızın ömrüyle de ilgili. Her 10°C (18°F) sıcaklık artışı donanım ömrünü yarı yarıya azaltabilir. Delikli fayanslar satın alabileceğiniz en ucuz sigortadır. Bunları doğru yerleştirip seçtiğinizde aslında termostatınızı yükseltebilirsiniz. Evet, doğru okudun. ASHRAE (soğutma standartları grubu), hava akışı iyi yönetilirse artık daha yüksek sıcaklıklar (genellikle 75-80°F) önermektedir. Bu, soğutmada büyük miktarda tasarruf sağlar. Yani fayanslarınızı tamir etmek sadece ekipmanınızı soğutmakla kalmaz; nakitten tasarruf etmenizi sağlar.
Hava Akışını Engelleyen (Ve Donanımı Öldüren) Yaygın Hatalar
Bazı kötü kurulumlar gördüm. Her karoda delikler bulunan veri merkezleri; zemin İsviçre peynirine benziyor ve altında hava basıncı yok. Hava orada duruyor. Daha da kötüsü, zemindeki açık deliklerden geçen büyük kablo demetlerinin, sıranın en ucuna ulaşmadan tüm soğuk havanın kaçmasına izin verdiğini görüyorum. Kışın pencereyi açık bırakmazsınız, o halde neden raflarınızın altında delikler bırakasınız ki? Bu tuzaklardan kaçının.
Hata #1: Yanlış Delik Miktarını Kullanmak
Düşük yoğunluklu depolama çalıştırıyor ancak %56 açık kutucuk mu kullanıyorsunuz? Bölgeyi dışarı taşan ve hiçbir şey yapmayan soğuk havayla dolduruyorsunuz. Öte yandan, AI eğitim kümelerini yüksek ısıyla mı çalıştırıyorsunuz, ancak ucuz %12'lik açık kutucuklar mı kullanıyorsunuz? Ekipmanınız hava sıkıntısı çekiyor. Döşemeyi ısıyla eşleştirin. Yüksek ısı = daha fazla delik. Düşük ısı = daha az delik veya katı döşeme.
Hata #2: Zeminin Altındaki Hava Basıncını Göz ardı Etmek
Zeminin altındaki boşluk hava deponuzdur. Çok fazla açıklık oluşturursanız (delikli fayanslar + kablo delikleri + sızıntılar) basınç düşer. Basınç düştüğünde hava yavaşlar. Yavaş hava, sunucularınıza ulaşmadan önce ısınır. Pozitif baskıya ihtiyacınız var. Basit bir test: bir mendil alın. Delikli bir kiremitin üzerine koy. Aşağıya çekilir mi? Bu kötü (negatif baskı). Patlayıp yüzüyor mu? Bu iyi. Hiçbir şey yapmıyor mu? Bu bir ölü bölge.
Rafınız için Doğru Delikli Fayans Nasıl Seçilir
Endişelenmeyin; mühendis olmanıza gerek yok. Sadece şu basit formülü kullanın: Rafın ihtiyaç duyduğu toplam hava ÷ Rafın önündeki döşeme sayısı = Döşeme başına gereken hava. Çoğu sunucu üreticisi gerekli hava akışını teknik özellikler sayfasında listeler. Bu sayıları toplayın. Ardından fayans üreticinizin veri sayfasını kontrol edin. %25 delikli standart bir karo normal basınçta genellikle 400-600 CFM sağlar. Rafınızın 1000 CFM'ye ihtiyacı varsa bu döşemelerden ikisine veya %56 delikli bir döşemeye ihtiyacınız vardır. Basit matematik ekipmanınızı korur.
Adım 1: Soğutma Ünitenizin Hava Çıkışını Ölçün
Herhangi bir karo satın almadan önce neyle çalıştığınızı bilin. CRAC üniteniz belirli miktarda havayı iter. Toplamda yalnızca 10.000 CFM üretiyorsa, her biri 1.000 CFM gerektiren 20 döşeme kuramazsınız; havasız kalırlar. Zemin seviyesinde hava akışını kontrol etmek için bir termal kamera veya anemometre (rüzgar hızı ölçer) kullanın. Mevcut döşemelerinizden çıkan hava dakikada 300 feet'in (FPM) altındaysa, basıncınız çok düşük demektir. Fayansları değiştirmeden önce sızıntıları kapatmanız veya daha fazla soğutma ünitesi eklemeniz gerekir.
Adım 2: Delik Miktarını Isı Seviyesiyle Eşleştirin
İşte benim kopya kağıdım:
Düşük ısı (raf başına 2 kW'ın altında): %15-20 delikli fayanslar
Orta ısı (raf başına 2-5kW): %25-35 delikli fayanslar
Yüksek ısı (raf başına 5-10kW): %40-56 delikli fayanslar
Aşırı ısı (10kW+): Aktif zemin ızgaralarına veya kanallarına ihtiyaç vardır. 15 kW'ı basit deliklerle soğutmaya çalışmayın; bu, bir yüzme havuzunu doldurmak için bahçe hortumu kullanmaya benzer.
%25, %35 veya %56 Delik mi? Hangisini Satın Almalı?
Seçenekleri gözden geçirelim. Eski veri merkezlerinin çoğu %25'lik boşluklarla gayet iyi durumda. İyi bir direnç sağlar, bu da zemin üzerinde eşit basınç anlamına gelir. %35'lik delikler modern blade sunucular için en uygun noktadır; hız kaybı olmadan daha fazla havanın geçmesine izin verirler. Deliklerin %56'sı ('yüksek akış' olarak adlandırılır) neredeyse ızgaralara benzer; içlerini görebilirsiniz. Bunları yalnızca yüksek yoğunluklu bilgi işlem satırları gibi 'sıcak noktalar' için kullanın. Bunları dikkatli kullanın, yoksa yakındaki döşemelerdeki tüm havayı çalacaklar.
%25 Kuralı: Düşük Yoğunluklu Sunucu Satırları
Ben buna 'tam doğru' döşemesi diyorum. Ne çok fazla delik ne de çok az. Her biri yaklaşık 300 W kullanan ağ anahtarlarınız, depolama raflarınız veya daha eski sunucularınız varsa %25 mükemmeldir. Havayı soğuk koridorunuzdaki tüm döşemelere eşit şekilde iten karşı basınç oluşturur. Güçlü patlamalar yaşamazsınız; düzgün, istikrarlı bir akış elde edersiniz. Sunucu hayranlarının istediği tam olarak budur: kasırga değil, tutarlı, sessiz bir soğuk hava akışı.
%56 Canavarı: Yüksek Performanslı Bilgi İşlem
Şimdi ağır işlere geçelim. GPU kümeleriniz, yapay zeka hızlandırıcılarınız veya yoğun bilgi işlem düğümleriniz varsa %25'i onları boğacaktır. %56 delikli fayanslara ihtiyacınız var. Ancak uyarı: Bu fayanslar zemin altı basıncını büyük ölçüde azaltır. Zeminin geri kalanını iyi rondelalar ve fırça şeritleriyle kapatmanız gerekebilir. Ayrıca %25'lik bir döşemenin yanına %56'lık bir döşeme koymayın. Hava %56'lık delikten içeri girecek ve %25'lik döşemeyi tamamen ölü bırakacaktır. Yüksek ısı raflarınızı bir arada gruplayın ve onlara kendi 'yüksek akış bölgeleri' verin.
Bu Delikli Fayansları Nereye Koymalı
'Operasyon' oyununa benziyor ama havalı. Delikli döşemeleri yalnızca sunucuların hava çektiği yerin hemen önüne yerleştirin. Soğuk koridor burası. Bunları rafın önünü kaplayacak şekilde yerleştirin. Bunları rafın (sıcak koridor) arkasına koymayın. Bunları boş alanın altına koymayın. Ve lütfen onları fanı olmayan büyük bir UPS ünitesinin altına koymayın; yalnızca tuğlaya soğuk hava harcarsınız. Izgara deseni kullanın. 10 raftan oluşan bir sıranız varsa, raf başına 2 delikli döşeme koyun; rafın merkezi bir uzatma kablosu varsa hafifçe şaşırtın.
Sıcak Koridor/Soğuk Koridor Muhafazası ve Delikli Fayanslar
Sıcak ve soğuk havayı ayırmak için bariyerler eklediyseniz kurallar biraz değişir. Tamamen kapalı bir soğuk koridorda içerideki basınç hapsedilir. Bu, genellikle daha az delikli döşemeleri kullanabileceğiniz anlamına gelir çünkü havanın sunucular dışında gidecek hiçbir yeri yoktur. %35'lik deliklerden %25'e düşebilirsiniz. Ancak çevreleme sızıntıları daha da kötüleştirir. Kapalı bir soğuk koridordaki tek bir eksik karo, patlamış bir balon gibidir; tüm baskınız anında kaybolur. Sıkıca kapalı tutun.
Geleceğin GPU'larına Hazırlanmak
Önümüze bakalım. Yeni nesil çipler soğumak yerine daha da ısınıyor. Ve giderek daha sıkı paketleniyorlar. Raf gücünün önümüzdeki 3-5 yıl içinde raf başına 30kW-50kW'a ulaşması bekleniyor. Temel delikli fayanslar yeterli olmayacak. Muhtemelen yükseltilmiş zeminlerden tamamen sıvı soğutmaya geçmeniz gerekecektir. Ancak önümüzdeki iki yıl boyunca yükseltilmiş zeminlere sadık kalacaksanız, ayarlanabilir delikli fayanslar satın alın. Bunlar sürgülü bir havalandırmaya sahiptir. Açık alanı elle %0'dan %60'a değiştirebilirsiniz. Yani gelecek ay yeni GPU sunucusunu eklediğinizde, oraya gitmeniz, bir kadranı çevirmeniz ve daha fazla hava akışı elde etmeniz yeterli. Yeni fayans satın almanıza gerek yok.
Zemininizi Duş Başlığı Olarak Düşünün
Ucuz bir duş başlığı kullandıysanız elinizi kaldırın. Çalıştırıyorsunuz ve her delikten su damlıyor ama basınç yok. Saçınızı durulayamazsınız. Bu çok fazla delikli fayansın olduğu bir zemin. Şimdi güçlü bir sprey oluşturan, iyi boyutlandırılmış deliklere sahip iyi bir duş başlığı hayal edin. Bu, masif ve delikli karoların doğru karışımına sahip bir zemin. Zeminin altındaki boşluk sizin su borunuzdur. Fayanslar nozüldür. Rafın tepesine hafif bir çiseleme değil, kuvvetli, kuvvetli bir sprey (yüksek hız) ulaşsın istiyorsunuz. Döşemelerinizi optimize ettiğinizde, veri merkezinizi üzücü bir yağmurlama sisteminden sunucularınız için güçlü bir yıkayıcıya dönüştürürsünüz.
Sonuç: Kolay Nefes Alın, Daha Güçlü Hesaplayın
Başardık. Artık hava akışına yeni başlayan biri değilsiniz. Artık delikli yükseltilmiş yer karolarının yalnızca 'delikli zeminler' olmadığını, aynı zamanda hassas aletler olduğunu biliyorsunuz. Delik miktarını (%25, %35 veya %56) rafınızın ısı seviyesiyle eşleştirerek, zemin altındaki sızıntıları kapatarak ve bu döşemeleri yalnızca soğuk koridora yerleştirerek PUE'nizi (Güç Kullanım Verimliliği) %15 veya daha fazla azaltabilirsiniz.
Hemen veri merkezinizi kontrol edin. Sıcak koridorda delikli bir fayans görüyor musun? Hareket ettir. GPU'yu aç bırakan sağlam bir döşeme var mı? Değiştir.
Sunucularınız daha sessiz çalışacak. Klimanız daha az sıklıkta çalışacaktır. Ve patronunuz daha düşük elektrik faturasına bayılacak.
Şimdi git şu hava akışını düzelt. Bu sende var.
