Rozpočet na napájanie a chladenie pre výpočtové laboratórium robotiky a umelej inteligencie

Výpočtová časť robotického laboratória je tá časť, ktorá sa fotografuje pre webovú stránku. Zásuvka je časť, ktorá rozhoduje o tom, či niečo z toho skutočne funguje. Väčšina laboratórií, ktoré sme videli a ktoré „prešli na umelú inteligenciu“, podceňuje svoju trvalú elektrickú záťaž zhruba dvojnásobne, zistia to v prvom mesiaci, keď sa počas tréningu vypne istič, a potom strávia ďalší štvrťrok prestavbou elektrickej siete v miestnosti, o ktorej si mysleli, že je hotová.

Tento článok je rozpočtovou verziou tejto konverzácie predtým, ako podpíšete nájomnú zmluvu alebo si objednáte server. Zahŕňa kompletný zoznam zaťaženia – server, roboty, pracovné stanice, sieť, osvetlenie – výpočty chladenia, ktoré určujú, či miestnosť zvládne všetky požiadavky, elektrickú inštaláciu, ktorú skutočne potrebujete, a kontrolný zoznam, ktorý treba odovzdať elektrikárovi predtým, ako do steny vŕta.

Publikum: manažéri laboratórií, integrátori a nákupcovia v Európe, ktorí umiestňujú jeden alebo dva servery s umelou inteligenciou a niekoľko humanoidných alebo štvornohých robotov do jednej miestnosti. V celom texte budeme predpokladať elektrickú realitu v EÚ s napätím 230 V / 400 V. Severoamerickí čitatelia môžu vydeliť dvoma väčšinu napätí a dospieť k približne rovnakým záverom.

Úplný zoznam nákladov

Laboratórium robotiky a umelej inteligencie má viac zariadení, ktoré nepretržite odoberajú energiu, ako napočítajú nováčikovia, ktorí ho stavia. Výpočty sú hlavným prvkom; zvyšok je jadrom účtu.

Predtým, ako sa pustíme do príkladu, je dobré upozorniť na niekoľko vecí:

• Špecifikácia nabíjačky G1 (54 V, 5 A ≈ 270 W) je oveľa menšia, než si ľudia myslia. Väčšie humanoidné platformy v triede 70 – 130 kg môžu z rýchlonabíjačky odoberať 1 kW alebo viac; pravidlo „nabíjanie humanoidov = 1 kW“ je síce konzervatívne, ale nie šialené. Skontrolujte si skutočné špecifikácie nabíjačky pre vašu jednotku.
• Pracovné stanice nie sú „zadarmo“. Vývojár s procesorom 5090 na svojom počítači, ktorý vykonáva lokálnu inferenciu a ladenie, dokáže udržať spotrebu 500 W. Štyria vývojári predstavujú nepretržitú spotrebu 2 kW, čo je porovnateľné so serverom so 4 GPU.
• Osvetlenie a rôzne veci sa sčítavajú. Laboratórium s rozlohou 30 m² s vhodným osvetlením, tromi tlačiarňami a spájkovacou lavicou má bez problémov spotrebu 1 kW, kým sa objaví akýkoľvek hardvér umelej inteligencie.

Pracovaný príklad: jeden server, dvaja humanoidi, štyri stoly

Realistická zostava: 1× server K-AI 256/8x, 2× humanoidné roboty na nabíjacích dokoch, 4× vývojárske pracovné stanice s monitormi, sieťové vybavenie, osvetlenie a malá dielenská lavica.

1× K-AI 8-GPU server            ~ 4.5 kW
2× humanoid chargers (~1 kW ea) ~ 2.0 kW   (assume larger platforms, conservative)
4× workstations (500 W ea)      ~ 2.0 kW
8× monitors (50 W ea)           ~ 0.4 kW
Network gear + APs              ~ 0.2 kW
Lighting + misc                 ~ 0.6 kW
                                --------
IT + lab load                   ~ 9.7 kW sustained

Zaokrúhlite na ~10 kW udržateľných pre plánovanie. Toto číslo ovplyvňuje všetky ostatné rozhodnutia v tomto článku. Poznámka: toto číslo 10 kW predpokladá, že obaja humanoidi sa nabíjajú súčasne, čo sa stane, ak tím zle plánuje – čo sa stane. Naplánujte si prípad, keď sa všetko nabíja naraz.

Pre porovnanie: menšie laboratórium s jedným 4-GPU serverom, jedným humanoidom, dvoma stolmi a zvyškom v menšom rozsahu dosahuje spotrebu okolo 5 – 6 kW. Väčšie laboratórium s dvoma 8-GPU servermi a flotilou štyroch robotov dosahuje pohodlne 18 – 20 kW. „10 kW laboratórium“ je stredný prípad, ktorý vidíme v roku 2026.

Jednofázové vs. trojfázové: kedy stačí každá fáza

Tu je tá istá otázka zhrnutá do toho, čo je dôležité pre laboratórium: ktorý obvod drží záťaž?

Laboratórium s výkonom 10 kW sa nachádza tesne nad limitom 400 V 16 A trojfázového nepretržitého napájania, čo znamená, že trojfázové napájanie 16 A je teoreticky možné, ale neponecháva priestor pre druhý server alebo tretieho humanoida. Správna odpoveď pre laboratórium s výkonom 10 kW v roku 2026 je trojfázové napájanie 400 V 32 A na červenom 5-pinovom konektore podľa normy IEC 60309 (CEE)., rozdelené interne na jednofázové 16 A odbočné obvody na rozvádzači.

Voľba 32 A trojfázového prepojenia nie je len o dnešnej záťaži. Je to najlacnejšia poistka proti prekvapeniu typu „pridali sme server“. Hraničné náklady na inštaláciu medzi 16 A a 32 A trojfázovým prepojením sú malé – istič, konektor a o niečo ťažšie vedenie kábla. Náklady na prestavbu o dvanásť mesiacov neskôr sú niekoľkonásobne vyššie, pretože ťaháte nový kábel cez dokončené steny.

Pasca „Len to zapojím“

Takmer každý, kto pracuje v laboratóriu prvýkrát, si myslí, že existujúca elektroinštalácia v miestnosti postačí. Takmer nikdy to neplatí.

Typická európska kancelárska miestnosť má jeden alebo dva 16 A jednofázové obvody napájajúce všetky zásuvky, často zdieľané s osvetlením na tom istom panelovom napájaní. Zapojte 4-GPU server (2.4 kW), humanoidnú nabíjačku (1 kW), dve pracovné stanice (1 kW), monitory a svetlá (300 W) a máte 4.7 kW pri teoretickom obvode s výkonom 3.7 kW / 2.95 kW. Istič sa vypne pri prvom trvalom tréningovom behu. Niekedy sa vypne o 02:30 v utorok, keď v budove nikto nie je, a vy prídete v stredu a zistíte, že server bol cez noc trikrát tvrdo reštartovaný.

Tomu sa dá predísť pätnástimi minútami premýšľania. Spočítajte si záťaž, pozrite sa na istič a rozhodnite sa, či potrebujete zavolať elektrikára. pred Zadáte objednávku servera. Návšteva elektrikára na mieste stojí niekoľko stoviek eur; oprava niekoľko tisíc plus mesiac zdržania projektu.

Obzvlášť nepríjemný variant: obvod drží pri priemernom zaťažení, ale vypne sa pri prechodných špičkách. Server s 8 GPU 5090 (trvalý výkon 4.5 kW) môže počas prechodu medzi tréningovými krokmi prudko stúpnuť na 6 kW na desiatky milisekúnd. Jednofázový istič s krivkou B 32 A (trvalý výkon 7.4 kW) túto záťaž pohltí jemne. Istič s krivkou C 16 A na nesprávnej strane silne zaťaženého obvodu to nerobí. Uvidíte to ako „server sa náhodne reštartuje, keď spustíme tréningovú prevádzku“, čo nakoniec diagnostikoval elektrikár s kliešťovým multimetrom.

HVAC: každý vstupný kW sa zmení na výstupný kW

Prvé fyzikálne pravidlo pre výpočtové laboratórium: Všetka elektrická energia, ktorú vložíte do miestnosti, sa v nej premení na teplo. Server s výkonom 4 kW je 4 kW ohrievač priestoru s dodatočnými krokmi. Systém HVAC musí toto teplo odvádzať rovnakou rýchlosťou, inak teplota v miestnosti stúpne, kým sa buď zariadenie nezastaví, ľudia neodídu, alebo oboje.

1 kW of heat  =  3,412 BTU/h
1 ton of cooling  =  3.517 kW  =  12,000 BTU/h

Pre laboratórium s výkonom 10 kW je potrebné nepretržite odvádzať 10 kW tepla. To je približne 34 000 BTU/h alebo približne 2.85 tony chladenia. Zariadenie je však dimenzované na nominálny výkon za špecifických podmienok a miestnosť so slabým prúdením vzduchu, slnkom na južnej stene a ľuďmi vo vnútri stráca chladiacu kapacitu. Štandardné pravidlo pre svetlú výšku:

HVAC capacity  =  1.3 to 1.5 × IT + lab load

Pre IT systém s výkonom 10 kW nainštalujte chladiaci výkon 13 – 15 kW. Zaokrúhlite na systém 15 kW. Znie to ako prehnaná záťaž až do prvých júlových popoludní o 35 °C, keď sa teplota v budove postupne zvyšuje a vaša klimatizácia s menovitým výkonom dodáva 80 % svojho výkonu.

Norma ASHRAE TC 9.9 stanovuje tepelný obal, ktorý dodržiava každý návrh dátového centra. Aktuálny odporúčaný rozsah je 18–27 °C suchý teplomer na vstupe servera, s vlhkosťou rosného bodu 8 °C do 60 % relatívnej vlhkosti, strop ≤ 80 % relatívnej vlhkosti. Novšia trieda H1 pre AI/HPC s vysokou hustotou to sprísňuje na 18-22 ° CPre malé laboratórium s grafickými procesormi profesionálnej triedy (5090, 4090) je širšie rozpätie 18 – 27 °C dostatočné; ako návrhový bod sa zamerajte na 22 °C a akceptujte, že letné popoludnia môžu vystúpiť na 25 °C.

Vlhkosť je rovnako dôležitá ako teplota, a to z dvoch dôvodov. Pod 30 % relatívnej vlhkosti sa zvyšuje riziko elektrostatického výboja – čo je zlá správa pre ľudí manipulujúcich s robotickou elektronikou a zlá správa pre citlivé senzory. Nad 80 % relatívnej vlhkosti sa zvyšuje riziko kondenzácie na studených povrchoch a korózia sa zrýchľuje v dlhodobom horizonte. Snažte sa o relatívnej vlhkosti 40 – 60 % po celý rok. Väčšina delených klimatizačných jednotiek aktívne neriadi vlhkosť; pre laboratórium vo vlhkom pobrežnom podnebí sa oplatí kúpiť si špecializovaný odvlhčovač alebo jednotku triedy CRAC, ktorá to robí.

Možnosti chladenia: prenosné vs. delené vs. CRAC

Úprimné odporúčanie podľa veľkosti laboratória:

• IT záťaž pod 5 kW: Jedna dobrá prenosná klimatizácia s dvoma hadicami funguje v núdzi, ale jedna nástenná delená klimatizačná jednotka je čistejšia, tichšia a stojí približne rovnako veľa peňazí, ak zohľadníte horšiu účinnosť prenosnej klimatizácie za pár rokov.
• IT záťaž 5–15 kW: nástenná alebo kazetová delená klimatizácia s rozmermi 1.3–1.5× záťaže IT. Toto je ideálna voľba pre laboratórium s jednou miestnosťou. Delený systém s výkonom 15 kW pozostáva z jednej vonkajšej kompresorovej jednotky a jednej alebo dvoch vnútorných hlavíc.
• IT záťaž 15–40 kW: multisplit systém alebo prechod na malý CRAC. V takomto rozsahu začnete chcieť reguláciu vlhkosti a skutočne musíte premýšľať o redundancii (porucha jedného kompresora = žiadne chladenie = tepelné vypnutie po 20 minútach pri záťaži).
• IT záťaž nad 40 kW: vyhradená jednotka CRAC alebo okruh chladenej vody; prevádzkujete malú serverovňu, nie laboratórium. Toto je mimo rozsahu tohto článku.

Prenosné klimatizácie si zaslúžia osobitné upozornenie. Prenosné jednotky s jednou hadicou nasávajú studený vzduch zvnútra miestnosti, vyfukujú teplo von cez hadicu a nasávajú náhradný vzduch zo zvyšku budovy (alebo von, cez akúkoľvek existujúcu cestu úniku). To znamená, že sú v konečnom dôsledku neefektívne – na každý 1 kW dodaného chladenia uniká späť ~0.3 – 0.5 kW teplého vzduchu. Sú tiež dostatočne hlučné na to, aby znepríjemnili pracovný priestor. Používajte ich ako dočasné riešenie, nie ako plán.

Prúdenie vzduchu: dôležitá je disciplína pri stojanoch spredu dozadu

Systém HVAC dodáva do miestnosti chladný vzduch; stojan ho premieňa na užitočnú prácu. Mechanickou otázkou je, či sa chladný vzduch skutočne dostane k vstupom GPU predtým, ako sa zmieša s horúcim odvádzaným vzduchom.

Štandardná konvencia je prúdenie vzduchu z predného do zadného rackuStudený vzduch vstupuje do racku spredu, prechádza cez servery a vystupuje vzadu. Servery K-AI sa riadia touto konvenciou s 3× 120 mm prednými nasávacími otvormi a 1× 120 mm zadným výfukovým otvorom na šasi, dimenzovanými pre trvalé nepretržité zaťaženie 24 hodín denne, 7 dní v týždni s priemyselnými ventilátormi. Toto je rovnaká konvencia, akú používa každá serverovňa z rovnakého dôvodu: umožňuje vám oddeliť prívod studeného vzduchu od návratu teplého vzduchu.

V serióznom dátovom centre sú prívod studeného vzduchu a návrat teplého vzduchu fyzicky oddelené izoláciou uličky – panelmi, závesmi alebo úplnými krytmi okolo radov stojanov. V malom laboratóriu s jedným alebo dvoma stojanmi pri stene zvyčajne nie je možné vybudovať plnú izoláciu horúcej uličky, ale môžete použiť jednoduchšiu verziu:

• Čelá serverov sú otočené k zdroju studeného vzduchu (rozdelená sieťová zásuvka alebo dvere z chladnejšej miestnosti).
• Zadné strany serverov smerujú k ceste horúceho návratu (stena, ideálne s vývodom klimatizácie vysoko na tej istej stene).
• Žiadne zariadenie s bočným alebo horným nasávaním zmiešané v racku. (To vylučuje kancelárske stoly nahromadené na vrchu racku, čo sme videli už viackrát.)

Bez oddelenia sa studený prívod mieša s horúcim výfukovým vzduchom predtým, ako sa dostane do racku, efektívna chladiaca kapacita klesá o 15 – 25 % a grafické karty sa počas popoludnia pomaly prehrievajú. Štúdie zamerané na izoláciu dátových centier ukazujú 20 – 25 % zníženie spotreby energie ventilátorov a 20 % zníženie spotreby chladiča pri pridaní správnej izolácie. Laboratórna verzia toho istého princípu: nenechajte vzduch miešať sa tam, kde nemusí.

Úvahy o batérii a nabíjaní

Nabíjanie robota nie je stála záťaž. Nabíjačka odoberá takmer menovitý výkon počas prvých 70 – 80 % nabíjacieho cyklu, potom sa nabíjanie znižuje. Humanoid, ktorý sa vráti z tréningu s 20 % nabitou batériou a zapojí sa do zásuvky, odoberá plný výkon nabíjačky hodinu alebo dve a potom ďalšiu hodinu spotrebuje menej energie.

Dva dôsledky:

1. Charger Draw súťaží so serverom. Ak váš obvod obsahuje iba server, ale je dimenzovaný presne na 80 % ističa, zapojenie robota na plný odber vás preťaží. Vyššie uvedený laboratórny výpočet 10 kW predpokladal, že sa oba roboty nabíjajú súčasne; ak je vaša realita „nabíjať jedného robota počas tréningu“, môžete ušetriť jeden kW z rozpočtu. Ak je vaša realita „nabíjať oba roboty na konci každého pracovného dňa, zatiaľ čo dlhá tréningová úloha beží cez noc“, nemôžete.
2. Rozvetvené alebo nadrozmerné. Jednoduchým riešením je predimenzovať obvod. Lacným riešením je rozložiť nabíjanie pomocou rozvrhu prepínaných zásuviek PDU – robot A nabíja 18:00–22:00, robot B nabíja 22:00–02:00, tréningová úloha má medzi tým celý obvod. Riešenie s plánovaním PDU je krehké, pretože ľudia zabúdajú zapojiť roboty; odporúčame riešenie s predimenzovaním.

Jemnejší bod: roboty majú vlastné batérie, takže výpadok na niekoľko minút nie je problémom robota. Robotické nabíjačky s UPS-back takmer nikdy nepotrebujete — robot zostáva napájaný vlastnou batériou a nabíjanie sa obnoví až po obnovení napájania. Rozpočet na UPS je určený pre server, nie pre celý vozový park.

Dimenzovanie UPS

Server je súčasť, ktorú si nemôžete dovoliť stratiť kvôli výpadku prúdu alebo krátkodobému výpadku. Plynulé vypnutie z trvalej tréningovej úlohy trvá niekoľko minút. Kolísavé napätie v sieti (klesne na 0 V na 200 ms, obnoví sa a po 30 sekundách opäť klesne) trvá dlhšie.

Pre výpočty umelej inteligencie vždy špecifikujte online topológiu s dvojitou konverziou. Line-interaktívne UPS jednotky majú pri prepnutí na batériu prenosový čas 4–10 ms – čo je v poriadku pre kancelárske pracovné stanice, občas katastrofálne pre inferenčný server uprostred jadra CUDA. 4 ms nestačí na zlyhanie všetkého hardvéru, ale stačí na to, aby sme videli, ako sa tréningové úlohy zaseknú a vyžadujú si tvrdý reštart. Dvojitá konverzia má nulový prenosový čas, pretože záťaž je vždy na invertore; batéria sa stáva iba zdrojom jednosmerného prúdu.

Častá chyba: poddimenzovanie UPS na prechodové špičky. 3 kVA UPS pred 2.5 kW trvalým serverom s 3 kW prechodovými špičkami sa vypne na bypass presne vtedy, keď to najviac potrebujete. Nadimenzujte UPS pre prechodovú krivku, nie pre trvalý priemer. Toto je rovnaká logika ako pri dimenzovaní zdroja PSU od W04.

Ako už bolo spomenuté, roboty nepotrebujú UPS. Ušetrite kVA v rozpočte na výpočty.

Betónová elektroinštalácia pre laboratórium s výkonom 10 kW

Čo odporúčame komplexne pre 10 kW robotické + AI laboratórium pri novej inštalácii:

Trojfázový 32 A laboratórny subpanel rozdelený na šesť vyvážených 16 A jednofázových odbočných obvodov – serverové zdroje na samostatných fázach, izolované systémy HVAC, robotické nabíjačky na vlastnom ističi.

Poznámky k tomuto rozloženiu:

• Trojfázový 32 A na laboratórnom pomocnom paneli je materské napájanie. Odtiaľ z každej vetvy odchádzajú jednofázové 16 A obvody, zhruba vyvážené.
• Dedikované serverové obvody, jeden na zdroj. Server s dvoma zdrojmi PSU má dva káble na dvoch rôznych fázach – rovnaká logika ako pri rozdelenom zapojení na trojfázovom PDU.
• Obvod nabíjačky humanoidov je oddelený od servera. Zapojenie robota do siete nenarúša elektrické prostredie servera.
• HVAC na vlastnom okruhu. Zapínanie kompresora klimatizácie je značné; zdieľanie so serverovým obvodom si vyžaduje rušivé vypnutia.
• Prúdový chránič typu B. Spínané zdroje s korekciou účinníka (PFC) majú malé jednosmerné únikové komponenty, ktoré môžu oklamať prúdové chrániče typu AC. Typ B je správna odpoveď; typ A je prijateľný v menších obvodoch.

Toto je jednodňová práca pre certifikovaného elektrikára v budove, ktorá už má trojfázové vedenie k hlavnému rozvádzaču. V budove s iba jednofázovým napájaním môže byť potrebné, aby dodávateľ energií vylepšil napájanie, čo predlžuje dobu prevádzky o niekoľko týždňov. Pred prenájmom rozvádzač skontrolujte.

Úprimný pohľad

Väčšina laboratórií podceňuje svoje potreby v oblasti napájania a chladenia približne dvojnásobne. Tento vzorec je konzistentný: niekto navrhuje miestnosť okolo servera, ktorý kupuje dnes, zabudne na druhý server, ktorý bude chcieť o rok, poddimenzuje chladenie, pretože predajca uviedol výkon v kW, a vynechá UPS, pretože „máme elektrinu z rozvodnej siete, je to v poriadku“.

Náklady na to, ak to urobíte správne hneď na prvýkrát – pripojenie 32 A trojfázového napájania, inštalácia 15 kW deleného klimatizačného systému, umiestnenie 8 kVA UPS s dvojitou konverziou pred server – sa pre 10 kW laboratórium pohybujú v rozmedzí 8 000 až 15 000 EUR. Náklady na nesprávne vykonanie sú zhruba rovnaké, plus štvrtina oneskorenia projektu a strata dôveryhodnosti z dôvodu oznámenia tímu „server dnes nefunguje“. S nesprávnym postupom sme sa stretávali častejšie ako so správnym postupom.

Naplánujte si 1.5-násobok vášho súčasného zaťaženia. Aktuálne zaťaženie berte ako podlahu, nie ako strop. Náklady na istič o jednu veľkosť väčší pri inštalácii sú malé. Náklady na opakovanú inštaláciu sú vysoké.

Toto je súčasť Kentino Wiki, referenčnej série o umelej inteligencii, robotike a systémoch, ktoré ich spájajú. Komentáre a opravy sú vítané na info@kentino.com.