top of page

Wydajność centrów danych AI Nvidia przesuwa się z chipów do oprogramowania

5 dni temu
13 minut(y) czytania

Wydajność centrów danych AI Nvidia stała się problemem oprogramowania, mimo wieloletniego skupienia na szybszych chipach, zaawansowanym chłodzeniu i nowych źródłach zasilania. Badacze twierdzą obecnie, że hyperscalerzy mogą uwolnić istotną dodatkową przepustowość, zmieniając sposób działania obciążeń AI na już zainstalowanym sprzęcie.

Moment jest istotny. Według Międzynarodowej Agencji Energetycznej globalne zużycie energii elektrycznej przez centra danych może do 2030 roku osiągnąć 945 terawatogodzin. To nieco więcej energii niż obecnie zużywa Japonia. Tymczasem jeden z głównych wskaźników efektywności obiektów w branży niemal nie poprawił się przez sześć kolejnych lat.

Wyłaniająca się rywalizacja nie dotyczy więc Nvidii i innego producenta chipów. Chodzi o optymalizację oprogramowania kontra założenie, że rozwój AI wymaga proporcjonalnej rozbudowy sprzętu i dostaw energii. Lepsze GPU pozostają niezbędne, lecz to oprogramowanie może zdecydować, czy dostępna im moc przekłada się na użyteczną pracę, czy na możliwe do uniknięcia obliczenia.

Badacze stawiają efektywność oprogramowania centrów danych AI w centrum uwagi

Najnowsze badania przedstawiają marnowane obliczenia jako problem infrastrukturalny, a nie jedynie szczegół inżynierii oprogramowania.

Bezpośrednia zmiana ma charakter koncepcyjny. Badacze i specjaliści od infrastruktury zachęcają operatorów, by mierzyli użyteczną pracę uzyskiwaną z każdego wata, zamiast koncentrować się wyłącznie na narzucie obiektu.

To rozróżnienie ma znaczenie, ponieważ wskaźnik efektywności wykorzystania energii, czyli PUE, porównuje całkowite zużycie energii przez obiekt z energią dostarczoną do sprzętu komputerowego. PUE zbliżające się do 1,0 sugeruje, że stosunkowo niewiele energii trafia na chłodzenie, oświetlenie i konwersję zasilania.

PUE nie potrafi jednak określić, czy serwer uruchamia przewymiarowany model, przetwarza niepotrzebne tokeny lub pozostaje częściowo bezczynny. Obiekt może wykazywać doskonały PUE, podczas gdy jego aplikacje marnują znaczną część energii elektrycznej docierającej do szaf serwerowych.

Badanie centrów danych z 2025 roku przeprowadzone przez Uptime Institute wykazało, że średni PUE zmienił się nieznacznie szósty rok z rzędu. Raport przypisał ten zastój częściowo starszym obiektom i regionalnym ograniczeniom chłodzenia.

Ważona średnia PUE w badaniu wyniosła 1,54. Wskazuje to na znaczący narzut obiektowy, ale również pokazuje, dlaczego dalsze usprawnienia chłodzenia rozwiązują tylko część problemu.

Według szacunków IEA serwery odpowiadają za około 60% zapotrzebowania na energię elektryczną w nowoczesnym centrum danych. Pamięć masowa i sieci stanowią mniejsze udziały. Chłodzenie odpowiada za około 7% w wydajnych lokalizacjach hyperscale i ponad 30% w mniej efektywnych obiektach korporacyjnych.

Liczby te wskazują, że większość możliwości leży wewnątrz stosu obliczeniowego. Oprogramowanie wybiera model, precyzję numeryczną, rozmiar wsadu, długość odpowiedzi, ustawienia procesora, lokalizację obciążenia i czas wykonania.

Jae-Won Chung, badacz z University of Michigan związany z inicjatywą ML.Energy, powiedział Tom’s Hardware, że oprogramowanie i algorytmy mogą mieć istotne znaczenie. Jego argument traktuje system obliczeniowy jako kilka połączonych warstw.

Sprzęt znajduje się na dole. Nad nim znajdują się oprogramowanie systemowe, algorytmy i aplikacje. Wymiana chipów wymaga produkcji, zakupu, instalacji i testów, podczas gdy kod i polityki harmonogramowania mogą zmieniać się znacznie szybciej.

Teza nie zakłada, że oprogramowanie eliminuje potrzebę nowej infrastruktury. Zamiast tego staje się ono warstwą sterującą, która określa, jak skutecznie operatorzy wykorzystują kosztowne akceleratory i ograniczoną przepustowość sieci energetycznej.

Takie ujęcie rozszerza znaczenie wydajności centrów danych AI Nvidia. Wydajność na wat nie kończy się już na specyfikacji procesora. Obejmuje każdą decyzję, która kieruje pracę do procesora.

Różnica jest szczególnie istotna przy limicie mocy. Jeśli obiekt nie może pozyskać więcej energii elektrycznej, jego praktyczna przepustowość zależy od tego, ile użytecznego wyniku każdy zainstalowany GPU może dostarczyć w ramach tego ograniczenia.

Usprawnienie oprogramowania może zatem przypominać zwiększenie przepustowości. Może zwolnić miejsce dla dodatkowych żądań, skrócić opóźnienia lub umożliwić działanie większej liczbie akceleratorów bez zwiększania maksymalnego obciążenia elektrycznego obiektu.

Dlatego niedawna dyskusja jest czymś więcej niż kolejną propozycją dotyczącą zrównoważonego rozwoju. Łączy optymalizację energii bezpośrednio z przychodami, szybkością wdrożeń i skalą usług AI, które hyperscaler może sprzedawać.

Prognoza 945 TWh zamienia każdy wat w przepustowość

Energia elektryczna przestała być wyłącznie kosztem operacyjnym, a stała się wiążącym ograniczeniem rozwoju AI.

IEA oszacowała, że centra danych zużyły około 415 TWh w 2024 roku, co odpowiada mniej więcej 1,5% światowego zużycia energii elektrycznej. W ciągu poprzednich pięciu lat zużycie rosło średnio o 12% rocznie.

Scenariusz bazowy agencji przewiduje, że do 2030 roku zużycie wzrośnie ponad dwukrotnie, do około 945 TWh. Centra danych odpowiadałyby wówczas za niecałe 3% globalnego zużycia energii elektrycznej.

Ten globalny udział może wydawać się możliwy do opanowania. Lokalne skutki są trudniejsze do absorpcji, ponieważ centra danych koncentrują ogromne obciążenia w stosunkowo niewielkiej liczbie regionów.

Nowy obiekt może rozpocząć działalność w ciągu dwóch lub trzech lat. Linie przesyłowe, stacje transformatorowe, projekty wytwarzania energii i modernizacje sieci często wymagają znacznie dłuższego planowania i realizacji.

Oczekuje się, że Stany Zjednoczone i Chiny będą odpowiadać za większość wzrostu zapotrzebowania centrów danych do 2030 roku. IEA prognozuje wzrost o około 240 TWh w Stanach Zjednoczonych i 175 TWh w Chinach względem poziomów z 2024 roku.

Serwery akcelerowane, czyli systemy powszechnie wykorzystywane do trenowania i wnioskowania AI, są największym źródłem nowego popytu. W scenariuszu bazowym IEA ich zużycie energii elektrycznej ma rosnąć o 30% rocznie.

Serwery te odpowiadają za niemal połowę netto wzrostu globalnego zużycia energii elektrycznej przez centra danych. Konwencjonalne serwery wnoszą około jedną piątą, a infrastruktura, taka jak chłodzenie, kolejną jedną piątą.

Prognoza energetyczna IEA opisuje również scenariusz wysokiej efektywności. Silniejsze usprawnienia w oprogramowaniu, sprzęcie i infrastrukturze pozwoliłyby świadczyć te same usługi cyfrowe przy zużyciu ponad 15% mniej energii elektrycznej do 2035 roku.

Scenariusz ten pokazuje skalę ekonomicznej stawki. Wzrost efektywności o 15% przy szybko rosnącym globalnym obciążeniu nie jest marginalną korzyścią środowiskową. Oznacza energię, która może obsłużyć dodatkowe usługi bez konieczności budowy równoważnych nowych mocy wytwórczych.

Hyperscalerzy, w tym Amazon, Google, Meta, Microsoft i najwięksi dostawcy AI, bezpośrednio odczuwają tę presję. Mogą zamawiać procesory szybciej, niż przedsiębiorstwa energetyczne są w stanie zbudować infrastrukturę potrzebną do ich zasilania.

Odpowiadają na to długoterminowymi kontraktami na energię, projektami odnawialnymi, umowami dotyczącymi energii jądrowej, generacją energii na miejscu i własnymi układami scalonymi. Opracowują również gęstsze systemy, które wymagają nowych rozwiązań chłodzenia i dostarczania energii.

Każda z tych odpowiedzi ma ograniczenia. Nowe źródła energii wymagają czasu, własne chipy potrzebują długich cykli rozwojowych, a szafy o wysokiej gęstości mogą wymusić kosztowne zmiany w obiektach.

Oprogramowanie działa w innym harmonogramie. Operatorzy mogą zmieniać routing wnioskowania, wybór modeli, harmonogramowanie i polityki zasilania bez oczekiwania na nowy proces produkcyjny lub przyłącze do sieci.

Możliwość jest najbardziej widoczna, gdy dostawca ma dostępne GPU, ale niewystarczającą moc, aby uruchomić je wszystkie jednocześnie. Lepsze oprogramowanie może zwiększyć ilość użytecznych obliczeń wykonanych przy tym stałym limicie mocy.

Może również wpływać na to, gdzie firmy umieszczają nowe obciążenia. Hyperscaler dysponujący wolną przepustowością w jednym regionie może przenieść odpowiednie zadania z dala od przeciążonej sieci, z uwzględnieniem ograniczeń dotyczących opóźnień i zarządzania danymi.

Presja ta dociera również do przedsiębiorstw kupujących rozwiązania AI. Koszty energii, wykorzystanie zasobów i dostępność mocy po stronie dostawcy wpływają na przepustowość usług, czasy odpowiedzi i dostęp do zaawansowanych modeli.

Deweloperzy mogą nie otrzymywać osobnego rachunku za energię elektryczną za każde żądanie wnioskowania. Nadal jednak odczuwają konsekwencje w postaci limitów, opóźnień, dostępności modeli i presji na ograniczanie niepotrzebnego użycia tokenów.

Problem energii elektrycznej w branży jest zatem również problemem zapotrzebowania generowanego przez oprogramowanie. Każde niepotrzebne obliczenie zajmuje przepustowość, która nie może obsłużyć innego żądania.

Wydajność centrów danych AI Nvidia obejmuje teraz kontrolę obciążeń

Własne mechanizmy sterowania Nvidia pokazują, że granica między wydajnością chipów a wydajnością oprogramowania już się zatarła.

Platforma Blackwell firmy Nvidia obejmuje konfigurowalne profile mocy. Profile te mogą dostosowywać częstotliwości obliczeniowe GPU, częstotliwości pamięci, limity mocy, zachowanie pamięci podręcznej i stany NVLink dla określonego obciążenia.

Firma twierdzi, że jej mechanizmy sterowania mogą zmniejszyć zużycie energii nawet o 15%, przy zachowaniu co najmniej 97% całkowitej wydajności. Nvidia podaje również, że obiekty ograniczone mocą mogą zwiększyć przepustowość nawet o 13%.

Są to deklaracje producenta i zależą od charakterystyki obciążenia. Mimo to pokazują, jak zmienia się rynek. Wydajność procesora nie jest już traktowana jako jedna stała wartość ustalona w momencie produkcji.

Oprogramowanie może wybierać punkt pracy systemu na krzywej wydajności. Najwyższe możliwe taktowanie może przynosić jedynie niewielki wzrost wydajności przy nieproporcjonalnie większym zużyciu energii.

Nieznaczne obniżenie tej częstotliwości może zachować większość wyników, jednocześnie zwalniając moc dla kolejnego GPU. W skali szafy łączna korzyść może przewyższać niewielki spadek wydajności każdego urządzenia.

Ta sama zasada obowiązuje powyżej warstwy kontroli sprzętu. Badacze ML.Energy testowali model Qwen3-235B-A22B-Thinking firmy Alibaba, stosując różne formaty numeryczne.

FP8, ośmiobitowy format zmiennoprzecinkowy, reprezentuje wartości z niższą precyzją niż bfloat16. Badacze stwierdzili, że wnioskowanie FP8 zużywało około jedną trzecią mniej energii w testowanych zadaniach rozwiązywania problemów.

Niższa precyzja nie jest odpowiednia dla każdego obciążenia. Może powodować zmiany dokładności, a wyniki różnią się w zależności od modelu, sprzętu i implementacji. Pokazuje jednak, że deweloperzy mogą podejmować decyzje dotyczące energii i wydajności bez wymiany bazowego akceleratora.

Trening oferuje kolejny cel. Duże zadania dzielą pracę między wiele procesorów, lecz procesory te nie zawsze postępują w tym samym tempie.

Niektóre komponenty kończą pracę wcześniej i czekają w punktach synchronizacji, zużywając energię. Inne stają się opóźniającymi elementami, które określają, kiedy może rozpocząć się kolejny etap.

Optymalizator Perseus Chunga identyfikuje komponenty treningowe z mniejszą ilością pracy i spowalnia je tak, aby kończyły wraz z bardziej obciążonymi komponentami. Opublikowane badanie Perseus wykazało redukcję zużycia energii nawet o 30% bez spadku przepustowości.

Istotnym mechanizmem jest kontrola mocy uwzględniająca synchronizację. Perseus nie spowalnia po prostu całego zadania treningowego. Ukierunkowuje działania, które mają zapas wydajności, ponieważ inny komponent kontroluje czas zakończenia.

To rozróżnienie sprawia, że oszczędności są istotne komercyjnie. Hyperscaler niewiele zyskuje na niższym zużyciu energii elektrycznej, jeśli trening trwa proporcjonalnie dłużej i blokuje kosztowną infrastrukturę.

Oprogramowanie może również ograniczać zapotrzebowanie na wnioskowanie, zanim żądanie trafi do GPU. Dostawcy mogą buforować powtarzające się prompty i odpowiedzi, unikając obliczeń dla identycznych lub bardzo podobnych żądań.

Mogą kierować rutynowe żądania do mniejszych modeli, a większe modele rezerwować dla zadań wymagających większych możliwości. Takie podejście do routingu modeli traktuje obliczenia jako zasób wybierany odpowiednio do stopnia trudności.

Kompresja promptów może zmniejszyć liczbę tokenów wejściowych. Limity wyjścia mogą zapobiegać generowaniu przez modele treści wykraczających poza potrzeby użytkownika. Lepsze grupowanie zadań może łączyć żądania, dzięki czemu akceleratory spędzają mniej czasu niewykorzystane.

Kompilatory mogą optymalizować grafy modeli, łączyć operacje i ograniczać niepotrzebny transfer danych. Zyski te mają znaczenie, ponieważ przenoszenie danych między pamięcią a procesorami zużywa energię obok samych operacji arytmetycznych.

Zespoły infrastruktury mogą również lepiej dopasowywać instancje chmurowe do potrzeb. Przewymiarowana instancja może działać przy niskim wykorzystaniu, pobierając jednocześnie znaczną moc bazową, zwłaszcza w dużej flocie.

Starsze aplikacje tworzą kolejną formę marnotrawstwa. Przestarzałe oprogramowanie może utrzymywać nieefektywny sprzęt w użyciu, ponieważ migracja wydaje się mniej pilna niż rozwój funkcji widocznych dla klientów.

Chetan Visrolia, specjalista ds. infrastruktury centrów danych w SHI, opisał starsze szafy rackowe serwisowi Tom’s Hardware jako łatwy cel oszczędności. Taki sprzęt może zajmować przestrzeń, wymagać chłodzenia i pobierać energię, zapewniając przy tym niewielką ilość użytecznej pracy.

Techniki te nie są jednym produktem ani pojedynczym przełomem. Łączy je eliminowanie pracy, która nie poprawia rezultatu.

To właśnie stanowi kluczowe odwrócenie w kwestii efektywności centrów danych AI Nvidia. Szybszy sprzęt nadal ma wartość, lecz to oprogramowanie decyduje, czy jego wydajność przekłada się na użyteczny wynik, czy na dodatkowy popyt.

Przesuwanie obciążeń może pomóc sieci bez ograniczania całego wykorzystania AI

Kolejna szansa dla oprogramowania polega nie tylko na zużywaniu mniejszej ilości energii elektrycznej, lecz także na wyborze, kiedy i gdzie ją zużywać.

Obciążenia AI różnią się pilnością. Interaktywny asystent potrzebuje szybkiej odpowiedzi, podczas gdy ewaluacja modelu, przetwarzanie danych i niektóre zadania szkoleniowe mogą tolerować opóźnienia.

Planery zadań mogą przenosić elastyczną pracę poza okresy najwyższego lokalnego zapotrzebowania na energię elektryczną. Mogą ją wznawiać, gdy sieć dysponuje wolną przepustowością lub obfitą produkcją energii odnawialnej.

Takie podejście nazywa się czasowym przesuwaniem obciążeń. Geograficzne przesuwanie obciążeń kieruje odpowiednie zadania do innego centrum danych dysponującego dostępną mocą obliczeniową i energią elektryczną.

Sophie Hall, doktorantka z ETH Zurich, badała przesuwanie obciążeń w globalnej flocie centrów danych Google. Jej praca łączy planowanie z jednodniowym wyprzedzeniem z harmonogramowaniem w czasie rzeczywistym, przy zachowaniu gwarancji wydajności.

Pomysł zmienia cel optymalizacji. Całkowite zużycie energii elektrycznej nadal ma znaczenie, lecz czas i miejsce jej wykorzystania mogą decydować o wynikających z niego kosztach, emisjach i obciążeniu sieci.

Megawatogodzina zużyta w okresie nadpodaży energii odnawialnej wywołuje inne skutki systemowe niż identyczne zużycie podczas ograniczonego wieczornego szczytu. Oprogramowanie może reagować szybciej niż infrastruktura fizyczna.

Próba z 2026 roku z udziałem National Grid, Nvidia, Emerald AI oraz Electric Power Research Institute stanowiła przykład elastycznego popytu. Test wykazał, że centrum danych AI może szybko ograniczyć zużycie energii elektrycznej na żądanie.

Według raportowanych wyników jeden operator obniżył zapotrzebowanie do około 66% w mniej niż minutę. Inny test działał z mocą 10% przez 10 godzin.

Te demonstracje nie dowodzą, że każde komercyjne obciążenie można ograniczyć równie radykalnie. Pokazują, że przynajmniej część obliczeń AI może reagować na warunki sieciowe szybciej niż tradycyjny popyt przemysłowy.

Ta elastyczność może wpłynąć na przyłącza do sieci. Przedsiębiorstwa energetyczne mogą podłączyć obiekt wcześniej, jeśli operator zgodzi się ograniczać popyt w okresach przeciążenia.

Dla centrum danych kompromisem jest tymczasowo ograniczona dostępność mocy obliczeniowej. Dla przedsiębiorstwa energetycznego korzyścią jest sterowalne obciążenie, które nie zawsze wymaga zapewnienia wystarczającej generacji dla teoretycznego maksimum obiektu.

Badania opublikowane w Nature Reviews Clean Technology również analizowały operacje zintegrowane z siecią. Przegląd dotyczący zrównoważonego rozwoju AI oszacował, że dostosowanie obciążeń do warunków sieciowych może ograniczyć emisje w cyklu życia o około 10% w sieciach o wysokim udziale energii odnawialnej.

W przeglądzie zaznaczono również, że cele dotyczące energii, emisji dwutlenku węgla i wody mogą być sprzeczne. Strategia ograniczająca zużycie wody może w pewnych warunkach operacyjnych zwiększać emisje.

Ta złożoność sprzyja oprogramowaniu, które potrafi optymalizować kilka zmiennych zamiast realizować jeden statyczny cel efektywności. Planer może uwzględniać podaż energii elektrycznej, intensywność emisji dwutlenku węgla, stres wodny, opóźnienia i reguły lokalizacji danych.

Google od lat przesuwa zadania obliczeniowe zgodnie z dostępnością bezemisyjnej energii elektrycznej. Inni hyperscalerzy dysponują globalną infrastrukturą potrzebną do podobnego harmonogramowania, choć ich dokładne metody i wyniki się różnią.

Ten rozwój tworzy nowy wymiar konkurencji. Dostawcy z większą liczbą regionów, lepszą widocznością obciążeń i dojrzałymi systemami harmonogramowania mogą uzyskiwać więcej usług z ograniczonej infrastruktury.

Mniejsi operatorzy również mogą skorzystać dzięki orkiestracji chmury i mechanizmom kontroli obciążeń. Mogą nie dysponować globalną flotą, ale mogą odraczać zadania wsadowe, ograniczać bezczynne zasoby i wybierać odpowiednie modele.

Deweloperzy także wpływają na tę warstwę. Aplikacje, które jasno definiują wymagania dotyczące opóźnień, dają oprogramowaniu infrastrukturalnemu większą swobodę w efektywnym harmonogramowaniu elastycznych zadań.

Zadanie oznaczone jako pilne, choć może poczekać, zmusza system do rezerwowania natychmiastowej przepustowości. Lepsze metadane obciążeń mogą zatem stać się narzędziem zwiększania efektywności energetycznej.

W tym miejscu przepływy pracy AI mają znaczenie na poziomie aplikacji. Starannie określone żądania i kontekst wielokrotnego użytku mogą ograniczyć powtarzalną pracę, zanim planery infrastruktury zaczną optymalizować wykonanie.

Oszczędności oprogramowania napotykają ograniczenia danych, dokładności i efektu odbicia

Optymalizacja oprogramowania może złagodzić presję na system energetyczny, ale nie może usunąć fizycznych ograniczeń stojących za wzrostem AI.

Pierwszym ograniczeniem jest pomiar. PUE jest szeroko stosowany, ponieważ operatorzy mogą go obliczać na granicy obiektu. Pomiar użytecznych obliczeń w różnorodnych aplikacjach jest trudniejszy.

Proces szkoleniowy generuje punkty kontrolne, ewaluacje i możliwości modeli, które nie poddają się prostemu porównaniu. Usługa inferencyjna obsługuje żądania o różnej długości, wymaganiach dotyczących opóźnień i wartości komercyjnej.

Operator może zmniejszyć liczbę watogodzin na token, jednocześnie generując więcej niepotrzebnych tokenów. Może poprawić wykorzystanie GPU, przetwarzając żądania o niskiej wartości, które w przeciwnym razie nigdy by nie zostały uruchomione.

Tworzy to potrzebę stosowania metryk na poziomie obciążenia. Energia na ukończone zadanie jest bardziej miarodajna niż energia na token, gdy różne modele potrzebują różnej liczby tokenów, aby osiągnąć akceptowalny wynik.

Jakość również musi pozostać częścią mianownika. Model o niższej precyzji, który zużywa mniej energii, nie przynosi korzyści, jeśli jego błędy zmuszają użytkowników do ponownego wykonania zadania.

Ta sama ostrożność dotyczy kierowania zadań do mniejszych modeli. Kompaktowy model może efektywnie obsłużyć wiele rutynowych żądań, lecz niedokładna decyzja o przekierowaniu może powodować ponowne próby albo późniejszą eskalację zadania.

Buforowanie w pamięci podręcznej wiąże się z kwestiami prywatności i aktualności. Odpowiedź z pamięci podręcznej może oszczędzać obliczenia, ale może być nieodpowiednia, gdy odpowiedź zależy od bieżących danych lub poufnego kontekstu.

Przesuwanie obciążeń również napotyka twarde granice. Przepisy dotyczące suwerenności danych mogą uniemożliwiać przekazywanie informacji przez granice państwowe, nawet gdy inny region ma czystszą lub bardziej dostępną energię elektryczną.

Przenoszenie dużych zbiorów danych zużywa czas, przepustowość sieci i energię. Transfer może też zwiększać ryzyko operacyjne lub naruszać zobowiązania dotyczące miejsca przetwarzania informacji klientów.

Interaktywne obciążenia mają ograniczoną elastyczność harmonogramowania. Użytkownicy nie zaakceptują asystenta, który zatrzymuje się na kilka godzin, ponieważ energia odnawialna ma być dostępna później.

Zadania szkoleniowe mogą być bardziej elastyczne, ale przerwy mogą zwiększać ryzyko awarii. Operatorzy potrzebują systemów punktów kontrolnych i odzyskiwania, które zachowują postęp przy zmianach dostępności energii.

Największą niewiadomą jest paradoks Jevonsa. Efektywność może obniżać faktyczny koszt zasobu, co zachęca do większego zużycia i niweluje część bezwzględnych oszczędności.

Dostawca, który oszczędza 15% na każdej inferencji, może wykorzystać uwolnioną przepustowość do obsługi dodatkowych żądań. Energia na żądanie spada, podczas gdy obiekt nadal pobiera całą przydzieloną mu moc.

Taki wynik nie jest nieracjonalny ekonomicznie. Dostawca przekształcił tę samą energię elektryczną w większą liczbę usług. Oznacza to jednak, że efektywność oprogramowania nie prowadzi automatycznie do obniżenia całkowitego popytu ani emisji.

To rozróżnienie ma znaczenie dla polityki publicznej. Same standardy efektywności mogą nie ochronić lokalnych sieci, jeśli każdy zaoszczędzony wat wspiera dodatkową generację AI.

Ulepszenia sprzętowe powodowały podobne efekty odbicia. Szybsze procesory ograniczyły energię potrzebną do pojedynczych operacji, jednocześnie zwiększając zapotrzebowanie ze strony oprogramowania i skalę centrów danych.

Droga programowa niesie też ryzyko, że nieefektywne aplikacje będą wyglądać na zrównoważone. Usunięcie oczywistego marnotrawstwa nie odpowiada na pytanie, czy każde obciążenie AI tworzy wystarczającą wartość, by uzasadnić zużywaną energię.

Optymalizacja nie może również zastąpić inwestycji w przesył, wytwarzanie energii i chłodzenie. Prognoza IEA zakłada ciągłe ulepszenia całego systemu, a nie rozwiązanie oparte wyłącznie na oprogramowaniu.

Efektywność centrów danych AI Nvidia należy zatem oceniać na dwa sposoby. Operatorzy muszą śledzić zarówno ilość użytecznej pracy na wat, jak i bezwzględne zużycie energii elektrycznej przez obiekt.

Pierwsza miara pokazuje, czy inżynieria się poprawiła. Druga pokazuje, czy te zyski zmniejszyły presję na sieć, czy jedynie umożliwiły dodatkowy popyt.

Przejrzystość pozostaje ograniczona. Hyperscalerzy ujawniają wybrane wskaźniki zrównoważonego rozwoju i efektywności, lecz dane o energii na poziomie obciążeń rzadko są porównywalne między dostawcami.

Bez spójnego raportowania klienci nie mogą łatwo ustalić, czy jeden model lub usługa wykonuje równoważną pracę przy mniejszym zużyciu energii elektrycznej. Twierdzenia dostawców mogą opierać się na korzystnych obciążeniach lub wewnętrznych punktach odniesienia.

Pomóc mogłyby niezależne benchmarki. Musiałyby jednocześnie mierzyć jakość zadań, opóźnienia, wykorzystanie sprzętu i energię.

Benchmark ignorujący dokładność nagradza pogorszoną jakość wyników. Taki, który ignoruje opóźnienia, może nagradzać konfiguracje nieodpowiednie dla rzeczywistych aplikacji.

Sceptycyzm nie jest powodem, by odrzucać optymalizację oprogramowania. Jest powodem, by oceniać ją jako inżynierię infrastruktury, a nie marketing środowiskowy.

Trzy sygnały pokażą, czy strategia programowa działa

Sprawdzianem będzie to, czy oszczędności oprogramowania staną się mierzalną zdolnością operacyjną bez ukrywania niższej jakości lub wyższego całkowitego popytu.

Pierwszym sygnałem będzie raportowanie na poziomie obciążeń przez Nvidia i hyperscalerów. PUE obiektu powinno być uzupełniane metrykami łączącymi energię elektryczną z ukończoną pracą AI.

Użyteczne ujawnienia porównywałyby dopasowane zadania między rozmiarami modeli, formatami precyzji i ustawieniami zasilania. Powinny uwzględniać dokładność i opóźnienia obok zużycia energii.

Jeśli dostawcy opublikują odtwarzalne wyniki, argument za efektywnością oprogramowania zyska wiarygodność. Jeśli przedstawią jedynie szerokie średnie dla floty, klientom trudno będzie oddzielić rzeczywistą optymalizację od zmian w strukturze obciążeń.

Drugim sygnałem będzie szersze wdrażanie elastycznych przyłączy do sieci. Próby wykazały, że niektóre obciążenia AI mogą reagować szybko, ale komercyjne wdrożenie wymaga porozumień między przedsiębiorstwami energetycznymi, regulatorami i operatorami.

Warto obserwować centra danych akceptujące usługę przerywalną lub zautomatyzowane obowiązki reagowania na popyt. Takie ustalenia pokażą, że przesuwanie obciążeń wyszło poza badania i kontrolowane demonstracje.

Ujawnią również kompromis ekonomiczny. Obiekt może uzyskać wcześniejszy dostęp do energii, akceptując jednocześnie okresy ograniczonej mocy obliczeniowej.

Jeśli operatorzy odrzucą takie porozumienia i nadal będą domagać się nieprzerwanej maksymalnej mocy, harmonogramowanie geograficzne i czasowe pozostanie narzędziem o ograniczonym zastosowaniu.

Trzecim sygnałem jest sposób, w jaki dostawcy wykorzystują wzrost efektywności. Niższe zużycie energii na zadanie wzmacnia argumenty za oprogramowaniem, gdy opóźnia ono konieczność nowej budowy infrastruktury lub ogranicza szczytowe zapotrzebowanie.

Wniosek słabnie, jeśli każdy zysk jest natychmiast przeznaczany na dodatkowe generowanie tokenów, podczas gdy bezwzględne zużycie energii elektrycznej rośnie w pierwotnym tempie.

Nie oznacza to, że praca inżynieryjna jest bezużyteczna. Większa wydajność przy stałym poborze mocy nadal ma wartość. Oznacza jedynie, że technologia skuteczniej rozwiązuje problem niedoboru mocy niż całkowitego zapotrzebowania na energię.

Przedsiębiorstwa powinny prosić dostawców o dowody na poziomie konkretnych zadań, zamiast polegać na ogólnych deklaracjach dotyczących wydajnej infrastruktury. Deweloperzy powinni sprawdzać, czy mniejsze modele, krótsze prompty, buforowanie i ograniczone odpowiedzi zachowują wymaganą jakość rezultatu.

Zespoły infrastrukturalne powinny wskazywać elastyczne obciążenia i jasno określać ich wymagania dotyczące usług. Daje to systemom harmonogramowania możliwość wyboru okresów, regionów lub ustawień procesorów o niższym obciążeniu.

Branża powinna również zachować rozróżnienie między obliczeniami, które są technicznie możliwe, a obliczeniami, które są użyteczne. Optymalizacja niepotrzebnego zadania nadal pozostawia je niepotrzebnym.

Oprogramowanie jest atrakcyjne, ponieważ może zmieniać się szybciej niż układy scalone, stacje transformatorowe i elektrownie. Może zapewniać narastające korzyści w aplikacjach, algorytmach, systemach i mechanizmach sterowania sprzętem.

Jednak jego sukces nie będzie mierzony pojedynczym wynikiem procentowym z laboratorium. Będzie widoczny w większej ilości ukończonej pracy na wat, mniejszej liczbie zablokowanych wdrożeń, bardziej elastycznym działaniu sieci energetycznej oraz przejrzystych benchmarkach uwzględniających jakość.

Praktyczne pytanie jest teraz jasne: czy hyperscalerzy potraktują efektywność centrów danych AI Nvidia jako dyscyplinę obejmującą cały stos technologiczny, czy też nadal będą mierzyć postęp głównie szybszym krzemem? Deweloperzy i nabywcy korporacyjni mogą skierować rynek ku pierwszej opcji, wymagając porównywalnych danych dotyczących energii, jakości i opóźnień dla używanych przez nich usług AI.

 
 

Zacznij bezpłatnie

Asystent AI działający przede wszystkim lokalnie, z funkcją zarządzania wiedzą osobistą

Aby zapewnić lepsze działanie AI,

remio obsługuje obecnie wyłącznie Windows 10+ (x64) i M-Chip Macs.

Twój partner AI w pracy
Zrób więcej z remio

Planuj. Twórz. Dostarczaj.
Wszystko w jednym miejscu.

bottom of page