top of page

Frore LiquidJet Diamond, Nvidia Rubin의 2,300W 냉각 문제 겨냥

1시간 전
11분 분량

Frore Systems는 2,300와트 Nvidia Rubin 가속기와 비정상적으로 열이 집중되는 칩 핫스폿을 냉각하도록 설계된 맞춤형 콜드플레이트 Frore LiquidJet Diamond를 공개했다. 회사는 이 설계가 기존 스카이빙 콜드플레이트와 비교해 GPU 온도를 16°C에서 22°C 낮출 수 있다고 주장한다. 또한 와트당 AI 토큰 수가 30%에서 35% 증가할 것으로 전망한다.

이 수치가 실현된다면 냉각은 단순히 과열을 막는 보조 시스템이 아니라 컴퓨팅 출력에 직접 기여하는 요소가 될 수 있다. 다만 Frore가 공개한 결과는 일부 열 모델과 명시된 운전 조건을 바탕으로 한 회사 측 주장에 머물러 있다. 독립적인 Rubin 하드웨어 테스트에서는 아직 같은 수준의 향상이 확인되지 않았다.

더 중요한 경쟁은 두 가지 냉각 아키텍처 사이에서 벌어진다. 기존 콜드플레이트는 가공된 채널 전체에 냉각수를 분산시키는 반면, Frore는 프로세서의 매핑된 핫스폿 주변에 유량을 집중시킨다. LiquidJet Diamond는 열 유속이 가장 높은 곳에 다이아몬드 열 확산판을 추가해, Frore가 중요하다고 판단한 부위에만 고가 소재를 배치한다.

이 접근법은 Nvidia와 AMD가 더 높은 패키지 전력, 더 큰 멀티다이 조립체, 더 조밀한 메모리 시스템을 갖춘 가속기를 준비하는 시점에 등장했다. 이제 냉각 공급업체는 총발열량뿐 아니라 주변 패키지보다 훨씬 뜨거워지는 작은 영역도 관리해야 한다.

Frore LiquidJet Diamond, 핫스폿 위에 다이아몬드를 배치하다

Frore의 핵심 아이디어는 각 프로세서의 열 지도를 기준으로 콜드플레이트를 설계한 뒤, 가장 까다로운 핫스폿 바로 위에 다이아몬드를 배치하는 것이다.

콜드플레이트는 프로세서 패키지에 밀착 장착되는 금속 냉각 부품이다. 플레이트 내부를 순환하는 액체는 열을 시설 냉각 루프 쪽으로 운반한다. 열 경로에는 일반적으로 실리콘, 패키징 소재, 열 인터페이스 소재, 그리고 콜드플레이트 자체가 포함된다.

각 층은 열저항을 더한다. 이 저항은 냉각수와 동작 중인 실리콘 사이의 온도 차를 키운다. 패키지의 나머지 부분보다 훨씬 많은 열을 발생시키는 작은 영역이 있을 때 이 효과는 제어하기 더 어려워진다.

Frore는 LiquidJet Diamond가 3차원 초단거리 루프 다단 구조를 사용한다고 설명한다. 내부 채널은 냉각수를 먼저 핫스폿으로 보내고, 이후 GPU 다이, 고대역폭 메모리 및 기타 칩렛으로 흐르게 한다.

회사는 반도체 제조에서 응용한 공정을 사용해 내부 구리 구조를 제조한다. 이 방식은 구리에 얇은 채널을 절삭하는 스카이빙 공정으로 흔히 만들어지는 직선형 핀보다 복잡한 형상을 구현할 수 있다.

다이아몬드는 설계의 두 번째 요소를 이룬다. Frore는 콜드플레이트 하부 표면에 다이아몬드 소재를 삽입하고, 식별된 핫스폿 위에 배치한다. 다이아몬드는 구리보다 열을 더 효과적으로 전도하므로, 집중된 열이 액체 냉각 구조로 들어가기 전에 이를 분산할 수 있다.

이는 모든 가속기를 위한 범용 플레이트가 아니다. 목표 프로세서에 따라 치수와 내부 채널이 달라진다. Frore는 Nvidia GB300 구성용 기준 크기로 104.6 x 62 x 20.4밀리미터를 제시한다.

이 맞춤형 설계는 Frore의 LiquidJet Nexus와 구별되는 제품의 가장 중요한 특징을 만든다. Nexus는 여러 콜드플레이트와 냉각 부품을 더 큰 서버급 조립체로 결합한다. LiquidJet Diamond는 시스템 빌더가 자체 플랫폼에 통합할 수 있는 개별 가속기용 콜드플레이트다.

Frore가 공개한 제품 사양에 따르면, 이 플레이트는 5 x 5밀리미터 크기의 770 W/cm² 핫스폿을 지원한다. 이 등급은 25°C의 유입 냉각수, 최대 95°C 접합 온도, PTM7950 열 인터페이스 소재 및 히트스프레더가 없는 패키지를 전제로 한다.

이러한 조건은 중요하다. 770 W/cm² 수치는 전체 GPU 패키지 평균 밀도가 아니라 작은 핫스폿에 집중된 열을 설명한다. 또한 다른 냉각수 온도나 패키징 선택지에서 어떤 가속기든 이 밀도를 유지할 수 있다는 의미도 아니다.

회사는 LiquidJet Diamond를 다중 유입구 스카이빙 콜드플레이트와 비교한다. 최대 핫스폿 처리 용량이 150% 이상 높고, 열전달 효율은 75% 높으며, GPU 온도는 16°C에서 22°C 낮다고 주장한다.

Frore는 이러한 온도 저하가 와트당 AI 토큰 수를 30%에서 35% 늘리는 효과로 이어진다고도 말한다. 이는 데이터센터 전체 에너지 사용량의 측정된 감소가 아니라, 예상되는 컴퓨팅 효율 개선이다.

출시 보도에 따르면 Frore는 다이아몬드 부품을 제조하거나 통합하는 방식은 공개하지 않았다. 이 누락된 세부 정보는 비용, 제조 수율, 신뢰성 및 생산량에 영향을 줄 수 있다.

따라서 LiquidJet Diamond는 구체적인 엔지니어링 제안에 해당한다. 이는 국소적 열 확산과 특정 프로세서의 열 거동에 맞춰 설계된 냉각수 경로를 결합한다. 그 가치는 이러한 장점이 생산 공차, 장시간 운전 및 완전한 랙 배포에서도 유지되는지에 달려 있다.

Nvidia Rubin, 냉각을 컴퓨팅 제약 조건으로 바꾸다

2,300와트 가속기에서는 열저항이 지속 클록과 유효 출력을 제한할 수 있으므로, 온도 제어가 성능 예산의 일부가 된다.

기존 서버 냉각은 흔히 평균 패키지 전력을 기준으로 설계됐다. 대형 가속기가 여러 컴퓨트 다이, 고대역폭 메모리, 고속 인터커넥트 및 불균일한 워크로드를 결합할 때 이 접근법의 신뢰성은 떨어진다.

AI 워크로드는 텐서 처리 하드웨어를 장시간 활성 상태로 유지할 수 있다. 메모리 및 인터커넥트 활동 또한 패키지 내부의 열 분포를 바꿀 수 있다. 콜드플레이트는 한 영역이 한계에 도달하지 않도록 하면서 지속적인 총전력과 국소적 피크를 모두 처리해야 한다.

Frore는 2,300와트 Nvidia Rubin 냉각 구성과 함께 LiquidJet Diamond를 선보일 계획이다. 이 시연은 회사가 제시한 770 W/cm² 수준에 도달하는 핫스폿을 목표로 한다.

이 시연이 출하형 Rubin 가속기, 사전 양산 하드웨어 또는 열 테스트용 장치를 사용하는지는 아직 명확하지 않다. 테스트용 장치는 전력과 핫스폿 위치를 재현할 수 있지만, 양산 실리콘의 모든 기계적 특성과 워크로드 거동을 대변할 수는 없다.

Nvidia가 공개한 HGX 사양에 따르면 HGX Rubin NVL8 베이스보드에는 Rubin GPU 8개가 탑재된다. 각 GPU는 288GB HBM4 메모리와 22TB/s 메모리 대역폭을 포함한다. 8-GPU 플랫폼은 2테라바이트의 HBM4를 제공한다.

이 사양은 왜 냉각이 시스템 설계 문제가 되었는지 보여준다. GPU, 메모리, 네트워킹 부품, 전력 공급 하드웨어 및 프로세서가 밀집된 구성에서 열을 제거해야 한다.

Nvidia는 Rubin이 GPU당 50페타플롭스의 NVFP4 추론 성능을 제공한다고 말한다. Rubin 아키텍처에는 3,360억 개 트랜지스터, 224개의 스트리밍 멀티프로세서, 896개의 Tensor Core가 포함된다.

이 아키텍처는 칩렛 설계와 고대역폭 패키지 연결도 사용한다. 이 조합은 제한된 물리적 영역 안에서 여러 잠재적 열원을 만든다. 평균 패키지 온도만으로는 이러한 국소 조건을 완전히 설명할 수 없다.

온도는 최신 프로세서가 전기적·열적 한계 내에서 주파수와 전압을 관리하기 때문에 출력에 영향을 준다. 다른 제한 요인이 개입하지 않는다면, 더 시원한 칩은 더 높은 동작 주파수를 유지할 수 있다.

하지만 낮은 온도가 자동으로 고정된 처리량 향상을 보장하지는 않는다. 성능은 워크로드 거동, 메모리 접근, 네트워킹, 소프트웨어 효율, 활용률 및 전력 관리에도 좌우된다.

Frore는 추론 사업자가 유용한 출력을 판매하거나 소비한다는 점에서 냉각을 와트당 토큰 수와 직접 연결한다. 두 시스템이 유사한 전력을 사용한다면, 더 많은 토큰을 생산하는 시스템의 컴퓨팅 효율이 더 높다.

이러한 상업적 관점은 증거의 기준을 높인다. 구매자는 대표적인 모델, 배치 크기, 시퀀스 길이 및 활용 패턴 전반에 걸친 워크로드 수준의 측정값을 필요로 한다. 열 모델만으로는 전체 운영 결과를 보여줄 수 없다.

냉각 전력도 포함해야 한다. 펌프, 냉각수 분배 장치, 시설 열교환기 및 선택적 칠러는 에너지를 소비한다. 전체 냉각 루프에 상당한 추가 전력이 필요하면 칩 수준의 효율 향상은 줄어들 수 있다.

Frore는 더 낮은 콜드플레이트 열저항이 더 차가운 유입수에 대한 의존도를 낮출 수 있다고 주장한다. 더 따뜻한 냉각수는 열 배출을 단순화하고 시설 효율을 높일 수 있다. 이 주장은 타당하지만, 순효과는 기후, 시스템 설계 및 시설 운전 온도에 따라 달라진다.

따라서 기존 콜드플레이트 공급업체와 서버 설계업체에 압박이 가해진다. 이들은 핫스폿 제어를 개선하거나, 덜 특수화된 플레이트가 더 낮은 비용과 복잡성으로 충분한 성능을 제공한다는 점을 입증해야 한다.

기존 콜드플레이트, 핫스폿 문제에 직면하다

핵심 경쟁은 단순히 다이아몬드와 구리 사이의 대결이 아니라, 핫스폿 특화 냉각과 더 광범위한 열 제거를 기준으로 설계된 콜드플레이트 사이의 대결이다.

스카이빙 콜드플레이트는 구리 베이스와 얇은 핀이 촘촘히 배열된 구조로 시작한다. 냉각수는 이 핀 사이를 흐르며 열을 모은 뒤 플레이트를 빠져나간다. 제조업체는 이 공정을 잘 이해하고 있으며, 생산된 부품은 기존 서버 공급망에 적합하다.

이 아키텍처는 열이 비교적 고르게 분산될 때 효과적으로 작동할 수 있다. 하지만 한 작은 위치에서 극심한 열이 발생하는 동안 냉각수가 긴 채널을 따라 이동하면 효율이 떨어진다.

설계자는 유입구를 추가하거나, 핀 형상을 바꾸거나, 유량을 높이거나, 냉각수 온도를 낮출 수 있다. 각 대응에는 결과가 따른다. 유량 증가는 압력 요구 사항을 높일 수 있고, 더 차가운 액체는 더 많은 시설 에너지와 결로 제어를 필요로 할 수 있다.

Frore의 단거리 루프 설계는 유입구와 가장 뜨거운 영역 사이의 거리를 줄이려 한다. 다단 라우팅은 다른 패키지 구성요소에 공급하기 전에 가장 차가운 액체를 핫스폿에 제공한다.

다이아몬드 층은 관련된 또 다른 문제를 해결한다. 냉각수 채널은 열이 콜드플레이트에 도달한 뒤에 열을 제거한다. 고전도성 확산판은 이 전달이 일어나기 전에 집중된 열을 더 넓은 냉각 면적으로 분산할 수 있다.

이 차이는 Frore가 열전달 효율과 핫스폿 밀도를 모두 인용하는 이유를 설명한다. 한 지표는 열이 냉각 구조를 얼마나 효과적으로 통과하는지를 나타낸다. 다른 지표는 접합 온도가 명시된 상한에 도달하기 전에 열원이 얼마나 집중될 수 있는지를 나타낸다.

이 설계는 총 와트수로 제품을 비교하는 방식의 한계도 부각한다. 동일한 전력을 소비하는 두 가속기도 다이 레이아웃, 패키징 및 핫스폿 위치가 다르면 서로 다른 콜드플레이트가 필요할 수 있다.

Frore가 Nvidia Rubin, Rubin Ultra, Feynman, AMD Instinct MI455, MI500 및 맞춤형 하이퍼스케일러 가속기를 목표 제품으로 언급하는 이유가 여기에 있다. 각각은 치수와 열 지도에 맞춘 플레이트를 받게 된다.

AMD의 공개 MI400 로드맵은 CDNA 기반 MI400 제품군을 2026년에 출시할 예정이었다. AMD의 더 최근 계획 역시 MI400을 HBM4와 차세대 네트워킹을 갖춘 랙 규모 시스템에 배치한다.

여러 공급업체를 지원하면 Frore의 기회는 더 넓어질 수 있다. 그러나 엔지니어링 작업도 그만큼 늘어난다. 새로운 패키지마다 업데이트된 시뮬레이션, 새로운 내부 구조, 툴링 변경, 그리고 새로운 기계적 적합성 검증이 필요할 수 있다.

표준 스카이브드 플레이트는 다른 장점을 제공한다. 익숙한 구조 덕분에 적합성 검증 위험을 줄이고, 맞춤형 제조 단계를 줄이면서 여러 제품 구성을 지원할 수 있다.

따라서 LiquidJet Diamond는 그 복잡성을 정당화해야 한다. 구매자는 추가적인 열적 여유를 부품 비용, 개발 기간, 정비성, 신뢰성, 공급 가용성과 비교하게 된다.

다이아몬드 자체가 그 비교의 결론을 내리지는 않는다. 재료의 양, 품질, 방향성, 접합 방식, 배치 모두가 성능에 영향을 미친다. 우수한 벌크 열전도율 수치가 낮은 저항의 조립 인터페이스를 보장하지는 않는다.

접촉 압력도 또 다른 과제다. 콜드플레이트는 대형 패키지 전반에 걸쳐 신뢰할 수 있는 접촉을 유지하면서 다이, 브리지, 인터포저 또는 주변 부품을 손상시키지 않아야 한다.

이 문제는 뚜껑이 없는 패키지에서 더 심각해진다. 통합 히트 스프레더를 제거하면 열 경로는 짧아지지만, 섬세한 패키지 구조가 기계적 하중에 노출된다.

Frore의 770 W/cm² 사양은 뚜껑이 없는 패키지를 전제로 한다. 뚜껑이 있는 양산 GPU를 평가하는 구매자는 이 수치를 자체 시스템에 직접 적용할 수 없다.

따라서 기존 방식은 가속기의 운영 요구사항을 충족한다면 여전히 신뢰할 수 있는 선택지다. 기존 플레이트가 더 낮은 클록, 더 낮은 냉각수 온도, 더 큰 펌핑 전력 또는 부족한 핫스팟 여유를 강제하는 경우에 Frore의 설계가 가장 매력적이 된다.

시장은 열전도율 수치만으로 두 접근법 중 하나를 선택하지 않을 것이다. 수천 대의 서버에서 예측 가능한 성능을 제공하는 검증된 시스템을 통해 선택하게 될 것이다.

더 낮은 온도가 와트당 토큰 수를 늘릴 수 있는 이유

Frore의 효율성 주장은 명확한 메커니즘에 기반하지만, 개선 폭은 콜드플레이트만으로 결정되지 않는다.

프로세서의 접합 온도는 냉각수 온도, 발생 열량, 전체 열저항을 반영한다. 다른 변수가 안정적으로 유지될 때 열저항을 낮추면 접합 온도도 낮아진다.

더 낮은 온도는 반도체 소자의 누설 전력을 줄일 수 있다. 또한 프로세서가 열 한계 내에서 더 많은 여유를 확보하도록 해, 더 높은 지속 클록을 지원하거나 스로틀링을 줄일 수 있다.

Frore의 이전 LiquidJet 모델링은 기본 콜드플레이트로 약 6°C~12°C의 온도 저감을 달성할 수 있다고 분석했다. 회사는 이 범위가 와트당 토큰 수를 10%~25% 높이는 것과 관련이 있다고 설명했다.

LiquidJet Diamond는 Frore가 핫스팟을 최대 10°C 추가로 낮출 수 있다고 밝힌 국소 스프레더를 추가한다. 이에 따라 회사의 전체 비교는 16°C~22°C의 온도 개선과 30%~35% 더 많은 와트당 토큰 수에 이른다.

이 범위를 보편적 수치로 합산해서는 안 된다. 패키지 설계, 인터페이스, 유입 온도, 유량, 워크로드에 따라 결과는 달라질 수 있다.

독립 연구는 액체 냉각과 지속 컴퓨팅 성능 사이의 더 넓은 관계를 뒷받침한다. 2026년 액체 냉각 연구는 액체 냉각과 공기 냉각을 적용한 8-GPU Nvidia H100 시스템을 비교했다.

연구진은 액체 냉각 시스템의 GPU 온도가 41°C~50°C였다고 보고했다. 공기 냉각 구성은 부하 상태에서 54°C~72°C 범위를 보였다.

또한 액체 냉각 플랫폼에서는 GPU당 54 TFLOPS를 측정했으며, 공기 냉각 사용 시 GPU당 46 TFLOPS와 비교됐다. 이는 해당 시험 시스템에서 17%의 성능 차이에 해당한다.

이 연구가 Frore LiquidJet Diamond나 Rubin 관련 주장을 검증하는 것은 아니다. 서로 다른 하드웨어를 사용했으며, 두 액체 콜드플레이트 설계가 아니라 액체 냉각과 공기 냉각을 비교했다.

다만 냉각 공급업체가 컴퓨팅 출력을 논의할 수 있는 이유는 보여준다. 열 안정성은 단순한 부품 생존 여부를 넘어 프로세서의 지속 동작에 영향을 줄 수 있다.

와트당 토큰 수는 여전히 워크로드 의존적인 측정치다. 메모리 대역폭 제약이 큰 추론 작업은 컴퓨팅 제약이 큰 작업보다 추가 GPU 주파수로 인한 이득이 작을 수 있다.

소프트웨어도 결과를 좌우할 수 있다. 양자화, 배칭, 추측 디코딩, 커널 선택, 병렬성은 시스템이 전력 입력으로부터 생성하는 토큰 수에 영향을 미친다.

랙 네트워킹도 또 다른 변수다. Rubin 시스템은 GPU가 조율된 컴퓨팅 패브릭으로 작동할 수 있도록 고대역폭 NVLink 연결을 사용한다. 개별 GPU가 시원하게 유지되더라도 통신 오버헤드는 워크로드 성능을 제한할 수 있다.

가장 설득력 있는 시험은 동일한 Rubin 시스템에 두 개의 콜드플레이트를 적용해 측정하는 방식일 것이다. 두 구성은 동일한 소프트웨어, 냉각수 조건, 워크로드, 시설 전력 산정 방식을 사용해야 한다.

결과에는 접합 온도, 핫스팟 편차, 가속기 전력, 펌프 전력, 냉각수 유량, 압력 강하, 처리량, 줄당 토큰 수가 포함돼야 한다. 장시간 실행은 초기 이득이 안정적으로 유지되는지 보여줄 것이다.

데이터센터 구매자에게는 최고 성능뿐 아니라 성능 분포도 필요하다. 가속기 간 편차를 줄이는 플레이트는 평균 이점이 크지 않아 보이더라도 클러스터 스케줄링을 개선할 수 있다.

대규모 훈련 및 추론 작업은 가장 느린 참여자를 기다릴 수 있기 때문에 이러한 일관성은 중요하다. 열 제약을 받는 소수의 GPU가 더 큰 동기화 시스템의 효율을 낮출 수 있다.

따라서 Frore의 35% 수치는 회사가 전망하는 결과의 상한으로 읽는 것이 가장 적절하다. 아직 모든 Rubin 배포 환경에서 얻을 수 있는 보편적 개선은 아니다.

이러한 주장은 여전히 양산 규모의 검증이 필요하다

LiquidJet Diamond는 신뢰할 만한 엔지니어링 문제를 해결하지만, 공개된 수치만으로는 아직 완전한 양산 적합성 검증 사례를 제시하지 못한다.

첫 번째 불확실성은 검증이다. Frore는 핫스팟 정격의 상세 조건을 제시하지만, 양산 Rubin 시스템을 사용한 광범위한 독립 벤치마크는 아직 공개하지 않았다.

분석적 열 모델은 개발 과정에서 가치가 크다. 최종 하드웨어가 널리 제공되기 전에 엔지니어가 소재, 유로, 패키지 선택지, 냉각수 조건을 비교할 수 있게 해준다.

그러나 모델은 여전히 입력값에 의존한다. 전력 분포, 인터페이스 품질, 히트 스프레더 접촉, 워크로드 동작, 프로세서 제어에 대한 가정은 결과를 바꿀 수 있다.

Frore가 시험 장치와 측정 방식을 명시한다면 계획된 시연은 유용한 증거를 제공할 수 있다. 열 시험 차량은 통제된 조건에서의 열 제거를 검증할 수 있다. 하지만 토큰 처리량을 검증하지는 못한다.

양산 GPU 시험은 온도 변화와 실제 성능을 연결할 수 있다. 그럼에도 구매자에게는 워크로드 세부사항과 완전한 시스템 전력 산정이 필요하다.

두 번째 불확실성은 제조다. Frore는 반도체 공정을 응용해 구리 구조를 제작한다고 밝혔지만, 양산 비용이나 생산 능력은 공개하지 않았다.

다이아몬드를 내장하면 인터페이스와 공정 단계가 더 늘어난다. 서로 다른 소재는 열팽창률이 다르므로 열 사이클링이 접합부에 응력을 가할 수 있다.

서버는 유지보수, 워크로드 변화, 장애 상황에서 반복적으로 가열되고 냉각된다. 적합성 검증은 콜드플레이트가 이러한 사이클을 거치며 접촉, 유동 성능, 구조적 무결성을 유지한다는 점을 보여야 한다.

세 번째 쟁점은 맞춤화다. 각 열 지도에 맞춰 냉각수 채널을 조정하면 성능은 개선될 수 있지만, 특정 플레이트가 특정 패키지 구성에 묶이게 된다.

가속기의 변경이 늦게 이루어지면 플레이트 재설계가 필요할 수 있다. GPU 공급업체가 대량 출하 전 전력 맵, 기계적 허용오차, 패키지 높이, 인터페이스 요구사항을 수정할 때 이 위험은 중요하다.

클라우드 운영업체는 교체 가능성도 중시한다. 고도로 맞춤화된 부품에는 배포 환경의 운영 수명 전반에 걸쳐 신뢰할 수 있는 예비 재고와 명확한 정비 절차가 필요하다.

네 번째 질문은 냉각수 인프라에 관한 것이다. 콜드플레이트는 독립적으로 작동하지 않는다. 매니폴드, 펌프, 냉각수 분배 장치, 열교환기, 센서, 시설 루프와 연결된다.

압력 강하는 펌프 요구사항에 영향을 미친다. 여러 가속기가 하나의 랙을 공유하면 유량 분배는 더 어려워진다. 작은 제조 차이도 어느 분기에 가장 많은 냉각수가 공급되는지에 영향을 줄 수 있다.

Frore는 LiquidJet Diamond를 드롭인 업그레이드로 설명하지만, 이 표현은 신중하게 해석해야 한다. 기계적 호환성이 동일한 유압 거동이나 시설 요구사항의 변화를 보장하지는 않는다.

다섯 번째 불확실성은 경제성이다. 더 낮은 온도는 더 높은 처리량, 더 낮은 냉각 에너지, 더 긴 하드웨어 수명을 통해 가치를 창출할 수 있다. 구매자는 이러한 절감 효과를 플레이트의 전체 설치 비용과 비교해야 한다.

Frore가 다이아몬드를 핫스팟 주변에만 사용하기 때문에 다이아몬드 소재가 시스템의 경제성을 자동으로 악화시키는 것은 아니다. 그러나 회사는 배포 투자 회수 기간을 계산할 수 있을 만큼 충분한 상업 정보를 공개하지 않았다.

여섯 번째 쟁점은 패키징 위험이다. Frore의 최고 핫스팟 사양은 PTM7950을 사용해 뚜껑이 없는 패키지와 직접 접촉하는 것을 전제로 한다.

뚜껑을 제거하면 실리콘과 콜드플레이트 사이의 층이 사라져 열저항이 낮아진다. 동시에 멀티 다이 어셈블리 전체에서 균열이나 불균일한 하중이 발생할 위험도 커질 수 있다.

통합 히트 스프레더는 패키지를 보호하고 기계적 힘을 분산한다. 하이퍼스케일러는 더 높은 출력을 위해 더 큰 패키징 위험을 감수할 수 있지만, 엔터프라이즈 구매자는 보수적인 정비성을 우선할 수 있다.

이러한 질문이 아키텍처의 타당성을 무효화하는 것은 아니다. 이는 설득력 있는 시연과 AI 클러스터 전반에 배포되는 검증된 제품 사이에 필요한 작업을 규정한다.

Frore는 독립 시험 결과, 상세 운영 조건, 신뢰성 데이터, 유압 측정치를 공개함으로써 주장을 강화할 수 있다. 고객 배포 사례는 또 다른 모델링 비교보다 더 강력한 증거가 될 것이다.

다이아몬드 냉각의 확장성을 결정할 세 가지 신호

다음 단계는 헤드라인 온도 주장을 또다시 높이는 것이 아니라 검증, 가속기 적합성 검증, 도입에 관한 것이다.

첫 번째 신호는 투명한 Rubin 시연이다. Frore는 2,300와트 구성에 양산 실리콘, 사전 양산 하드웨어, 히터 기반 시험 차량 중 무엇을 사용하는지 밝혀야 한다.

유용한 시연은 냉각수 온도, 유량, 압력 강하, 패키지 구성, 인터페이스 소재, 핫스팟 측정 방법을 공개할 것이다. 실제 워크로드 결과에는 전체 시스템 전력이 포함돼야 한다.

Frore의 16°C~22°C 범위와 일치하는 독립 측정값은 핫스팟 표적 냉각의 근거를 강화할 것이다. 모델링되었거나 시뮬레이션된 하드웨어에만 국한된 결과라면 핵심 성능 주장은 여전히 해결되지 않은 채 남는다.

두 번째 신호는 가속기 또는 서버 공급업체와의 공식 적합성 검증이다. 명시된 설계 채택 사례는 LiquidJet Diamond가 기계적, 유압적, 열적, 신뢰성 검토를 통과했음을 나타낼 것이다.

Nvidia Rubin 또는 AMD Instinct 플랫폼에 대한 적합성 검증은 Frore의 맞춤화 모델도 시험하게 된다. 이는 회사가 프로세서 열 지도를 반복 가능한 양산 부품으로 전환할 수 있는지 보여줄 것이다.

일반적인 호환성 선언은 설득력이 떨어진다. 구매자에게는 플레이트가 승인된 장착력, 커넥터, 매니폴드, 펌웨어 제어, 유지보수 절차를 갖춘 완전한 서버 내부에서 작동한다는 증거가 필요하다.

세 번째 신호는 클러스터 규모의 운영 데이터다. 콜드플레이트 하나는 잘 작동할 수 있지만, 서버가 채워진 랙에서는 유량 균형, 펌프, 진동, 누수 감지, 정비 문제가 드러날 수 있다.

장시간 결과는 가속기 온도, 성능 편차, 냉각 전력, 고장률, 워크로드 출력을 추적해야 한다. 와트당 토큰 수에는 지원 냉각 장비도 포함돼야 한다.

Frore가 이러한 조건에서 주장한 효율성 개선을 유지한다면, 콜드플레이트 선택은 AI 용량 계획의 일부가 된다. 운영업체는 고정된 전력 할당량에서 더 많은 작업을 끌어낼 수 있다.

시스템 전력과 양산 패키징까지 포함했을 때 이점이 줄어든다면, LiquidJet Diamond는 기존 플레이트를 광범위하게 대체하기보다는 극심한 핫스팟에 여전히 유용한 선택지로 남을 수 있습니다.

그럼에도 지금은 본격적인 실험을 진행하기에 유리한 시점입니다. Nvidia의 Rubin 플랫폼은 높은 컴퓨팅 밀도에 HBM4와 랙 규모 연결성을 결합합니다. AMD 역시 유사하게 통합된 가속기 시스템을 추진하고 있습니다.

한편 AI 운영업체들은 칩 설계만으로는 해결할 수 없는 전력 및 시설 한계에 직면해 있습니다. 이제 트랜지스터와 냉각 설비 사이의 모든 계층이 활용 가능한 컴퓨팅 용량에 영향을 미칩니다.

Frore LiquidJet Diamond는 기술적으로 일관된 대응책을 제시합니다. 프로세서의 열 지도에 따라 냉각수를 분배하고, 구리만으로는 가장 까다로운 국부 열부하를 감당하기 어려운 지점에 다이아몬드를 사용합니다.

남은 질문은 이러한 정밀성이 제조, 인증, 그리고 랙 규모 운영 환경에서도 유지되는지 여부입니다. 구매자는 와트당 토큰 수 35% 증가를 확립된 결과로 받아들이기 전에 측정된 Rubin 워크로드, 실명이 공개된 시스템 파트너, 그리고 독립적으로 검증된 에너지 회계를 지켜봐야 합니다.

 
 

무료로 시작하세요

개인 지식 관리 기능을 갖춘 로컬 우선 AI 어시스턴트

더 나은 AI 경험을 위해

현재 remio는 Windows 10+ (x64) 및 M-Chip Macs만 지원합니다.

업무를 위한 AI 파트너
remio와 더 많은 일을 해내세요

계획하고, 만들고, 완성하세요
모든 일을 한곳에서

bottom of page