top of page

Nvidia 支持 Simplismart,AI 買家尋求以更少 GPU 處理每項工作負載

16 小時前
讀畢需時 11 分鐘

Nvidia 支持印度初創公司 Simplismart;該公司承諾協助企業以更少 GPU 運行 AI 工作負載,並表示收入增長達 14 倍。這項投資把晶片供應商與旨在從其硬件擷取更多實際效用的軟件連結起來,也突顯買家應清楚區分的一點:個別應用程式效率提升,並不代表整體晶片需求會下降。

Simplismart 於 10 月 27 日公布其 B 輪融資,並指 Dallas Venture Capital 為領投方。Nvidia、Accel、Shastra VC 及 Micromax 亦有參與。公司表示,其年化收入運行率在六個月內增長 14 倍。這項增長來自其銷售用於推理的軟件業務;推理是指已訓練 AI 模型產生輸出的過程。

競爭對照已相當明確。Nvidia 提供自家的推理框架 Dynamo,而 Amazon Web Services 則透過 SageMaker AI 提供推理優化。因此,Simplismart 的競爭關鍵在於能否有效把現有運算資源轉化為穩定可靠的應用程式效能。其機會取決於客戶是否需要硬件存取及個別優化工具以外的支援。

Nvidia 支持 Simplismart,聚焦模型與硬件之間的工作

這項投資支持一門軟件業務,而其價值取決於能否令已部署的 AI 應用程式具備經濟效益及可靠性。

Simplismart 的 B 輪融資公告介紹了其服務應用程式公司及雲端供應商的業務。公告列出 HeyGen、Higgsfield、InVideo、Shiprocket、Apna 及 Ema 等生產環境客戶。公司表示,它圍繞第三方 GPU 集群建構軟件,而非自行擁有 GPU 集群。

這個定位為故事劃出重要界線。Simplismart 銷售的是有效運作運算資源的能力。其商業主張取決於客戶是否重視該軟件,並願意在底層基礎設施以外為其付費。

對應用程式公司而言,採購決定始於產品需求。影片服務必須在可接受的等候時間內完成生成工作;語音應用程式需要提供維持自然對話的回應;內部業務工具則需要在工作時間內穩定服務。

這些要求不會對應到完全相同的硬件配置。為穩定需求而設計的系統,面對的壓力與接收突發流量的系統不同。處理排程工作的客戶,亦與直接回應用戶的客戶有不同選擇。

這正是「以更少 GPU 運作」承諾變得有意義之處。比較必須以固定的工作負載及可接受的服務標準為前提。缺乏這些界線,較低的硬件數量幾乎無法說明客戶是否獲得相等成果。

應用程式可能因軟件運作更有效率而消耗較少運算資源;亦可能因處理較少請求、接受更長等候時間,或改用不同模型而消耗較少資源。這些結果具有不同的商業含義。

因此,這項投資值得視為對營運專業能力的押注。Simplismart 必須把一系列技術決策轉化為客戶可倚賴的服務。買家亦需要相關經濟效益能夠承受日常生產環境變動。

公司的做法亦帶來分銷機會。雲端供應商可利用另一家公司提供的軟件,提供託管服務。在這種安排下,基礎設施擁有者與應用程式客戶未必需要自行建立整個營運層。

GPU 可供使用與應用程式已準備好使用它,兩者之間存在實際差異。容量必須配合模型、流量及客戶的部署限制。即使資源存在,需求到來時也未必能派上用場。

這個差異說明了投資的相關性,卻不預設晶片需求將出現劇烈轉變。軟件可提升已安裝硬件的實用性。這最終會否改變採購模式,取決於客戶如何使用釋放出來的容量。

收入急升反映其面向要求嚴格的美國客戶

Simplismart 公布的增長顯示商業活動,但相關衡量方式需要審慎解讀。

根據收入報道,其運行率反映近期使用量,不包括基礎設施轉嫁收入,亦不同於已簽約的經常性收入。

這個差異對服務不斷變動 AI 工作負載的公司尤其重要。將目前使用量年化,只描述某一時刻的業務速度,並不保證客戶會在全年持續維持同等使用量。

客戶可在產品推出期間增加活動,其後回落至不同模式。另一個客戶也可在供應商之間轉移工作負載,或更換模型。使用量持續增長的業務,仍需要證明客戶會隨時間回流及擴大使用。

在另一篇涵蓋美國收入增長的訪問中,行政總裁 Amritanshu Jain 向 Moneycontrol 表示,美國約佔收入的 55%。他表示 Simplismart 在印度擁有更多客戶帳戶。該刊物亦報道了他所述的本年度收入增長 10 倍。

所報告的增長數字採用不同期間,應保持分開解讀。六個月數字衡量的是一段時期;按年度表述衡量的是另一段時期。將兩者合併會造成單一、可直接比較指標的誤導印象。

地域分布對理解商業優先次序更有幫助。客戶數量與客戶支出衡量的是不同事物。帳戶較少的市場,若那些帳戶運行較大工作負載,仍可貢獻更多收入。

對 Simplismart 而言,美國擴張意味著要持續服務要求嚴格的用戶。贏得一個帳戶會帶來機會;要保留其工作負載,則需要在應用程式變化時維持可靠營運、支援及效能。

壓力落在多個群體身上。應用程式團隊需要依據實際產品使用情況,證明基礎設施開支合理;雲端供應商需要讓其容量支援客戶所需服務;軟件供應商則需要證明,初次部署後其貢獻仍然具備價值。

單憑收入增長無法解答這些問題。買家需要了解,增加支出是源自更多客戶、更大工作負載,還是暫時性需求高峰。每種解釋都意味著不同程度的可預測性。

這並不會令使用量收入失去正當性,只是令其解讀更具特定性。按活躍工作負載收費的業務可隨客戶採用而增長,同時亦會在工作負載收縮時出現變化。

因此,投資背後的商業訊號令人鼓舞,但仍有界限。客戶似乎願意購買協助營運 AI 基礎設施的服務。重複使用及持續擴張的證據,將釐清這種意願有多持久。

對企業買家而言,相關問題同樣具體:首次配置完成後,供應商能否持續提供價值?有說服力的初步成果,需要一段持續證明自身價值的營運關係。

Simplismart GPU 效率取決於工作負載

當效能改善能在實際需求下維持應用程式所需體驗,便會產生商業價值。

Simplismart 公布的 InVideo 服務案例聲稱,服務及 GPU 成本降低 56%。其標題亦聲稱影片生成速度更快。這些是供應商就特定客戶公布的結果,而非涵蓋每一種部署情況的獨立基準測試。

該案例為評估 Simplismart GPU 效率提供了具體場景。影片生成有清晰的完成點:用戶收到可用結果。客戶可根據這項成果,連同所消耗的資源,評估其基礎設施。

百分比降幅仍需要背景資料。買家需要了解起始配置及完成的工作,也需要知道比較涵蓋哪些開支,以及輸出是否符合相同的品質要求。

配置不佳的基準系統可以留下很大改善空間;經過仔細調校的系統則構成不同挑戰。兩種比較都可以準確,卻支持不同結論,說明另一位客戶可望獲得多少收益。

同樣的審慎態度亦適用於速度。延遲,即請求接收回應所需時間,衡量的是服務質素的一部分;吞吐量,即一段時間內完成的工作量,則衡量另一部分。改善其中一項,並不自動代表每位用戶都會獲得更佳體驗。

例如,一個系統可以整體處理更多請求,同時讓個別請求等候更久。這可適合排程工作,卻可能令在互動式應用程式內等待的人感到挫敗。可接受的平衡取決於產品要求。

透過這個角度解說 Simplismart 推理,便是探討如何讓資源配合服務責任。技術配置之所以重要,是因為它決定應用程式能否繼續發揮作用。只有在服務該責任時,獨立的速度紀錄才具相關性。

需求變化令比較更為複雜。在穩定流量下表現良好的配置,在流量突增時仍需檢驗。客戶亦需要了解流量下降、資源閒置時服務的表現。

預留容量有其目的:它在需求增加時保障可用性,但也有營運成本。減少這種預留可提升利用率,即可用容量中正在完成有用工作的比例,但同時亦會為意外需求留下較少空間。

這帶來持續的管理問題。供應商必須在不讓資源節省削弱服務質素的前提下作出調整。客戶應預期商業價值來自反覆的營運決策,而不只是一次初步調校。

因此,Simplismart GPU 效率應在應用程式的正常營運範圍內評估。在方便的時段量度出的結果,無法證明所有流量模式下的表現。最有力的證據將顯示在變動環境下仍能持續帶來效益。

InVideo 案例令這個主張更具體。它為買家提供了可供研究的客戶例子,但並未提供普遍適用的節省估算,而投資公告亦沒有把該估算轉化為保證。

Nvidia 與 AWS 已在優化層展開競爭

Simplismart 進入的市場中,主要基礎設施供應商已提供改善推理經濟效益的工具。

Nvidia 將 Dynamo inference 描述為一個用於在分散式系統中提供生成式 AI 推論服務的開源框架。其功能包括資源排程、請求路由、記憶體管理及資料傳輸。這些功能處理的是運算資源如何協作以支援應用程式。

AWS 透過自動化建議及手動選用技術,記錄了 SageMaker inference optimization。其建議會評估模型及工作負載,並回傳附有效能量度的設定。這為客戶提供另一種讓基礎設施配合應用程式需求的方法。

這些方案建立了要求甚高的競爭基準。Simplismart 不能只依賴「推論需要最佳化」這項普遍觀察。買家已有工具可處理這個問題。他們需要一個購買額外營運層的理由。

軟件供應商可透過為最終服務承擔更多責任來競爭。這包括協助客戶管理設定、部署變更及日常效能。其價值取決於客戶毋須在內部自行處理多少有用工作。

不過,這個主張需要證據支持。擁有經驗豐富基礎設施團隊的客戶,可以評估外部供應商是否帶來足夠價值。另一類客戶則可能認為,在內部維持所需專業能力會分散其開發應用程式的精力。

兩種選擇都不必然較優。比較結果取決於工作負載、組織,以及服務所涵蓋的責任。公平的評估需要把操作系統的人員,連同系統消耗的運算資源一併考慮。

Nvidia 的參與增添了另一個層面。基礎設施供應商可以支持一家與其硬件互補的公司,同時亦在重疊範疇提供軟件。投資與產品競爭可以在同一商業關係中並存。

這種關係不應被解讀為技術優勢的保證。投資者的參與代表財務支持。客戶仍須按自身需求及可信的替代方案評估產品。

這種重疊亦為 Simplismart 帶來一個策略問題。隨着底層工具持續改進,公司需要說明其自身貢獻如何維持差異化。今天有用的整合方案,亦需要隨模型、硬件及營運軟件變化而持續維護。

對買家而言,這有利於按已完成的工作負載及營運責任作比較。功能清單可能忽略仍由客戶承擔多少工作。基準測試亦可能忽略部署後維持設定健康所帶來的負擔。

將 Simplismart 的推論定位為營運服務,令競爭討論有更清晰焦點。客戶購買的是由軟件及專業知識支援的成果。其替代方案包括內部工作,以及基礎設施供應商已提供的服務。

這種框架亦保留了文章的核心張力。競爭關乎如何從可用容量中取得有用效能。品牌知名度、投資者關係及新聞標題式基準測試提供背景,而客戶的營運成果才決定是否購買。

每個應用程式使用較少 GPU 並不能決定總需求

提升效率會改變工作負載的經濟效益;其對硬件總需求的影響取決於客戶後續行為。

當 Nvidia 支持 Simplismart 時,表面上的矛盾始於一個狹隘假設:假設 AI 工作量固定。在此假設下,以較少資源完成相同工作,確實可以減少該工作負載所需的容量。

當工作負載的營運成本下降後,客戶還有其他選擇。他們可以維持相同產出並節省資源,也可以服務更多用戶、改善應用程式,或推出過去被視為成本過高的功能。

這些可能性屬於經濟情境,而非這項投資已確立的結果。該公告並未量度客戶如何分配釋出的容量,亦未證明效率改善是否會超越應用程式使用量的增長。

這項區分很重要,因為個別需求與整體需求回答的是不同問題。應用程式團隊評估交付產品所需的資源;硬件供應商則服務於眾多應用程式、組織及部署決策所形成的需求。

買家可能為既有任務需要較少 GPU,同時在其他範疇增加整體運算需求。另一位買家則可能減少其總需求。兩種結果均符合特定工作負載變得更有效率的說法。

相同推理亦適用於雲端供應商。更佳利用率可協助他們以已安裝的容量服務既有需求。若這提升其服務吸引力,他們可以爭取更多客戶。是否會隨之擴張,取決於實際需求。

樂觀情境亦有限制。較低營運成本本身不會創造有用產品。應用程式仍需要重視其產出的用戶。高效基礎設施無法挽救每一個薄弱的產品主張。

節省成本的情境同樣有限制。減少運算消耗並不會自動帶來等值的整體營運開支減幅。軟件費用、遷移工作及持續支援,都應納入商業評估。

因此,總擁有成本,即營運系統的完整開支,與硬件使用量同樣重要。客戶需要計算所獲得的服務,以及仍須自行承擔的工作。只量度 GPU,會令部分決策問題未獲解答。

因此,對 Nvidia 投資最清晰的解讀,比任何戲劇化標題都更為狹窄。這支持一家嘗試令 AI 工作負載更易於營運的公司。此目標可與擴大硬件的有用需求一致。

尚未確定的是這種一致性的規模。現有證據未能確立整個市場的需求效應。客戶採用情況及持續的工作負載增長,將為評估提供更佳基礎。

即使更廣泛結果仍未明朗,對買家的啟示已很直接。他們現在可以在應用程式層面評估效率。要決定部署是否在財務上合理,並不需要預測整個晶片市場。

留意客戶證據、重複使用及雲端採用情況

下一批證據應把技術節省與持久的客戶價值連結起來。

首個值得留意的訊號,是更詳細的客戶驗證。有用的披露應列明模型、硬件、工作負載、比較期間及服務要求。客戶確認將提升信心,證明所報告的改善反映一般生產環境條件。

這些證據不應只涵蓋有利的平均表現。買家需要了解延遲請求、失敗工作,以及需求變化時的行為。在這些條件下仍能取得一致結果,將強化其具備營運優勢的論據。

缺乏額外公開基準測試,並不能證明該軟件失敗。企業部署可能涉及機密資料。然而,這會令外界觀察者較少證據,無法將個別客戶的主張延伸至整個市場。

第二個訊號是重複使用。所報告的收入加速為觀察者提供起點,而未來披露可顯示客戶是否持續支出。現有用戶的持續擴張,將支持 Simplismart 提供持續價值的論點。

更清晰的客戶活動細分亦會有幫助。分散於不同客戶及工作負載的增長,與集中於少數應用程式的增長有不同含意。缺乏這種細分,收入動能的持久性便仍有部分未能確定。

第三個訊號是雲端供應商的採用情況。Simplismart 表示,Yotta 在 Shakti Studio 的無伺服器推論層使用其技術。無伺服器意味客戶可要求運算服務,而毋須直接管理底層伺服器。

進一步部署將有助測試此模式能否在不同基礎設施夥伴之間複製。重要證據將關乎活躍服務及客戶工作負載。單憑合作公告,對軟件的實際廣泛使用程度提供的洞見較少。

雲端採用亦測試一種涉及多方的營運關係。基礎設施擁有者、軟件供應商及應用程式客戶需要明確責任分工。可靠性取決於發生變更或故障時,這些責任能否維持協調。

這些訊號值得在未來數月留意,但不應把這段期間視為承諾的報告時間表。本文並未確立額外基準測試或收入披露的確認日期。觀察者應在證據出現時作出評估。

對工程團隊而言,應將評估繫於自身應用程式。以一致的工作負載比較已完成工作、回應時間、營運投入及部署限制。將結果保存在可搜尋的知識庫,以便日後模型變更仍可作比較。當 Nvidia 支持 Simplismart 時,有用的問題是這項支持讓客戶能更有效地營運甚麼。要求提供符合你流量及服務要求的證據,然後檢視有關效益能否在正常生產變更下維持。這會為採購決策提供比融資公告或「需要較少 GPU」的普遍說法更穩固的基礎。

 
 

為每個智能代理提供更完整的背景,提升工作表現

讓智能代理連接 remio 已整理好的知識、決策和歷史紀錄。

remio 目前支援 Windows 10+(x64) 及配備 Apple 晶片的 Mac。

你的 AI 工作夥伴
和 remio 一起高效工作

規劃、創作、交付
一站式完成

bottom of page