1月12日消息,基于生成式AI的搜索引擎技術(shù)初創(chuàng)公司ExaAILabs首席執(zhí)行官 Will Bryk于當(dāng)?shù)貢r(shí)間周五宣布,該公司已經(jīng)部署了 Exacluster,這是業(yè)界首批基于英偉達(dá)(Nvidia)H200 GPU 的集群之一。該集群將用于構(gòu)建一個(gè)AI搜索引擎,號稱可以比谷歌(Google)搜索更好地理解用戶需求,并返回更好的搜索結(jié)果。
據(jù)介紹,Exacluster采用了 18 個(gè)基于 NVIDIA H200 的 8卡服務(wù)器(exa 表示 Quintillion,或 10^18),即擁有 144 個(gè) H200 GPU,具有 20TB HBM3E 內(nèi)存(每個(gè) GPU 141GB HBM3E),可提供 569958 TOPS(約 570 PetaTOPS)的組合計(jì)算性能。同時(shí),該集群還集成了192 個(gè) 96 核CPU(共計(jì) 3456 個(gè)CPU內(nèi)核),并配備了 36TB 的 DDR5 內(nèi)存和 270TB 的 NVMe 固態(tài)存儲。該集群將被將用于訓(xùn)練 ExaAI 的神經(jīng)網(wǎng)絡(luò),總體的功耗為 100kW。
該集群依然采用的是標(biāo)準(zhǔn)空氣冷卻方案,因此為了解決散熱問題,該集群當(dāng)中的每個(gè)機(jī)架只安裝兩臺這樣的機(jī)器,以確保所有服務(wù)器都能得到足夠的冷卻。
據(jù)Will Bryk介紹,Exacluster的成本約為500萬美元,這也意味著其每臺服務(wù)器價(jià)格約為27.78萬美元。值得一提的是,英偉達(dá)也是ExaAILabs公司的主要投資者之一,此外Lightspeed 和 YCombinator也是其投資者。
發(fā)布日期: 2024-08-22
發(fā)布日期: 2024-04-16
發(fā)布日期: 2024-11-15
發(fā)布日期: 2024-06-17
發(fā)布日期: 2024-05-23
發(fā)布日期: 2024-05-16
發(fā)布日期: 2024-04-12
發(fā)布日期: 2024-10-29
發(fā)布日期: 2025-01-14
發(fā)布日期: 2025-01-14
發(fā)布日期: 2025-01-14
發(fā)布日期: 2025-01-14
發(fā)布日期: 2025-01-14
尋找更多銷售、技術(shù)和解決方案的信息?
廣州綠測電子科技有限公司(簡稱:綠測科技)成立于2015年11月,是一家專注于耕耘測試與測量行業(yè)的技術(shù)開發(fā)公司。綠測科技以“工程師的測試管家”的理念向廣大客戶提供專業(yè)的管家服務(wù)。綠測科技的研發(fā)部及工廠設(shè)立于廣州番禺區(qū),隨著公司業(yè)務(wù)的發(fā)展,先后在廣西南寧、深圳、廣州南沙、香港等地設(shè)立了機(jī)構(gòu)。綠測科技經(jīng)過深耕測試與測量領(lǐng)域多年,組建了一支經(jīng)驗(yàn)豐富的團(tuán)隊(duì),可為廣大客戶提供品質(zhì)過硬的產(chǎn)品及測試技術(shù)服務(wù)等支持。
技術(shù)工程師
銷售經(jīng)理
020-22042442
廣東公司:馮經(jīng)理
020-2204 2442-9-822
廣西公司:何經(jīng)理
020-2204 2442-9-880