國內(nèi)首次！百度智能云成功點(diǎn)亮昆侖芯三代萬卡集群

業(yè)界來源：快科技 2025-02-05 11:20:37

近日，百度智能云成功點(diǎn)亮了昆侖芯三代萬卡集群，這也是國內(nèi)首個(gè)正式點(diǎn)亮的自研萬卡集群。

據(jù)了解，百度通過自研芯片和大規(guī)模集群的建設(shè)，不僅解決了自身算力供應(yīng)的問題，還為整個(gè)行業(yè)提供了新的思路和方向。

隨著國產(chǎn)大模型的興起，萬卡集群逐漸從“單任務(wù)算力消耗”到“集群效能最大化”過渡，通過模型優(yōu)化、有效訓(xùn)練率提升、動(dòng)態(tài)資源分配等手段，智能調(diào)度任務(wù)，將訓(xùn)練、微調(diào)、推理任務(wù)混合部署，從而提升集群綜合利用率，降低單位算力成本。

讓人眼前為之一亮的是，在24年9月升級(jí)的百度百舸AI異構(gòu)計(jì)算平臺(tái)4.0，也在萬卡集群的建設(shè)中發(fā)揮了至關(guān)重要的作用。

首先百舸4.0構(gòu)建了十萬卡級(jí)別的超大規(guī)模HPN高性能網(wǎng)絡(luò)，針對(duì)跨地域通信中的高延遲問題，通過優(yōu)化的拓?fù)浣Y(jié)構(gòu)、多路徑負(fù)載均衡策略及通信策略，實(shí)現(xiàn)了幾十公里的跨地域通信。

其次在通信效率上，百舸通過先進(jìn)的擁塞控制算法和集合通信算法策略，實(shí)現(xiàn)了完全無阻塞，并通過10ms級(jí)別超高精度網(wǎng)絡(luò)監(jiān)控，保障了網(wǎng)絡(luò)的穩(wěn)定性。

另外在多芯混訓(xùn)方面，百舸展現(xiàn)了強(qiáng)大的資源整合能力。當(dāng)業(yè)務(wù)提交工作負(fù)載時(shí)，百舸可自動(dòng)進(jìn)行芯片選型，依據(jù)集群剩余的芯片資源，選擇性價(jià)比最高的芯片來運(yùn)行任務(wù)，從而最大化地利用集群的剩余資源，實(shí)現(xiàn)高達(dá)95%的萬卡多芯混合訓(xùn)練效能。

此外，在集群穩(wěn)定性方面，百舸提供了全面的故障診斷手段，能夠快速自動(dòng)偵測(cè)到導(dǎo)致訓(xùn)練任務(wù)異常的節(jié)點(diǎn)故障。

值得關(guān)注的是，日前，花旗銀行曾發(fā)布研報(bào)表示，DeepSeek、百度等中國模型展現(xiàn)出高效和低成本優(yōu)勢(shì)，將有助于加速全球AI應(yīng)用開發(fā)，并在全球引發(fā)更多技術(shù)創(chuàng)新，推動(dòng)2025年人工智能應(yīng)用的拐點(diǎn)。

另外中國工程院院士、清華大學(xué)計(jì)算機(jī)系教授鄭緯民也表示，當(dāng)下構(gòu)建國產(chǎn)自主萬卡系統(tǒng)充滿挑戰(zhàn)，但"至關(guān)重要"。