來源:電子發(fā)燒友網
發(fā)布時間:2024-12-31
閱讀量:12
近日,有媒體報道,小米正在著手搭建自家的GPU萬卡集群,將對AI大模型加大投入。該計劃已進行數月,據悉小米大模型團隊在成立之初便已擁有6500張GPU資源,小米創(chuàng)始人兼董事長雷軍在該團隊扮演重要的領導角色。
高性能計算是大模型發(fā)展的基礎,而GPU在其中扮演重要作用。隨著AI在如今社會中發(fā)揮著越來越重要的作用,應用領域不斷擴展,需要的計算資源也越來越多,因此對于GPU的需求也在不斷上升。
小米搭建萬卡GPU集群,加大AI大模型投入
如今我們生活中已經有不少領域開始充斥著AI的身影,包括AI配音、AI影像、AI圖片、AI導航,以及不少人正在使用的免費AI大模型等。但相比ChatGPT、豆包、Kimi、通義千問等知名度不小的大模型,小米的MiLM顯得相對低調。
這是一款在今年5月份才正式通過大模型備案的小米大預言模型,小米宣布將把相關模型逐步應用于小米汽車、手機、智能家居等產品中,后續(xù)“將面向更多用戶開放體驗”。
而到了近期,市場更是傳出小米準備搭建GPU萬卡集群,決心加大對AI的投入。但搭建GPU的萬卡集群并不容易,一方面在于昂貴的成本。訓練AI大模型通常需要使用高性能的GPU芯片,如英偉達的A100、H100等。
這些高端芯片的單價本身就非常高,A100芯片價格約9萬元一張,H100閹割后的HGX H20渠道價格約11萬一張,而萬卡集群需要至少一萬張以上的GPU卡,僅芯片采購成本就可能達到數十億元。
并且除了GPU芯片本身,構建萬卡集群還需要大量的配套硬件設備,如服務器、存儲設備、網絡設備等。這些設備的采購和安裝成本也相當恐怖,進一步增加了總體投入。
而之所以需要GPU萬卡集群,是因為AI大模型通常包含數十億乃至數萬億的參數,例如GPT-3就有1750億個參數,訓練和推理過程中需要進行海量的矩陣運算和復雜的數學計算。如此大規(guī)模的計算任務,單張GPU的計算能力遠遠無法滿足,需要借助GPU萬卡集群并行計算來加速。
當然,這些技術的出現,其實并非突然,而是早有布局。小米早在2016年便開始組建第一只視覺AI團隊,逐步建立了視覺、語音、聲學、知識圖譜、NLP、機器學習、多模態(tài)等AI技術能力。
到2017年,小米正式發(fā)布了智能語音助手“小愛同學”。盡管當時的AI技術和現在相比可能顯得較為基礎,但小愛同學已經運用了語音識別、NLP、機器學習等核心技術來實現人機交互。
去年4月份,小米成立AI實驗室大模型團隊,初始團隊便擁有6500張GPU資源。并認為欒劍擔任該團隊的負責人,欒劍此前曾任東芝(中國)研究院研究員、微軟(中國)工程院高級語音科學家、微軟小冰首席語音科學家及語音團隊負責人等職位。
并且在近期,有消息稱DeepSeek開源大模型DeepSeek-V2的關鍵開發(fā)者之一羅福莉將加入小米,有望進一步加強小米AI大模型團隊實力。
端側擁抱AI已成共識,小米具備重大優(yōu)勢
國內目前已經有多家企業(yè)開展了萬卡集群的建設,例如華為昇騰、科大訊飛、中國電信、中國移動等,其中中國電信在上海、北京兩個萬卡集群已經投產,而中國移動位于呼和浩特、哈爾濱兩大萬卡級別的智算中心也已經先后投產運行。
更別說百度等公司已經在探討構建十萬卡集群,有業(yè)內人士認為,市場中很快便會有更多的十萬卡集群出現。
另一方面,海外則更加激進。例如由馬斯克旗下xAI公司打造的xAI Colossus 超級AI集群,擁有10萬個英偉達H100 GPU。其第一階段建設已完成并全面上線,未來計劃增加5萬張H100 GPU和5萬張下一代H200 GPU,屆時GPU總數將翻倍。
OpenAI正在設計能夠將1000萬塊GPU連在一起的計算模型,Meta CEO扎克伯格曾在年初宣布,計劃購買35萬塊英偉達H100 GPU,將Meta的算力擴展到相當于60萬塊英偉達H100 GPU的水平。
與此同時,越來越多的企業(yè)開始更為注重AI,包括理想汽車創(chuàng)始人李想此前公開表示,理想汽車不僅是一家汽車制造企業(yè),更是一家AI企業(yè)。
加上如今的AI手機、AI手表、AIPC甚至智能汽車等,這些端側產品均在積極擁抱AI,AI的加入也為這些產品帶來了更多的差異化與個性化,甚至有望成為未來產品體驗差異的分水嶺。
而相比其他企業(yè),小米擁有一項重大的優(yōu)勢,其AI大模型可以與自身的“人車家”戰(zhàn)略完美契合,甚至可以說AI大模型的加入,讓小米“人車家”全生態(tài)完成了最后一項閉環(huán)。
從手機到智能家居,再到新能源汽車,小米均有涉獵,并且大多已經成為行業(yè)中的主要參與者,例如小米為全球第三大手機廠商,米家更是全球最大的智能家居平臺,其中小愛音箱以超過40%的市場份額穩(wěn)居中國智能音箱榜首。
小米汽車更是后來居上,不僅屢屢出圈,自今年3月份發(fā)布以來,有望在今年內實現超過13萬輛的交付成績,為小米集團貢獻近百億元的營收。同時小米汽車更是小米集團獨資控股,保證了小米汽車能夠貫徹未來小米集團的發(fā)展方向。
另一方面,雷軍不僅是小米的創(chuàng)始人,如今依然是金山軟件的董事長,意味著未來小米AI大模型有望在WPS等辦公軟件中布局。
從硬件端的互聯網入口,到辦公軟件、游戲等領域,都已經為小米的MiLM大模型預留足夠的發(fā)展空間,這是許多AI大模型企業(yè)沒有的巨大優(yōu)勢。不僅保障了未來小米AI大模型的迭代升級,同時也解決了其數據歸屬問題,進一步加速AI大模型的升級。
總結
從小米過往布局新賽道的步伐來看,通常是確定了某個賽道已經得到市場驗證,并相對成熟再決定進入。進入賽道后,再利用小米集團的自身優(yōu)勢,迅速做大做強。如今小米采用萬卡集群,加大投入到AI大模型領域,意味著不久后便有望看到該模型的普及。也期待未來市場中小米AI大模型的表現。
微信掃碼分享