韩国三级一区-韩国三级香港三级日本三级la-韩国三级香港三级日本三级-韩国三级视频网站-日韩欧美一及在线播放-日韩欧美一二三区

首頁|必讀|視頻|專訪|運營|制造|監管|大數據|物聯網|量子|低空經濟|智能汽車|特約記者
手機|互聯網|IT|5G|光通信|人工智能|云計算|芯片|報告|智慧城市|移動互聯網|會展
首頁 >> 頭條資訊 >> 正文

DeepSeek開源第一彈:6小時收藏破5000次,利好國產GPU? | 智客星球

2025年2月25日 08:43  新浪科技  作 者:周文猛

2月24日,在上周DeepSeek宣布本周將是開源周(OpenSourceWeek),并將連續開源五個軟件庫后。今日上午9:30時許,DeepSeek宣布開源了本次開源周首款代碼庫——針對Hopper GPU進行優化的高效型MLA解碼核——FlashMLA。

新浪科技注意到,在GitHub上,目前該項目開源6小時后便已收獲了超過5000Star收藏,并且擁有188個Fork(副本創建)。在聽到DeepSeek開源FlashMLA并迎來的快速的Star收藏和Fork數據增長后,某港股上市公司CTO在與新浪科技溝通中直呼:“太強了”。

另有專注于AI硬件研究并投資的投資人,在查看FlashMLA后告訴新浪科技,對于國產GPU而言,此次開源算是重大利好。“此前的國產GPU卡,很弱。那現在可以通過FlashMLA提供的優化思路和方法論,嘗試讓國產卡大幅提升性能,即使架構不同,后面國產卡的推理性能提升將是順理成章的事兒”。

據DeepSeek官方介紹,FlashMLA基于Hopper GPUs的有效MLA解碼內核,可針對可變長度序列進行優化。

在DeepSeek整個技術路線中,MLA(多頭潛在注意力機制)是公司已經發布的V2、V3兩款模型中,最為核心的技術之一。被用于解決計算效率和內存占用上的性能瓶頸,能夠顯著提升模型訓練和推理效率,同時保持甚至增強模型性能。

此前,中國工程院院士、清華大學計算機系教授鄭緯民在與新浪科技溝通中曾提及:“DeepSeek自研的MLA架構為其自身的模型訓練成本下降,起到了關鍵作用。”他指出,“MLA通過改造注意力算子壓縮了KV Cache大小,實現了在同樣容量下可以存儲更多的KV Cache,該架構和DeepSeek-V3模型中FFN 層的改造相配合,實現了一個非常大的稀疏MoE 層,成為DeepSeek訓練成本低最關鍵的原因。”

此次DeepSeek直接開放MLA解碼核——FlashMLA,意味著DeepSeek將最為核心的MLA底層代碼直接免費開放,這讓廣大開發群體可以直接復用FlashMLA代碼庫實現用更少的GPU服務器完成同樣的任務,直接降低推理成本,這對于更多希望基于DeepSeek開源能力進行底層優化和AI應用開發群體而言,無疑是一大福利。

有意思的是,DeepSeek此次開放的MLA解碼核,主要是針對Hopper GPU進行優化用途的。通常而言,Hopper GPU是指基于英偉達Hopper架構研發的H系列GPU產品。目前,英偉達該系列芯片已經發布H100、H800和H20等多款芯片。

據DeepSeek方面介紹,在基準測試性能表現上,FlashMLA在英偉達H800 SXM5 GPU上可實現3000 GB/s 的內存速度以及580TFLOPS的計算上限。

公開資料顯示,根據美國出口管制規定,H800的帶寬上限被設定為600 GB/s,相比一些旗艦產品有所降低。這意味著,使用FlashMLA優化后,H800的內存帶寬利用率有望進一步提高甚至突破H800 GPU理論上限,在內存訪問上達到極致,能讓開發群體充分“壓榨”英偉達H系列芯片能力,以更少的芯片實現更強的模型性能,最大化GPU價值。

有專注于AI硬件研究并投資的投資人在查看FlashMLA后表示,“FlashMLA是能讓LLM在H800跑得更快、更高效的優化方案,尤其適用于高性能AI任務,他的核心是加速大語言模型的解碼過程,提高模型的響應速度和吞吐量,這對于實時生成任務(如聊chatbot等)非常重要,對于大模型的能力和使用體驗是巨大的促進,速度會明顯提升。”

雖然FlashMLA是一個針對Hopper GPU的優化代碼庫,但對于國產GPU而言,此次開源也有利好。上述投資人在查看FlashMLA后表示,對于國產GPU而言,此次開源算是重大利好。“此前的國產GPU卡,很弱。那現在可以通過FlashMLA提供的優化思路和方法論,嘗試讓國產卡大幅提升性能,即使架構不同,后面國產卡的推理性能提升將是順理成章的事兒”。

編 輯:路金娣
飛象網版權及免責聲明:
1.本網刊載內容,凡注明來源為“飛象網”和“飛象原創”皆屬飛象網版權所有,未經允許禁止轉載、摘編及鏡像,違者必究。對于經過授權可以轉載,請必須保持轉載文章、圖像、音視頻的完整性,并完整標注作者信息和飛象網來源。
2.凡注明“來源:XXXX”的作品,均轉載自其它媒體,在于傳播更多行業信息,并不代表本網贊同其觀點和對其真實性負責。
3.如因作品內容、版權和其它問題,請在相關作品刊發之日起30日內與本網聯系,我們將第一時間予以處理。
本站聯系電話為86-010-87765777,郵件后綴為cctime.com,冒充本站員工以任何其他聯系方式,進行的“內容核實”、“商務聯系”等行為,均不能代表本站。本站擁有對此聲明的最終解釋權。
相關新聞              
 
人物
vivo胡柏山:手機行業是最典型的新質生產力代表
精彩專題
低空經濟2025:助力中國經濟騰飛,成就高質量發展
2024通信業年終盤點
2024數字科技生態大會
2024年度中國光電纜優質供應商評選活動
CCTIME推薦
關于我們 | 廣告報價 | 聯系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網 CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號-1  電信與信息服務業務經營許可證080234號 京公網安備110105000771號
公司名稱: 北京飛象互動文化傳媒有限公司
未經書面許可,禁止轉載、摘編、復制、鏡像