國產(chǎn)GPU鼎力支持!摩爾線程快速部署DeepSeek
DeepSeek V3、R1系列開源AI大模型在多語言理解、復(fù)雜推理任務(wù)中展現(xiàn)了卓越性能,不僅推動了AI技術(shù)的普及與發(fā)展,更是對開源社區(qū)的極大貢獻。
2025-02-05 09:39:56
來源:快科技??

快科技2月4日消息,DeepSeek V3、R1系列開源AI大模型在多語言理解、復(fù)雜推理任務(wù)中展現(xiàn)了卓越性能,不僅推動了AI技術(shù)的普及與發(fā)展,更是對開源社區(qū)的極大貢獻。

目前,各家科技巨頭都已紛紛開始支持、部署DeepSeek,國產(chǎn)硬件也在加速支持。

作為國產(chǎn)全功能GPU創(chuàng)新企業(yè),摩爾線程快速實現(xiàn)了對DeepSeek蒸餾模型推理服務(wù)的高效部署,可讓更多開發(fā)者基于摩爾線程全功能GPU,進行AI應(yīng)用創(chuàng)新。

一鍵體驗地址:

https://playground.mthreads.com

此外,用戶也可以基于摩爾線程MTT S80、MTT S4000顯卡,進行DeepSeek-R1蒸餾模型的推理部署。

其實早在1月28日,就已經(jīng)有B站UP主在摩爾線程MTT S80上手動完成實踐:

https://www.bilibili.com/video/BV18YfQYEEs2

通過DeepSeek提供的蒸餾模型,能夠?qū)⒋笠?guī)模模型的能力遷移至更小、更高效的版本,在國產(chǎn)GPU上實現(xiàn)高性能推理。

摩爾線程基于自研全功能GPU,通過開源與自研雙引擎方案,快速實現(xiàn)了對DeepSeek蒸餾模型的推理服務(wù)部署。

開源框架適配:

基于Ollama開源框架,摩爾線程完成DeepSeek-R1-Distill-Qwen-7B蒸餾模型的部署,并在多種中文任務(wù)中展現(xiàn)了優(yōu)異的性能,驗證摩爾線程自研全功能GPU的通用性與CUDA兼容性。

自研引擎加速:

通過摩爾線程自主研發(fā)的高性能推理引擎,結(jié)合軟硬件協(xié)同優(yōu)化技術(shù),通過定制化的算子加速和內(nèi)存管理,顯著提升了模型的計算效率和資源利用率。

這一引擎不僅支持DeepSeek蒸餾模型的高效運行,還為未來更多大規(guī)模模型的部署提供了技術(shù)保障。 

最后,摩爾線程即將開放自主設(shè)計的夸娥(KUAE)GPU智算集群,全面支持DeepSeek V3、R1模型,以及新一代蒸餾模型的分布式部署。

夸娥集群集成先進推理技術(shù)與分布式計算框架,將確保大規(guī)模模型的高效穩(wěn)定運行,助力開發(fā)者快速實現(xiàn)業(yè)務(wù)落地。

最新文章
1
“冰爽體驗”消費升溫,制冰家電面臨哪些挑戰(zhàn)?
2
空調(diào)行業(yè)"銅鋁之爭":當(dāng)成本博弈撞上品質(zhì)底線
3
最強配置!小米MIX Flip 2搭載驍龍8至尊版+5165mAh電池
4
行業(yè)唯一折疊機皇!榮耀Magic V5搭載滿血驍龍8至尊版
5
GPMI技術(shù)破局電視操作復(fù)雜難題,產(chǎn)業(yè)生態(tài)加速商用落地
6
長虹品牌價值突破2500億背后的三重驅(qū)動力
7
索尼中國亮相2025碳博會:融合創(chuàng)新科技與娛樂,賦能低碳未來?
8
容聲世俱杯宣言:不止于新鮮,領(lǐng)跑冰箱“養(yǎng)鮮”新主場
9
磁力金牛助3C消電好物大促快速打爆,收獲節(jié)點增長
10
5位老板娘連麥快手小店 了不起的老板娘活動助新潛主播618漲粉
11
冒險再啟程!快手團綜《帶你趣戶外2025》官宣定檔
12
快手「梨園烽火令」收官之夜落幕,帶領(lǐng)用戶感受傳統(tǒng)文化煥新魅力
13
快手618購物節(jié):全域經(jīng)營驅(qū)動行業(yè)增長,成交破億商品數(shù)同比增長475%
14
快手本地生活2025聚力城市生態(tài)大會首站落地長春 助力區(qū)域本地商業(yè)增長
15
車載顯示迎來三大革命丨“抬頭”革命
16
OLED電視三強格局初步形成,但是依然面臨市場競爭壓力
17
1380億元的“國補”即將抵達,廚電業(yè)仍舊有人歡喜有人憂
18
華為首款鴻蒙旗艦電視要來了!曝光了這些功能
19
蘋果iPhone 17 Pro首次堆散熱:均熱板諜照曝光
20
電視銷量下滑 面板價格撐不住了 32-98英寸全面下跌
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512