智快網 - 新科技與新能源行業網絡媒體

          微軟Win11電腦本地運行DeepSeek-R1大模型,NPU能力引關注!

             發布時間:2025-01-30 20:12 作者:朱天宇

          在人工智能與邊緣計算的交匯點上,微軟近日邁出了重要一步,宣布推出專為NPU(神經處理單元)優化的DeepSeek-R1模型。這一創新之舉不僅標志著微軟對邊緣計算潛力的深刻洞察,也預示著搭載高通驍龍X芯片的Copilot+ PC將率先迎來一場技術革命,隨后英特爾酷睿Ultra 200V等平臺也將陸續加入這一行列。

          微軟通過官方渠道宣布,DeepSeek-R1的首個版本——DeepSeek-R1-Distill-Qwen-1.5B,已正式入駐Azure AI Foundry和GitHub,供開發者下載使用。同時,微軟還透露,參數規模更大的7B和14B版本也即將面世,這將極大地助力開發者充分挖掘Copilot+ PC中NPU的強大性能。

          DeepSeek-R1模型應用場景

          微軟強調,Copilot+ PC上的NPU開創了一種全新的AI應用范式。在這一范式下,生成式AI不僅能夠在被調用時迅速響應,還能支持半連續運行的服務模式。這一特性使得開發者能夠利用AI推理引擎,構建出更加主動、持續的用戶體驗。

          為了實現這一目標,微軟在Phi Silica項目的基礎上,積累了豐富的推理優化經驗和技術。這些經驗和技術被巧妙地融入到針對NPU優化的DeepSeek模型中,包括模型分割以實現性能與效率的最佳平衡、低比特率量化以及Transformer模型到NPU的映射等。微軟還借助Windows Copilot Runtime(WCR)和ONNX QDQ格式,在多樣化的Windows生態系統中實現了模型的廣泛部署。

          DeepSeek模型優化對比

          為了讓更多開發者能夠輕松體驗DeepSeek模型的魅力,微軟提供了便捷的下載途徑。只需在Visual Studio Code中安裝AI Toolkit擴展,開發者即可輕松獲取這一創新成果。同時,以ONNX QDQ格式優化的DeepSeek模型也將很快出現在AI Toolkit的模型目錄中,供開發者直接從Azure AI Foundry中拉取使用。

          原始模型與NPU優化模型響應對比

          微軟還通過實例展示了原始模型與NPU優化模型之間的差異。在相同的提示下,原始模型和NPU優化模型給出了略有不同的響應。這一對比不僅彰顯了NPU優化模型在推理能力上的提升,也進一步驗證了微軟在模型優化方面的深厚實力。

           
           
          更多>同類內容
          全站最新
          熱門內容
          本欄最新
           
          智快科技微信賬號
          微信群

          微信掃一掃
          加微信拉群
          電動汽車群
          科技數碼群

          日韩精品一区二区三区毛片| 无码精品一区二区三区在线| 国产伦精品一区二区三区四区 | 精品国产一区二区三区久| 99久久99久久久精品久久| 国产啪精品视频网站| 九九精品视频在线| 亚洲日韩精品无码一区二区三区 | 91精品国产自产在线观看| 久久精品乱子伦免费| 久夜色精品国产一区二区三区| 日韩精品无码区免费专区| 国产亚洲美女精品久久| 精品免费久久久久久成人影院| 亚洲国产日韩综合久久精品| 精品亚洲aⅴ在线观看| 久久99精品久久久久久首页| 九九精品在线观看| 99热在线日韩精品免费| 国产精品亚洲综合一区| 九九热这里都是精品| 日韩在线一区二区| 日韩人妻无码精品无码中文字幕| 精品久久中文字幕有码| 九九热线精品视频16| 2020国产精品永久在线| 精品久久久久久中文字幕人妻最新| 99久久精品国产亚洲| 久久精品aⅴ无码中文字字幕| 国内精品久久人妻互换| 成人午夜精品无码区久久| 久久九九久精品国产| 国产啪亚洲国产精品无码| 亚洲麻豆精品国偷自产在线91| 日韩一区二区在线免费观看| 亚洲日韩国产一区二区三区在线| 日韩视频一区二区三区| 日韩人妻无码一区二区三区| 日韩精品在线观看| 亚洲日韩精品国产3区| 老司机午夜精品视频在线观看免费|