主要来源IT之家
查看原文事件专题 ·单一信源
微软升级 Windows ML:实验性原生支持 GGUF 与 ONNX 本地推理
微软在 Windows 与 Surface 十月活动中介绍 Windows ML 的最新进展,通过与 llama.cpp 和 GGUF 开源社区合作,实验性支持从 Hugging Face 导入 GGUF 模型并直接在 Windows 11 设备端运行。新推出的 Windows ML Runtime API 可运行 ONNX 与 GGUF 两类模型,微软称其具备更高性能和更深的系统集成。微软还携手英伟达向 llama.cpp 贡献性能优化代码,并同步推出 Text Generation API 与 Speech Recognition API 供开发者构建文本生成和语音识别功能。原有的 ONNX Runtime API 仍获完整支持,未来针对 Windows 的优化将优先投向 Windows ML Runtime API。
当前结论
微软把 llama.cpp 和 GGUF 模型直接接进了 Win11 的 Windows ML,以后从 Hugging Face 下个模型就能在本地跑,还配了文本生成和语音识别 API。
2 个信源57° AI 热度最后更新 2026/10/9 02:21:34
证据链
2 个信源相关来源 1Clement Delangue
查看原文冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。