Mac 上专跑 MLX 格式模型的软件,开着就在后台给别的软件提供接口。
适合:在自己电脑跑 AI
我 Mac 上常驻的本地模型服务就是它:开机自己启动,Cherry Studio 和 Claude Code 都接它。踩过的坑:它主要跑 MLX 格式,我当时装的一个 GGUF 格式的模型就跑不起来。
oMLX 待在 Mac 顶部的菜单栏里,负责在后台把 MLX 格式的本地模型跑起来,再开一个接口给别的软件用:Cherry Studio 拿它聊天,Codex、Claude Code 这类工具拿它干活。它还带一个网页管理后台,能下载模型、看内存占用、直接对话。
http://localhost:8000/v1,再填上你在 oMLX 里设的 API 密钥。管理后台的集成功能能一键配好 Codex 等工具,接 Claude Code 也做了专门的优化。https://omlx.ai
上面的介绍是我们按 oMLX 的 GitHub 说明(含中文版)和官网介绍用自己的话整理的,细节以原作者为准。