登録して招待リンクを共有すると、動画再生報酬と紹介報酬を獲得できます。

Ren
@Ryrenz
AI Engineer | 分享实用 AI 工具和实战心得
参加 March 2025
696 フォロー中    12.1K ファン
🍎 真给力,Locals 能让一台 Apple 芯片的 Mac,把本地大模型跑出平时三倍的速度。 Locals 在 GitHub 已经揽下 1088 star,背后对应 Arip Asadulaev 2026 年的论文《Breaking the Space Barrier》,不是随手攒的调参工程。 在 Mac 上本地跑模型最烦的,是一旦开多个 agent、对话一长,速度就肉眼可见地垮。实测 M2 Pro 16G 机器同时扛 8 个请求,普通方案只有 87 tokens/s,Locals 能到 271,差不多三倍。 它的巧劲在于把 agent 工具那串又臭又长的系统提示缓存到磁盘,重启还能接着用,工具调用时直接在 GPU 上做语法约束,让输出严格合你的 schema。接口还兼容 OpenAI、Anthropic、Ollama,Claude Code、Cline、Aider 这些现成工具拿来即插。 同样一台 Mac,换个引擎就多出两倍马力,这买卖划算。 GitHub:
もっと見る