TwiScan
人気
コミュニティ
アカウントコレクション
ログイン
登録
English
日本語
한국의
简体中文
繁体中文
登録して招待リンクを共有すると、動画再生報酬と紹介報酬を獲得できます。
今すぐ登録
GitHubDaily
@GitHub_Daily
💡 挖掘开源的价值 🧑🏻💻 坚持分享 GitHub 上高质量、有趣、实用的教程、AI工具、前沿 AI 技术 🧐 A list cool, interesting projects of GitHub. ✏️ 公众号:GitHubDaily
参加 May 2023
209
フォロー中
90.8K
ファン
GitHubDaily
@GitHub_Daily
2026.07.31 13:30
用 10 美元的开发板,256MB 内存,跑十亿参数的大模型,这事真有人做出来了。 PicoLM 是纯 C 写的推理程序,编译出来单个文件约 80KB 大小,零依赖,运行占 45MB 内存。 在树莓派 5 上每秒大约 10 个 Token,树莓派 4 是 8 个,十美元那块板子也有 1 个。 GitHub: 作者拿它给 PicoClaw 当本地大脑,两个凑一起就是个全程离线的 Agent,无需联网。 上下文缓存会存到磁盘,若是同一段提示词第二次跑直接跳过,作者实测快 74%。 针对 ARM 和 x86 分别做了指令级优化,注意力计算和缓存也都精简过。 想要在本地跑大模型预算又有限,可以看下这个项目有没有值得参考学习的。
もっと見る
0
0
1
14
0
コミュニティへ転送
人気のあるユーザー
オリコンニュース
@oricon
2M ファン
New York Post
@nypost
4.3M ファン
ツイッター速報〜BreakingNews
@tweetsoku1
259.8K ファン
TVer新着
@TVer_info
101.8K ファン
PR TIMESテクノロジー
@PRTIMES_TECH
28.3K ファン
Bloomberg
@business
10.5M ファン
Reuters
@Reuters
26.5M ファン
モデルプレス
@modelpress
2.1M ファン
First Squawk
@FirstSquawk
579.6K ファン
billboard
@billboard
16.8M ファン
MANTANWEB/毎日キレイ
@mantanweb
68.6K ファン
吴说区块链
@wublockchain12
183K ファン
ファミ通.com
@famitsu
1.4M ファン
cv usk
@cv_usk
471 ファン
Yahoo!ニュース
@YahooNewsTopics
2.1M ファン