TwiScan
인기
커뮤니티
계정 컬렉션
로그인
회원가입
English
日本語
한국의
简体中文
繁体中文
가입 후 초대 링크를 공유하면 동영상 재생 및 초대 보상을 받을 수 있습니다.
지금 가입
Ren
@Ryrenz
AI Engineer | 分享实用 AI 工具和实战心得
가입 March 2025
696
팔로잉 중
12.1K
팬
Ren
@Ryrenz
2026.10.23 03:05
📚 Datawhale 和 SGLang 团队创立的 RadixArk 刚联手开源了 zero-to-sglang,带你从零手写一个大模型推理引擎。 zero-to-sglang 在 GitHub 已经 1500+ star,大纲里加粗的章节由 SGLang 核心成员亲自执笔。 想入门大模型推理,最难的是第一步:直接啃 SGLang 源码,KV Cache、批处理调度、RadixAttention 一堆概念同时砸过来,看三天还在门口打转。 这套课的路子是先不碰代码、不碰 GPU,用五章把 LLM、推理、GPU、KV Cache 和 Benchmark 讲明白;再带你一步步手写 mini-sglang,从前向传播、生成一路做到 HTTP 服务、Paged KV Cache 和 RadixAttention;最后才回头读真实的 SGLang 源码,那时候每一段都能对上号。 中英文双语,有在线阅读站点。课程还在更新中,部分章节标着计划中,按排期大约每周一章。 想往推理 infra 方向转的,这套可以从第一章跟起来。 GitHub:
더 보기
0
0
5
6
3
커뮤니티로 전달
인기 있는 사용자
New York Post
@nypost
4.3M 팬
オリコンニュース
@oricon
2M 팬
Reuters
@Reuters
26.5M 팬
TVer新着
@TVer_info
101.8K 팬
First Squawk
@FirstSquawk
579.4K 팬
PR TIMESテクノロジー
@PRTIMES_TECH
28.3K 팬
ツイッター速報〜BreakingNews
@tweetsoku1
260.1K 팬
Bloomberg
@business
10.5M 팬
billboard
@billboard
16.9M 팬
zerohedge
@zerohedge
3.4M 팬
モデルプレス
@modelpress
2.1M 팬
ITZY
@ITZYofficial
6.6M 팬
空空道人
@Kongkongda5882
40.8K 팬
i-dle (아이들)
@official_i_dle
2.3M 팬
ATEEZ(에이티즈)
@ATEEZofficial
4.9M 팬