TwiScan
Hot
Communities
Account collections
Login
Register
English
日本語
한국의
简体中文
繁体中文
Register and share your invite link to earn from video plays and referrals.
Register now
AI Dance
@AI_Whisper_X
China AI insider | Silicon Valley Decoded 算法 + VC 双视角 · 讲人话 📬 aidance.info
@gmail
.com
Joined October 2024
318
Following
7K
Followers
AI Dance
@AI_Whisper_X
2026.10.14 09:02
卧槽,Anthropic 2021年就在讨论这些了吗? 这是 Anthropic 2021 年 7 月的研究路线图,在 Bartz 版权案里被当作证据公开了,读完有点震撼。 - 顶层目标就是 AGI,落到具体是做一个能对话的 AI 助手,写函数、找 bug、设计 API、聊代码风格,“具备一个软件工程师同事的全部能力” - 训练 1T 及以上的模型,用自动奖励 + 人类反馈做 RL 微调,那时 GPT-3 也才 175B - 硬件 de-risk:TPU、Trainium,为 compute deals 做准备;最值钱的资产是模型权重,要加强安全 - 数据:language、code、diffs、PRs、debugging,拿 diffs 和 PRs 去 finetune,"把人的意图和模型行为连起来" - long context 和 memory,批注里还提了三种 memory 方案:periodic batched backprop、soft database lookup、skeletonization - reward model 的鲁棒性,对齐的 scaling law - 单独一节 RL for Tool Use,先在 search 和 printf debugging 上看到 signs of life - 批注区 Dario 有一句:"Yep. Basically the code editor." 每一个词现在看都不吃惊。但 2021 年 7 月,GPT-3 还是天花板,Copilot 预览版刚出两周,这些东西全部同时出现在一份文档里。人的认知差距,真的可以跨这么多年。 其他同时公开的还有 《Concise Research Roadmap》(简明研究路线图) 《Product visions for early 2025》(2025 年初产品愿景):写于 2023 年 6 月,讨论 Claude 未来可能的用途。 《Responsible Scaling as a Framework for Anthropic》(以负责任扩展作为 Anthropic 的框架):讨论 RSP(负责任扩展政策),以及 Anthropic 为什么要持续扩展模型能力
Show more
0
0
1
19
2
Forward to community
Most Popular Users
Tibo
@thsottiaux
1M Followers
FinancialJuice
@financialjuice
959K Followers
First Squawk
@FirstSquawk
579.7K Followers
Serenity
@aleabitoreddit
1.1M Followers
Binance Wallet
@BinanceWallet
2.8M Followers
LiveSquawk
@LiveSquawk
504.1K Followers
Binance
@binance
16.1M Followers
New York Post
@nypost
4.3M Followers
CNBC
@CNBC
6.3M Followers
ClaudeDevs
@ClaudeDevs
829.6K Followers
Seeking Alpha
@SeekingAlpha
347.9K Followers
The Wall Street Journal
@WSJ
22.3M Followers
TheStreet
@TheStreet
1.2M Followers
Boris Cherny
@bcherny
640.9K Followers
Thariq
@trq212
403.9K Followers