20260422研读openclaw类agent资料摘录
20260422研读openclaw类agent资料摘录
来源类型: 行业文章摘要
日期: 2026
核心金句
1|20260422研读openclaw类agent资料摘录
2|
3|Claude Mythos的核心不是一个更大的Transformer,而是一种叫做「循环深度Transformer」(Recurrent-Depth Transformer, RDT)的架构。
4|说白了就是,同一套权重,在一次前向传播里循环跑最多16次。
5|
6|整个OpenMythos的架构分三段:
7|Pr
4 大要点
1. (待续)
1|20260422研读openclaw类agent资料摘录
2|
3|Claude Mythos的核心不是一个更大的Transformer,而是一种叫做「循环深度Transformer」(Recurrent-Depth Transformer, RDT)的架构。
4|说白了就是,同一套权重,在一次前向传播里循环跑最多16次。
5|
6|整个OpenMythos的架构分三段:
7|Prelude(序曲)→ Recurrent Block(循环核心)→ Coda(终章)
8|Prelude和Coda是标准的Transformer层,各跑一次。
9|真正的计算核心是中间的「循环块」,它最多循环16次,
10|
11|Karpathy 最近讲了一个很反直觉的判断:今天的大模型之所以越做越大,未必是因为“思考”本身需要这么多参数,而是因为训练数据太脏、噪声太多。
12|换句话说,我们现在看到的模型膨胀,未必主要是在为“智力”买单,更像是在为垃圾数据买单。
13|
14|Karpathy 进一步的预测是:应该把这两件事彻底拆开。
15|一边是“认知核心”,只保留推理、
2. (待续)
3. (待续)
4. (待续)
关键洞察
1. 核心
2. 亮点
3. 定位
4. 趋势
资料来源
- 原始文件:
raw/articles/openclaw/20260422研读openclaw类agent资料摘录.md - 来源: