Wide / Deep

案例分析 / 2026 年 11 月 5 日

会做一块,
为什么做不够两块?

旧最佳组补齐 50 题后,随机成绩从 56.7% 变为 50%。补测没有训练,也没有改旧答案:新增的 20 题答得较差,拉低了总比例。逐条看失败经过后,发现缺少相关练习只是部分原因;更常见的是材料不够时没有补齐,失败后继续重复原动作。

01 / 分数怎么变了

原来的 30 题,一分没丢。

随机作答每题两份,全部计分;固定作答每题一份。模型相同,变化来自加入新的题。

范围随机作答固定作答三份全错的题
原 30 题34 / 60 · 56.7%15 / 30 · 50%7 / 30
新增 20 题16 / 40 · 40%9 / 20 · 45%9 / 20
完整 50 题50 / 100 · 50%24 / 50 · 48%16 / 50
不是简单地补入了更多难题

两批题的平均难度档都是 2,第三档及以上的比例都是 30%。新增第三档的六题——灰色陶瓦、紫色床、蓝色旗帜、红色地毯、橙色地毯、黏性活塞——18 份回答全部失败;原 30 题的第三档仍答对随机 6 / 16、固定 2 / 8。差别在同档题的具体制作组合。

与未训练模型相比

上一轮相同作答设置 · 30 题

随机 45% → 56.7%
固定 50% → 50%

随机多答对 7 份,固定持平
更早历史记录 · 50 题

随机 46% → 50%
固定 48% → 48%

作答说明与随机方式不同,只能参考

完整 50 题的同条件训练收益,还缺相同作答设置下的未训练模型完整记录。两份旧参考的原 30 题随机分恰好都是 45%,但不是同一批答卷。

02 / 实际失败经过

做过基础步骤,
还没有把整件事做成。

新增 60 份答案中有 35 份失败,全部耗尽 24 步。其中 32 份至少三次重复同一个失败动作,25 份至少重复五次;失败答案的 840 步里,636 步被环境拒绝。

红色地毯:做了一块,缺第二块

红羊毛确实练过:种子题从 6 / 8 到 7 / 8,再到 8 / 8,前两轮有实际学习。测试中,一份随机回答和固定回答都做出了一块红羊毛,但地毯需要两块。模型反复尝试最终合成,没有再做第二块。

旧训练里,不少红旗题开局给了五块羊毛,只需补做一块;从头做够六块的原题三轮仍全错。

蜂蜜瓶:一批三个,需要四个

旧训练没有这条制作链的专项练习。一份随机回答和固定回答已经造出三个玻璃瓶,而目标需要四个。此后继续尝试最终合成,没有再做一批瓶子。

这既有覆盖不足,也暴露了“产量不够就再做一批”的共同缺口。

蓝色旗帜:相关题做过,却没练进

蓝羊毛及相关变体共七个题次,不是八次全对,就是八次全错,没有参加主练,也没有留下合格纠错。固定测试做出蓝染料后,反复索取不能直接领取的白羊毛,没有取线去制作。

旗帜还需要六块蓝羊毛,远超过做成一块。

黏性活塞:材料已有,缺的是中间步骤

旧训练缺少普通活塞和黏性活塞的完整制作链。固定测试做好木板后,仍缺普通活塞,却反复领取已经够用的黏液球,没有准备铁锭、红石和圆石。

只增加木板练习,解决不了这个组合任务。

也有偏离目标和做法不稳定

矿车题的固定回答跑去做指南针;圆石台阶已有多个有效的石材台阶近邻练习,固定回答却反复尝试做观察者。新增题里也有没专项练过却三份全对的金粒和紫珀块。因此,不能把所有失败都解释成“训练没覆盖”。

03 / 训练到底练进了多少

53 道不同题,
24 道至少参加过一次主练。

三轮共 115 个题次、920 份回答;有对有错的 47 个题次参加主练。八次全对或全错的题,在这套主练规则下没有对错差异。

轮次题数参加主练全对全错学习的改正动作
1311415249
2401517865
3441817973
题数增加,能力范围没有同比扩大

有学习信号的 47 个题次里,红旗变体占 12 次,书占 5 次,红羊毛占 4 次。纠错共学习 187 个改正动作。第一轮主练复用了原联合组的同一批回答和更新,没有多做一轮。

04 / 已确定的共同缺口

训练给好材料,
测试却要从头准备。

旧组三轮的 53 道不同训练题全部预给材料、禁止额外领取。刚暂停的新版,20 道种子和普通训练的 240 道候选也如此;第五组同样受影响。这是实际执行规则的差异。

35 份失败答案中,33 份曾经成功取料。要补的不是单纯“会不会取料”,而是发现缺口、补足原料或中间产物、继续完成原目标。

  1. 01

    统一从空背包开始

    种子、普通训练和 Wide/Deep 使用与测试相同的真实原料领取规则。取料算在 24 步内,不能把准备材料从用时和难度中抹掉。

  2. 02

    仍然检查题目是否合格

    原配方不变;验证能否做成、所练能力能否绕开、难度是否按要求变化。开放取料后,一些旧的能力判断不再成立,必须重新判断,不能沿用旧结论。

  3. 03

    让补料与补足数量进入学习

    保留新题八次作答的筛选和完整补救学习,检查真正有用的取料动作不会被丢掉。中间材料不足时要继续制作,不能一律用领取代替。

  4. 04

    保留结果,旧条件回答不混用

    已完成的 50 题直接保留;暂停前 46 份回答只归档。以后共享首轮种子回答,必须模型、题目、材料条件和作答说明全部相同。

下一步如何判断是否修好

既看最后分数,
也看失败有没有换一种样子。

五组、20 道种子、三轮、每题八份、每轮最多 60 题的规模不变,最终继续测共同 30 题。记录新题真正参加学习的比例、重复失败的次数、能否补足数量和从空背包完成任务,再看总成绩。

这些测试案例已被用于改进方法;下一轮能检验修订是否解决已见问题,最终确认能否推广还需要没参与分析的新题。