RWKV-P神经网络在Anki用户测试中全面优于FSRS算法
来源标题:RWKV-P, a neural network, beat both Anki algorithms for 9,999 of 9,999 users
一项基于约1万名Anki用户、3.5亿次复习记录的公开基准测试显示,RWKV-P对用户记忆概率的预测在9,999名用户中全部优于FSRS-7。该测试由FSRS开发团队运营,逐一比对算法预测与实际答题结果。Anki官方暂未集成RWKV-P,其创始人2025年曾表示近期加入并不现实。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
Anki 是一款闪卡应用,它会决定什么时候再把某张卡片展示给你。默认情况下,它使用 SM-2,一个 1987 年的公式。你可以切换到 FSRS,它会预测你在看到每张卡片之前记住它的可能性。你快要忘记的卡片今天就会出现。你记得很牢的卡片则要等上几周。
一个名为 RWKV-P 的神经网络(在基准测试图表中叫 RWKV-Instant)做出的这些预测比 FSRS 更准。在一项针对 9,999 名 Anki 用户的公开测试中,它对 100.0% 的用户做出的预测都更接近实际结果。11 月 19 日,一位 Anki 用户在 X 上发布了那张图表,称它“碾压了”以往尝试过的任何其他算法。官方 Anki 并没有包含 RWKV-P。2025 年,Anki 的创造者表示,加入它“在近期”听起来并不实际。
这项测试叫 srs-benchmark,由制作 FSRS 的志愿者团队运行。他们收集了约 1 万名 Anki 用户的复习历史。在每次复习之前,测试中的每个算法都会预测这个人答对卡片的可能性。然后他们把每个预测与用户实际按下的按钮进行比对。大约 3.5 亿次复习以这种方式被评分。
对阵 FSRS-7,9,999 次中有 9,997 次四舍五入后为 100.0%。RWKV-P 在另外两名用户上落败。X 上的那张图表来自 2025 年 5 月进行的同一测试。它显示对阵 FSRS-6(你今天就能在 Anki 中开启的版本)同样是 100.0%。
这里的“更好”指的是更低的 log loss,这是衡量概率预测的一个标准分数。一个自信却最终错误的预测代价最大。在整个测试中,RWKV-P 得分为 0.28,FSRS-7 得分为 0.34。这一差距大约是 FSRS-7 通过针对每位用户调参所获得提升的三倍。在默认设置下,FSRS-7 得分为 0.36。
FSRS-7 有 34 个被称为权重的数字,会针对每位用户进行调参。它一次只看一张卡片:你什么时候复习的,以及你按了哪个按钮。
RWKV 由一位名叫 Alex(GitHub 上的 1DWalker)的程序员构建。它会读取你所有卡片上的完整历史。它还能看到 FSRS 永远得不到的信息,比如你回答问题花了多长时间、今天是星期几、你今天已经复习了多少次,以及卡片属于哪个牌组。它在 5,000 名用户上训练,在另外 5,000 名用户上测试,然后互换两组。所有人都使用同一个模型,不做针对每位用户的调参。
开发 FSRS-7 的 Expertium 在 Anki 论坛上举了一个例子。一个用户心情很好,一直按 Good。然后心情变差,开始按 Again。用 Expertium 的话说,“FSRS 无法利用这种模式,RWKV-P 可以。”
与 Anki 不同,使用 RWKV-P 时没有“今天到期”的卡片列表。模型会不断重新计算你对每张卡片的记忆概率,并展示那些已经低于你设定目标的卡片。它在每次复习前才做出预测,使用截至那一刻的所有信息,包括你一分钟前刚答过的卡片。Expertium 这样描述:“每张卡片永远都是到期的,你选择期望保留率,它充当决定哪些卡片被展示的阈值。”
Expertium 说这种模式“简直可以称为‘无政府状态’”。在 FSRS 中,你对一张卡片的记忆概率在两次复习之间只会下降。在 RWKV-P 中,它可以在你不学习的时候上升。用 Expertium 的话说,“你不会知道下次看到这张卡片是明天还是 10 年后。”
同一个模型还有第二种模式叫 RWKV-Curve,它会给出到期日期。它精度较低,但仍然在 88.7% 的用户上胜过了 FSRS-7。
关于它的论坛帖子始于 2025 年 5 月。Expertium 问 Alex 是否愿意把 RWKV 构建进 Anki。据 Expertium 转述,Alex“不想花 6-12 个月做 Anki 开发方面的事”。十天后,创建 Anki 的 Damien Elmes 回复说:“在近期整合它听起来并不实际,而且我们应付 FSRS 已经忙不过来了。”Expertium 此前在帖子中写道,“目前开发精力最好花在别处”。FSRS 本身自 2023 年起就已进入 Anki,但仍默认关闭。
今年夏天,Expertium 致力于让 RWKV 小到能装在普通电脑上。一个非官方 Anki 中的版本对普通用户需要约 1.8 GB 的额外空间。Expertium 把一个测试版本做到了 1 MB 以下。速度是另一个问题。一位测试者的首次加载花了约 70 分钟。数据集中最大的收藏有 120 万张卡片。Expertium 的评论是:“别问我怎么会有人有 120 万张活跃卡片,我完全不知道。”
9 月,Expertium 在构建一个名为 Clanki 的独立 Anki 版本,并表示 RWKV“乐观估计到 10 月底”就能准备好。10 月 18 日,Expertium 写道:“我决定停止在 RWKV 和 Clanki 上的工作”,并补充说“我会在 6-12 个月后再试”。一位名叫 JSchoreels 的开发者早在 6 月就已把 RWKV 加入自己版本的 Anki,并持续开发。它同时有 RWKV 和 FSRS-7,并可在两者之间切换。
如果你现在想试试 RWKV,有两个非官方 Anki 版本包含它,以及 FSRS-7:JSchoreels 的桌面版,以及 Expertium 用来复习的 Android 应用 kuma3。两者都不来自 Anki 团队。两者都运行 JSchoreels 版本的 RWKV,比测试中的那个更小。
11 月 15 日,Anki 团队成员 Abdo 写道,现在加入更多调度器“为时过早”,“尤其是当 FSRS 已经‘足够好’的时候”,并建议让人们通过插件添加自己的调度器。两天后,在一篇标注为个人意见的帖子中,Abdo 补充说,Anki“在这里必须保守,正是因为调度器需要大量思考”。
几位用户发表了看法。一位称这些非官方版本“极度 vibe 编码”,意思是主要由 AI 写成。另一位写道“我要去 JSchoreels 的分支了,拜拜”。第三位希望在任何人改变 Anki 的调度器之前,能有同行评审论文支持的研究。Expertium 回复说,FSRS 也“在学术论文中几乎没被提到”。“重要的不是学位,而是在那 1 万用户数据集上的表现。”
(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。