RWKV元始智能

RWKV 是一种创新的深度学习网络架构，它将 Transformer 与 RNN 各自的优点相结合，同时实现高度并行化训练与高效推理。官网文档教程地址：https://rwkv.cn/docs。

赞

3

|

搜索文章

1天前

RWKV7-G0b 13.3B 发布：RNN 的新一步

在 Uncheatable Eval 超越 Qwen3 14B。近期也更新了 1B 和 3B 模型。...

0

评论

4天前

RWKV社区十一月动态：10篇新论文，G0a3 13.3B发布

PENG Bo 发表关于大模型的认知的观点，同月发布 RWKV7+ROSA 完成数字颠倒任务 Demo。...

0

评论

19天前

体验RWKV-7训练全过程，只需400行代码训练3分钟

基于 2 层 RWKV-7 模型（仅30860 个参数）训练“数字翻转”任务，实现良好准确率和运算效率...

1

评论

24天前

RWKV 社区十月动态：RWKV8 ROSA 机制公布，RWKV7-G0a3 7.2B 发布，10 篇论文

RWKV7-G0a3 7.2B 发布；ROSA机制公布并完成验证；10篇论文，涉及图像、3D、视频、序列等方向。...

0

评论

1月前

RWKV7-G0a3 13.3B 发布：世界最强纯 RNN 大语言模型

我们以 RWKV6-world-v2.1 14B 模型为基础，仅继续训练 2T tokens，即获得了有竞争力的效果。...

0

1

1月前

RWKV7-G0a3 7.2B发布：迄今最强RNN，高并发vibe coding

2025 年 10 月 30 日， RWKV7-G0a3 7.2B 推理模型开源发布。它基于 RWKV7-G0a2 7.2B 继续训练高质量数据，显著提升能力。...

0

评论

1月前

RWKV 2025 生态内容征集大赛 | 9 月投稿作品及评审结果

2025 年 9 月，活动共收到 RWKV 生态作品投稿 **1 篇高质量论文、1 篇教程和 3 个应用**。本文将公布 2025 年 9 月的活动投稿作品及评审结果。...

0

评论

1月前

RWKV 社区九月动态：RWKV7-G1a 1.5B/2.9B 发布，17 篇论文

RWKV7-G1a 1.5B/2.9B 发布，17 篇论文，多篇高质量论文被 1 区期刊收录，荣获 S 创冠军...

0

评论

2月前

RWKV7-G1a 2.9B 推理模型开源发布，继续推进纯 RNN 模型的思考能力

作为纯预训练的基底模型，无“刷榜”，RWKV7-G1a 2.9B 的 MMLU 提升到 61.1%，MMLU Pro 提升到 31.5%...

1

评论

2月前

RWKV7-G1a 1.5B 开源发布，新推理风格和长度控制，效果显著增强

2025 年 9 月 22 日， RWKV7-G1a 1.5B 推理模型（Reasoning Model）正式开源发布，新增多种推理风格，效果显著增强。...

0

评论

3月前

RWKV 2025 生态内容征集大赛 | 8 月投稿作品及评审结果

2025 年 8 月，活动共收到 RWKV 生态作品投稿 1 篇高质量论文和 2 个应用。本文将公布 2025 年 8 月的活动投稿作品及评审结果。...

0

评论

3月前

RWKV 社区八月动态：RWKV7s 0.1B 发布，G0 13B 训练中，6 篇论文欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2

欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2025 年 8 月的最新动态。只需 3 分钟，快速了解 RWKV 社区 8 月都有哪些新鲜事！...

0

评论

4月前

RWKV 社区七月动态：RWKV7-G0 7.2B 模型发布，8 篇高质量论文

欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2025 年 7 月的最新动态。只需 3 分钟，快速了解 RWKV 社区 7 月都有哪些新鲜事！...

0

评论

4月前

全新高效模型架构！RWKV-7s闪耀WAIC

2025 年 7 月 26-29 日，RWKV 团队受邀参加2025世界人工智能大会（WAIC 2025）, 并在大会公开了 RWKV 最新的高效大模型架构：RWKV-7s...

0

评论

4月前

RWKV7-G0 7.2B 发布，最强纯 RNN 推理模型

2025 年 7 月 22 日， RWKV7-G0 7.2B 推理模型（Reasoning Model）正式开源发布，它很可能是迄今为止人类训练过的最强纯 RNN 语言模型...

0

评论

4月前

RWKV-7s 即将亮相 WAIC

RWKV团队将亮相2025世界人工智能大会（7月26-29日），重磅发布最新RWKV-7s混合架构。...

0

评论

5月前

RWKV 2025 生态内容征集大赛 | 6 月投稿作品及评审结果

2025 年 6 月，活动共收到 RWKV 生态作品投稿 3 篇高质量论文。本文将公布 2025 年 6 月的活动投稿作品及评审结果。...

0

评论

5月前

RWKV 社区六月动态：多次亮相高规格活动，适合混合架构的新特性发布

新特性发布、多篇高质量相关论文、大量高规格活动和高水平项目。欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2025 年 6 月的最新动态。...

0

评论

5月前

RWKV-8 系列之 DeepEmbedAttention：精简 KV 缓存，尤其适合混合模型（RWKV-7s）

5 月 27 日，我们公开了 RWKV-8 首个新特性 DeepEmbed：对端侧友好的稀疏设计，解决 MoE 显存占用。今天，我们公开与其相关的另一个新特性：DeepE...

0

评论

个人成就

文章被点赞 37

文章被阅读 27,018

掘力值 1,448

加入于

2024-02-23