RWKV发布历史

除夕快乐！在除旧迎新之际，我们也正式发布 RWKV-7-World-1.5B-v3 基底模型！在英文和多语言评测中，RWKV-7-1.5B 模型的评分对比其他同参数模型处于**绝对领先**地位。

RWKV-7-World-0.4B-v2.9 模型于 2025 年 1 月 8 日正式发布！ 同时，RWKV 社区也开源发布了多款基于 RWKV-7 的新项目！

【深圳，2025年1月3日】深圳元始智能有限公司（以下简称“元始智能”）宣布已于 2024 年 12 月 25 日走完工商变更，成功完成数千万级人民币天使轮融资，本轮投资方为天际资本。

很高兴告诉大家：RWKV 社区推出“RWKV 生态内容征集大赛”，此活动在 2025 年全年内公开征集 RWKV 相关的内容，包括：与RWKV相关论文、讲解 RWKV 的教程、基于 RWKV 的应用。

欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2024 年 12 月的最新动态。 只需 3 分钟，快速了解 RWKV 社区 12 月都有哪些新鲜事！

RWKV-7 是极先进的最新大模型架构，超越 attention / linear attention 范式，拥有强大的in-context-learning能力。

RWKV 基金会正式发布了首款 RWKV-7 架构模型：RWKV-7-World-0.1B-v2.8。同日，RWKV 海外社区团队发布QRWKV6-32B-Instruct-Preview-v0.1。

基于 RWKV 的视觉语言模型 VisualRWKV 被 COLING 2025 接收！COLING，是自然语言处理和计算语言学领域的顶级国际会议。

2024年12月2日，元始智能自主研发的 RWKV AI 大模型已成功通过国家互联网信息办公室的生成式人工智能服务备案。

欢迎大家收看《RWKV 社区最新动态》，本期内容收录了 RWKV 社区 2024 年 11 月的最新动态。 只需 3 分钟，快速了解 RWKV 社区 11 月都有哪些新鲜事！

2024 年 11 月 13 日，RWKV-6-World-7B-v3 模型正式开源发布,新增 3.1T 训练数据。

RWKV 做 CoT 特别有优势，因为推理速度和显存占用与上下文无关。即使做几百万 token 的 CoT 也不会变慢或额外消耗显存。

由 Bo PENG 和 RWKV 开源社区共同完成的 RWKV-5/6架构论文被大模型顶会COLM收录。

RWKV-7 超越了 attention / linear attention 范式，它的状态演化很灵活，可以解决在相同算力消耗下 attention 无法解决的问题。

大家好，RWKV 近期发布了 “RWKV-6-ChnNovel” 系列中文小说模型，支持小说续写、小说扩写、角色扮演功能。

大家好，《RWKV 社区最新动态》迎来了第三期内容，本期统计了 RWKV 社区 7 月的重要动态，一起来看看吧！

RWKV 社区近期新发表了若干篇基于 RWKV 模型的科研论文，在具身智能、图像处理、模型架构等方面已经有了诸多成果。

在全新推出的 RWKV 中文官网，你可以查看关于 RWKV 的绝大多数信息，包括但不限于 RWKV 架构的介绍、RWKV 多模态等研究和相关论文、RWKV 的本地部署和推理教程、RWKV 的全参/微调

2024年7月19日，RWKV 开源基金会宣布正式向全球开源 RWKV-6-World-14B 模型。RWKV-6-World-14B 是迄今最强的稠密纯 RNN 大语言模型。

6 月 23 日，RWKV-6 论文第一场分享会圆满结束。论文参与者侯皓文博士讲解论文要点，RWKV架构唯一作者彭博在线答疑。接下来，让我们一起回顾一下分享会的精彩内容！