OpenBayes 一周速览丨字节EX-4D上线,实现单目视频到自由视角生成;GLM-4.1V-9B-Thinking开源,10B参数比肩Qwen系列

77 阅读2分钟

公共资源速递  This Weekly Snapshots !

4 个公共教程:

  • 一键部署 GLM-4.1V-9B-Thinking

  • RFdiffusion:扩散式蛋白设计模型

  • Biomni:首个通用型生物医学智能体

  • EX-4D:实现单目视频到自由视角生成

访问官网立即使用:openbayes.com

公共教程

  1. 一键部署 GLM-4.1V-9B-Thinking

GLM-4.1V-9B-Thinking 专为复杂认知任务设计,支持图像、视频、文档等多模态输入。该模型在继承 GLM 系列通用大模型能力的基础上,进一步强化了视觉理解和复杂推理能力,达到 10B 参数级别的视觉语言模型的最强性能,在 18 个榜单任务中持平甚至超过 8 倍参数量的 Qwen-2.5-VL-72B。

  • 在线运行:

go.openbayes.com/KR9Dg

项目示例

2.RFdiffusion:扩散式蛋白设计模型

RFdiffusion 以 RoseTTAFold 为骨干网络,引入去噪扩散概率模型(DDPM),可从头设计全新蛋白质结构。该框架能够设计复杂形状的蛋白质(如 α-螺旋和 β-折叠)并准确预测酶的催化位点支架。

  • 在线运行:

go.openbayes.com/yr6Q7

  1. Biomni:首个通用型生物医学智能体

Biomni 能够自主完成横跨遗传学、基因组学、微生物学、药理学和临床医学等多个生物医学分支领域的复杂研究任务,标志着 AI 驱动科学发现迈入全新发展阶段。

  • 在线运行:

go.openbayes.com/tQrGq

  1. EX-4D:实现单目视频到自由视角生成

EX-4D 能从单目视频输入生成极端视角下的高质量 4D 视频。该框架基于独特的深度防水网格(DW-Mesh)表示,显式建模可见和被遮挡区域,确保在极端相机姿态下保持几何一致性。EX-4D 在极端视角下的性能显著优于现有方法,为 4D 视频生成提供新的解决方案。

  • 在线运行:

go.openbayes.com/Haveb

项目示例