Transformers.js 2.8.0 发布,新增图像到图像

450 阅读1分钟

近日,Transformers.js 作者 Joshua Lochner 在 GitHub 上发布了 Transformers.js 2.8.0,这个版本主要的更新是:新增图像到图像😍

Transformers.js 作者 Joshua Lochner 将于 11 月 18 日(本周六)远程出席在杭州举办的第六届 FEDAY,大会网站:fequan.com/2023。

此版本添加了对图像到图像翻译(例如:超分辨率)的支持,使用了 Swin2SR 模型。

我们一起来看看效果:

Side-by-side (full) 并排(全尺寸)Animated (zoomed) 动画(放大)
Side-by-side (full) Animated (zoomed)

和往常一样,您只需几行代码即可开始!

几行代码

💻 新架构:TrOCR、Swin2SR、Mistral 和 Falcon

我们还添加了对 4 种新架构的支持,总数达到 57 个!🤯

  • TrOCR 用于光学字符识别(OCR)。

TrOCR

TrOCR

  • Swin2SR 用于超分辨率和图像恢复。

Swin2SR

  • Mistral 和 Falcon 用于文本生成。
    • 注意:除了测试模型外,我们尚未转换任何大型(≥7B参数)的模型。请继续关注更多更新!

🐛 Bug 修复:

  • 默认情况下,在文本生成的开头不添加特殊标记
  • 在#374 中修复了在使用浏览器缓存中的文件时,Firefox 显示进度事件的错误。感谢 @felladrin 报告此问题!
  • 在#384 中修复了 text2text 生成管道输出与 Python 库不一致的问题

🔨 小改进:

  • 在#368 中由 @Kit-p 升级了 TypeScript 依赖版本
  • 在#385 中改进了文档

🤗 新贡献者

  • @Kit-p 在#368 中首次做出了贡献。

了解更准确信息和文中链接,请阅读原文:github.com/xenova/tran…