Prodigy 仪表板插件:数据标注可视化新工具

5 阅读1分钟

Prodigy 仪表板插件:Beta 测试者招募

大家好!我们很高兴向大家介绍一个正在开发中的新 Prodigy 插件,现已开放 Beta 测试。

Prodigy 仪表板 增加了一个新的命令 dashboard,用于启动一个 Web 应用,方便您查看标注数据、数据分析、指标和项目进度。它运行在您的 Prodigy 环境中,并自动连接到您的数据库。

目前,该仪表板为只读模式,但我们计划未来增加对数据的非破坏性编辑功能(不过这需要对数据库表进行一些较大的底层改动)。我们也希望增加更详细的标注者间一致性指标,类似于指标 recipes。以下是计划中的功能和已知待改进项的列表。

参与 Beta 测试的要求

  • 您正在使用最新版本的 Prodigy 且拥有公司许可证。
  • 您在 Prodigy 数据库中已有一些现有数据集,最好包含来自多个标注者的不同数据类型。
  • 您有时间进行尝试并提供反馈。

如果您有兴趣参与,请发送邮件至 contact@explosion.ai,并附上您的许可证密钥或订单 ID,我们将为您提供插件包的访问权限。

未来计划与待开发功能

  • 对单个示例进行非破坏性编辑。
  • 在概览中为示例(如图片)提供更丰富的预览。
  • 增加指标组件,例如标注者间一致性指标和混淆矩阵。
  • 改进对包含大量标签的数据的标签可视化组件。
  • dashboard 命令增加 --host--port 配置选项。FINISHED