Prodigy 仪表板插件:Beta 测试者招募
大家好!我们很高兴向大家介绍一个正在开发中的新 Prodigy 插件,现已开放 Beta 测试。
Prodigy 仪表板 增加了一个新的命令 dashboard,用于启动一个 Web 应用,方便您查看标注数据、数据分析、指标和项目进度。它运行在您的 Prodigy 环境中,并自动连接到您的数据库。
目前,该仪表板为只读模式,但我们计划未来增加对数据的非破坏性编辑功能(不过这需要对数据库表进行一些较大的底层改动)。我们也希望增加更详细的标注者间一致性指标,类似于指标 recipes。以下是计划中的功能和已知待改进项的列表。
参与 Beta 测试的要求
- 您正在使用最新版本的 Prodigy 且拥有公司许可证。
- 您在 Prodigy 数据库中已有一些现有数据集,最好包含来自多个标注者的不同数据类型。
- 您有时间进行尝试并提供反馈。
如果您有兴趣参与,请发送邮件至 contact@explosion.ai,并附上您的许可证密钥或订单 ID,我们将为您提供插件包的访问权限。
未来计划与待开发功能
- 对单个示例进行非破坏性编辑。
- 在概览中为示例(如图片)提供更丰富的预览。
- 增加指标组件,例如标注者间一致性指标和混淆矩阵。
- 改进对包含大量标签的数据的标签可视化组件。
- 为
dashboard命令增加--host和--port配置选项。FINISHED