在涉及成千上万张图片和多个团队成员的大型项目中,了解标注进度对于管理大规模标注工作至关重要。协调一个健全的标注过程包括审查图片并提供反馈,为此提供了评论和审查功能。现在,推出了新功能,可以展示标注过程的统计数据,并查看图片的变更历史。
标注洞察页面使能够新地了解标注团队是如何努力构建数据集的。该页面显示了以下信息:标注的图片数量;标注所花费的时间;绘制的边界框数量;以及标注被接受的速率。这些统计数据随时间绘制。可以为特定时间段审查这些数据。
要访问标注洞察标签页,请导航到Roboflow仪表板中的工作区首页。点击“设置”。然后,在下拉菜单中点击“标注洞察”。也可以从设置页面访问该标签页。点击侧边栏中的工作区名称,然后点击“标注洞察”链接。
默认情况下,标注洞察标签页显示了过去一年中每个团队成员标注图片所花费的总时间(以分钟计)。还可以查看标注的图片数量、创建的边界框数量,以及图片标注被项目数据集接受的速率。以下图表显示了工作区中每个团队成员标注所花费的分钟数:
此页面显示了过去一年中所有项目和标注者的所有标注统计数据。可以通过点击团队成员的名称来排除人员。例如,点击此图表中的“Mohamed”将从图表中移除他的标注贡献。
还可以使用三个过滤器来缩小关注范围:日期、项目和标注者。让看看在2023年2月1日至2月28日期间Mohamed绘制了多少个边界框。首先,需要点击日期字段来设置日期。
通过此页面上的信息,可以监控在设置新的标注要求时标注时间的变化;了解在向标注者提供反馈前后图片接受率的变化;了解团队中谁在标注方面最高效;等等。从洞察中获得的信息可以帮助决定是否需要对标注过程进行调整。例如,如果发现在设置新项目要求时标注时间增加,可以考虑增加团队成员以帮助按时完成截止日期。如果发现在添加新数据源后绘制的框数减少,可能需要深入了解收集的数据是否符合要求。
Roboflow Annotate现在维护了所有对图片所做的更改的历史记录。有了这个功能,可以看到图片在何时被更改,并查看数据集中图片在不同时间点的样子。要访问与图片相关的标注历史记录,请点击标注工具左侧边栏中的“历史”标签页:
这将显示与图片相关的历史记录。要查看图片在特定时间点的样子,将鼠标悬停在列表中的更改上。
可以通过点击更改旁边的三个点来将标注图片恢复到先前的状态。接下来,点击“恢复到此版本”。这个功能使得恢复对标注所做的意外更改变得容易。
使用Roboflow标注洞察标签页和标注历史记录,可以更详细地了解标注团队成员是如何为创建高质量的数据集做出贡献的。可以审查每个项目和团队成员标注的图片数量、绘制的边界框数量、标注接受率和标注所花费的时间。可以专注于特定时间段的数据,并了解给定一组标注的变更日志,从而更细致地了解数据标注操作。