
共识
收集独立标注、衡量一致性,并将分歧送交审核。在批准结果前,结合源数据上下文比较各次提交。
依据已批准的参考标注检查标签、解决分歧,并让每次修改沿清晰的流程进入审批。

收集独立标注、衡量一致性,并将分歧送交审核。在批准结果前,结合源数据上下文比较各次提交。

将提交结果与对标注员隐藏的已批准标准答案进行比较。设置质量阈值,并按通过、未通过或未评估分别分配处理路径。

为审核员设置独立阶段,在查看原始数据的同时检查标签、修正细节,并批准或驳回任务。

连接标注、共识、质量关卡和专家审核。让通过检查的任务继续流转,将未通过或被驳回的条目退回标注,并完成已批准的结果。

发现缺失的必填值、标注校验问题和待解决事项,结合相关标签与源数据上下文完成修正。

追踪基准评分、通过率、共识结果与审核结果,依据实际证据确定重点并改进标注流程。
将参考标注检查、独立判断和专家决策融入生成训练数据的同一工作流。
针对视觉、音频、语言、医学、文档、传感器、表格和多模态数据集开展质量检查,审核模型赖以学习的标签。

发现遗漏对象、不准确边界、断裂轨迹和不一致关键点,在原始视觉上下文中审核图像与视频标签。
Explore computer vision annotation QA
与医学专家共同审核解剖边界、区域标签和切片一致性,让分歧与修正始终对应原始扫描数据。
Explore medical annotation QA
检查实体范围、关系方向、意图标签与必填属性,在保留精确原文的同时解决语言歧义。
Explore NLP annotation QA
审核转写内容、说话人轮次、声音事件时间与录音属性,确保修正与原始音频对齐。
Explore audio annotation QA
检查图像标签中的遗漏对象、类别一致性与边界精度,在发布训练数据前结合共识、隐藏基准和专家审核。
查看图像标注质量工作流 →

通过共识、基准和视频审核工作流,跨帧检查轨迹身份、对象边界与时序标签。
查看视频标注质量工作流 →

在组织学上下文中审核细胞核、组织区域和切片标签,为病理数据集结合独立标注、隐藏参考检查和合格专家审核。
查看病理标注质量工作流 →

对照原始航空或卫星影像检查建筑轮廓、地表覆盖区域和地图标签,结合共识、隐藏基准与专家审核。
查看地理空间标注质量工作流 →

审核 PDF 字段完整性、页面内边界和版面标签,在创建训练数据集前解决不一致的文档标注。
查看文档标注质量工作流 →

在已保存的 HTML 中审核网页文本范围、字段角色及同页关系,结合上下文解决产品页和招聘页中的标注歧义。
查看 HTML 标注质量工作流 →

审核时间序列区间、采样事件和特定通道标签,在准备训练数据集前解决传感器标注边界的分歧。
查看传感器标注质量工作流 →

审核 CSV 记录标签、单元格文本范围和行内关系,在保留原始列上下文的同时解决字段标注不一致的问题。
查看表格标注质量工作流 →

在同一分组条目中,结合共识、已批准的基准和专家审核,检查相互关联的视觉、音频与文本标签。
查看多模态标注质量工作流 →
配置从标注经过共识、质量关卡、审核到完成的流程。通过检查的任务继续流转,未通过检查或被审核驳回的条目可退回标注进行修正。无法进行比较的情况采用单独路径,并通过工作流历史追踪每次尝试与决策。
质量保证工作流共识依据配置的一致性要求,比较同一条目的独立标注。审核员检查受支持标签、边界和属性的差异,再结合源数据与指南完善结果。一致性衡量标注员之间的相符程度;质量关卡则将其工作与已批准的参考标注进行比较。
共识标注指南管理员准备经过批准、对标注员隐藏的标准答案。质量关卡将符合条件的提交与这些参考进行比较,并依据配置的阈值分流至通过或未通过路径。缺失或不兼容的比较数据会单独进入未评估路径,因此无法执行的检查不会被计为成功通过基准。
质量门禁指南可以。Unitlab 为图像、视频、音频、文本、文档、HTML、医学、病理、地理空间、传感器、表格和分组多模态任务提供共享工作流控制。应根据数据来源调整验收规则,例如视觉边界、音频时间、文本范围或传感器事件。审核员使用对应查看器解决与任务相关的差异。
质量保证工作流关注可用的基准评分与通过率、共识结果、校验发现、待解决问题,以及审核和返工结果。结合任务、参考样本和已配置标准解读各项指标。较高的一致性评分代表标注相互一致;源数据检查与专家审核则有助于确认标签是否符合预期规则。
质量保证概述先整理相关源数据,再将选定条目送入标注与质量审核,并在准备数据集发布前解决问题。通过版本管理,为下游工作保留明确的数据与标注集合。发布内容应与其本体、验收标准及预期训练或评估任务保持一致。
数据筛选指南