TypeDecide 首页

Jev 使用示例

动作标注质检

对动作数据集的标签做语义质检,区分标签错误、时序不一致和证据不足。

STATE 设计

前后帧摘要、动作标签与标注规则

只提供完成判断所需的上下文,避免提交密码、密钥、无授权个人数据或与问题无关的长文本。

OUTPUT 设计

通过、需修改或不可判定

每个问题都使用完整 instructions,ID 仅用于关联响应,不能承担问题语义。

可复现输入

示例 State

{
  "before": "robot hand is open above the blue cup",
  "after": "robot hand is closed around the blue cup",
  "label": "release_object",
  "allowed_labels": ["grasp_object", "release_object", "move_without_contact"]
}

问题设计

每个输出都有独立语义

Choice

qa_result

在 pass、revise_label 和 insufficient_evidence 中选择质检结果。

Choice

suggested_label

在 grasp_object、release_object 和 move_without_contact 中选择更符合证据的标签。

Noul

sequence_consistent

判断前后状态是否支持该动作发生。

案例来源

来自社区实践,由 TypeDecide 重新编写

本页借鉴 Peter Wang (@the_cyw) 公开分享的场景。State、问题、候选项和执行边界均由 TypeDecide 重新设计;来源链接只用于溯源,不构成准确率或性能背书。

执行边界

概率交给策略层,而不是直接执行

质检结果要保留原标签和版本;证据不足或冲突时进入双人复标,不覆盖原始数据。

  • 保存候选概率、模型版本和问题配置,便于复核。
  • 输入缺失或候选概率接近时,补充信息或转人工。
  • 模板可用于本地 Mock;登录后也可主动真实运行,但任何结果都不代表业务准确率已经达标。
载入此模板