找到一次举手可以证明有人举过手,却不能证明总共只有一次。构题时,独立验证器看不到拟定答案,要根据重新检查的视频证据复原答案,并尝试找出反例。
题目来自 108 段长视频。表现最好的模型自己搜寻时得分为 54.52%,直接提供标注证据时为 79.35%。两者的差距让找片段和读懂片段这两个环节可以分别分析。
原始资料
延伸阅读 第一人称视频的字幕,怎样跟上转身和伸手?
NexSight 建立 310 个可回查的长视频任务,用标注证据对照模型自己找证据的表现。

找到一次举手可以证明有人举过手,却不能证明总共只有一次。构题时,独立验证器看不到拟定答案,要根据重新检查的视频证据复原答案,并尝试找出反例。
题目来自 108 段长视频。表现最好的模型自己搜寻时得分为 54.52%,直接提供标注证据时为 79.35%。两者的差距让找片段和读懂片段这两个环节可以分别分析。