1同一图像被两名标注员分别标为不同类别,首先应如何处理?
2数据增强对分类标签应满足什么条件?
3在设计一个文本情感分类数据集的划分与评估方案时,下列做法合理的有(多选)
4多选:在标注质量复核中,以下哪些做法有助于发现系统性标注错误?
5某团队用同一批数据训练了三个模型,分别得到准确率0.81、0.82、0.83,直接选择0.83的模型上线,最需要补充的评估步骤是
6在图像数据标注项目中,为“行人”目标框制定标注规范时,要求标注框边界与目标可见轮廓边缘保持固定间距,这一做法的主要目的是什么
7标注平台新增一批医疗影像数据,标注员在标注前被要求先阅读标注手册并完成试标考核,这一步在质量管理体系中属于
8在模型评估中,某团队发现验证集损失持续下降但验证集业务指标停滞,最应先排查的环节是
9某团队将数据集按 8:1:1 划分为训练集、验证集和测试集,但在模型选择阶段反复使用测试集调整超参数,这会导致
10在提示工程中,为让模型按固定字段输出JSON,最应先采取的做法是
11在图像数据标注项目中,标注员对同一张图片先标了「遮挡车辆」又改标为「完整车辆」,复核时发现该车约四成车身被前车挡住。按常见标注规范,正确判定应是
12某数据标注项目在验收时发现同一标注员对相似样本的标签一致性很高,但与其他标注员差异明显,最可能的问题是
13语音转写数据标注完成后,质检员抽取5%样本逐字复核,发现某标注员负责的片段中数字与专有名词错误集中出现,下一步最有效的质量改进动作是
14在编写提示词时,工程师希望模型按固定字段输出结果便于程序解析,最应在提示中明确的是
15质量复核发现某标注员提交的100条数据中有8条把“行人”标成了“骑行者”,复核员最合适的下一步处置是
参考答案
- C 知识点:标注分歧应按统一规范和裁决流程处理。C正确;A、D无语义依据;B无理由丢弃数据并可能引入偏差。
- A 知识点:改变语义可能使标签失效。A项正确:改变语义可能使标签失效;B项错误:反义变化常改变类别;C项错误:删否定词可能反…
- A、B、C 知识点:数据集划分与评估的防泄漏原则。按时间切分、分层抽样、仅在训练集拟合预处理都合理。错误项:用测试集调参会造成信息泄…
- A、B、D 知识点是系统性错误的发现方法。正确项对:随机抽样、标签分布对比、模型一致性筛查都能暴露系统偏差。错误项三错在只查自认不确…
- A 知识点:模型评估与选择。正确项对:小差距需独立测试与统计检验判断是否真实差异。错误项:训练轮数、参数量、训练损失收敛都不…
- A 知识点是标注规范中边界框定义的一致性控制。正确项对:固定间距把主观边界选择转化为可执行规则,降低标注员间差异。错误项一错…
- A 知识点:标注质量管理的前置环节。正确项对:试标考核用于统一理解、筛除不合格人员,属准入校准。错误项一:抽检返工发生在标注…
- B 知识点是代理损失与业务目标的一致性。正确项:损失下降而业务指标不涨,常见原因是损失函数未对齐业务目标,优化方向与业务收益…
- A 知识点是数据集划分与模型评估的独立性。正确项对:测试集被用于调参后不再独立,评估会偏乐观。错误项二错在样本利用率不是核心…
- A 知识点:结构化输出提示设计。给出字段名与示例能让模型对齐输出结构。错误项:提高温度会增加随机性不利于结构稳定;自由发挥再…
- B 知识点:目标检测标注中的遮挡判定。遮挡比例达到规范阈值(如可见部分不足主体大部分)时应标为遮挡类而非完整类,故B正确。A…
- A 知识点:标注一致性分析与系统性偏差。正确项对:内部一致性高但与他人差异大,典型是规范理解偏差。错误项:速度过快通常表现为…
- B 知识点是质检发现后的针对性改进。错误集中在特定类型说明是规则掌握问题,应补规范并做专项训练;全部退回重抽成本高且未解决根…
- A 知识点是提示工程中的结构化输出约束。正确项对:指定字段名与顺序能让输出稳定可解析。错误项一错在温度参数属调用参数,不是提…
- A 知识点是标注质量闭环:发现系统性混淆需退回自查并保留错例。正确项对:退回并附错例可定位混淆原因,防止同类错误扩散。错误项…
