1同一图像被两名标注员分别标为不同类别,首先应如何处理?
2希望模型输出固定JSON结构,提示词应如何设计?
3疾病筛查类模型中正类比例很低,仅报告准确率可能产生什么问题?
4为了使模型评估可复现,应记录哪些信息?(多选)
5语音转写中无法辨识的片段应怎样处理?
6训练损失下降而验证损失持续上升,通常提示什么?
7检索增强生成中的检索步骤主要提供什么?
8图像分割与目标检测的主要区别是什么?
9训练数据按时间划分测试集主要适合什么目的?
10数据中的缺失值与数字零应如何区分?
11在图像标注项目中,标注员对同一张图片中的遮挡目标按“可见部分轮廓”完成框选,复核员发现该批数据要用于训练检测模型,此时最合理的处置是
12标注团队对一批语音转写数据做质量复核,抽检发现某标注员把“嗯、啊”等填充词全部删除,而项目规范要求保留,正确的复核结论是
13某团队在划分数据集时先用全部数据做特征标准化,再切分训练集和测试集,这种做法导致的主要风险是
14在标注项目验收中,需求方新增了“所有车辆必须标注车轮是否可见”的规则,此时训练师首先应做的是
15某图像标注团队要把 1 万张图片按 8:1:1 划分训练集、验证集和测试集,且同一拍摄场景的图片必须整体进入同一子集,正确的划分操作是
16在目标检测数据集中,某张图片标注框只覆盖了目标物体的一部分,质检时判定该框为不合格标注,最合理的修正依据是
17在语音转写标注项目中,质检员复核一段含多人交替说话的音频时,以下哪些做法符合可复现的质量复核要求(多选)
18某标注团队对一批语音转写数据做质量复核,抽检发现标点符号缺失率偏高,最应优先检查的环节是?
19模型评估中,某二分类模型在正样本占比1%的数据集上准确率达到99%,该指标最可能说明什么?
20在文本数据标注中,对“情感倾向”标注出现“中性”与“无情绪”两个标签混用,最应采取的改进措施是?
21多选:在标注质量复核中,以下哪些做法有助于发现系统性标注错误?
22在命名实体识别标注中,规范要求标注「北京市朝阳区」为行政区划实体,某标注员将其拆分为「北京市」和「朝阳区」两个实体,复核时应判定为
23某团队用同一批标注数据既训练又测试模型,得到很高的评估分数,这种评估方式的核心缺陷是
24某标注项目复核发现某标注员对「模糊」类样本倾向于全部标为「无法判断」,而其他标注员会结合上下文给出具体类别,这种差异反映的主要问题是
25某文本分类标注任务中,两名标注员对同一批500条样本的标注一致率为82%,若要将一致率提升到可用水平,下一步最合理的做法是
26在语音转写标注中,规范要求对听不清的片段标注为“无法识别”,某标注员把疑似人名但不确定的词按常见姓氏补全,这一行为的性质是
27某分类模型在训练集上准确率99%、验证集上72%,数据标注复核确认标签无误,最应优先尝试的改进方向是
28某标注项目在交付前发现约5%的样本标签与规范存在系统性偏差,正确的质量处置流程是
29某团队用 1000 条已标注文本训练意图分类模型,训练集准确率 99%、验证集准确率 62%,最可能的原因是
30在语音标注项目中,两名标注员对同一批音频的转写结果不一致率较高,质检员首先应当做的是
31某团队在模型上线后发现某类别的预测错误率明显高于其他类别,复查训练数据发现该类别样本仅占总量的 3%,下一步最合理的做法是
32某团队完成模型训练后,准备用测试集评估,但发现测试集在训练过程中曾被用于早停选择,此时正确的做法是
33在提示工程中,需要让大模型对一批用户评论做情感分类,并要求输出只能为“正面”或“负面”,最有效的提示设计是
34在为一个客服工单分类模型构建训练数据时,下列做法有助于降低数据泄漏和评估偏差的是(多选)
35某提示工程任务中,模型对同一问题多次回答格式不稳定,有时输出JSON有时输出段落,最有效的改进措施是什么
36在提示工程中,为减少模型编造不存在事实,下列哪种做法最符合可复现流程的要求
37某标注员在文本实体标注中把“北京大学”整体标为“组织”,而规范要求院校名整体标注为“机构”,复核员应如何记录该问题
38某标注团队发现同一批数据中两名标注员对“行人是否携带背包”的判定一致率明显偏低,复核时最应优先核查的是
39某模型在测试集上准确率 0.92,但上线后对某新地区数据准确率骤降至 0.61,最应先排查的是
40训练图像分类模型时,若同一物体在多张图片中连续出现且被分到训练集和验证集,主要风险是
41标注平台新增一批医疗影像数据,标注员在标注前被要求先阅读标注手册并完成试标考核,这一步在质量管理体系中属于
42某团队用提示工程让大模型从客服对话中抽取“用户诉求”,第一版提示只写“请抽取用户诉求”,结果模型把客服的安抚话术也当成诉求输出,下一步最合理的改进是
43某模型在验证集上F1为0.92,在测试集上F1为0.71,训练集F1为0.95,最合理的诊断是
44在文本标注中,两名标注员对同一批数据的Kappa系数为0.35,项目负责人正确的下一步处置是
45在模型评估报告中,业务方发现“整体准确率95%”但实际使用中投诉很多,最可能被忽略的评估维度是
46在构建训练集与验证集时,若同一用户的多条行为记录被随机拆分到两个集合中,最可能造成的评估问题是
47在语音数据标注中,标注员遇到录音里两人同时说话的片段,按规范应标注为重叠语音,但某标注员将其切成两段分别标注为单人语音,复核时判定该标注错误,主要理由是
48某团队完成数据标注后,质检员按百分之五比例随机抽检并全部合格,便判定整批数据合格,这一做法最需要补充的步骤是
49在提示工程迭代中,为系统排查模型在某抽取任务上输出不稳定的原因,下列做法合理的有(多选)
50在提示工程中,要求模型先输出推理步骤再给出最终答案,与直接要求模型只输出最终答案相比,前者的主要优势通常是什么?
51在文本分类数据标注中,标注指南未对“讽刺性正面评价”给出明确归类,多名标注员将其分别标为正面和负面,质量复核首先应当做什么?
52某团队在模型上线前用测试集反复调参,最终报告测试集准确率作为泛化性能,这种做法的主要问题是什?
53在构建机器学习数据集时,以下哪些做法有助于降低训练集与测试集之间的数据泄漏风险?(多选)
54在构建提示词时,要求模型从一段会议记录中抽取所有决策事项及其负责人,最有效的提示结构是
55在质量复核中,复核员发现某标注员对“模糊边界目标框”的标注普遍偏大,最合理的纠正措施是
56某团队在标注平台中发现同一账号在短时间内提交了大量标注结果,且正确率异常高,质检员首先应
57在模型评估阶段,以下哪些做法有助于获得更可靠的泛化性能估计(多选)
58构建提示词时把「请一步一步思考」加入推理类任务的指令,主要作用是
59某团队在模型评估时把测试集反复用于调参,最终报告的指标最可能出现的问题是
60在提示工程中对同一任务比较多个提示模板时,为保证结论可复现,最应该固定的是
61在提示工程中,为让模型按固定字段输出JSON,最应先采取的做法是
62数据集划分时,若同一用户的多条记录被同时分入训练集和测试集,最可能造成
63某分类模型在测试集上准确率很高,但按类别查看时少数类召回率接近零,最恰当的处理是
64在图像数据标注项目中,同一张图片由两名标注员独立标注后,质检员发现两者对同一目标的边界框存在明显差异,此时最合适的第一步处置是
65对一批语音转写数据进行质量复核时,发现某标注员将大量背景音乐片段标记为“静音”,复核员判定该标注存在系统性错误,其主要依据是
66在构建提示词时,若希望模型在多轮对话中始终遵守“只输出表格、不输出解释”的约束,较有效的做法是
67标注项目进入收尾阶段,质检员发现某批次中约5%的样本存在“同一目标被重复标注两个框”的问题,最合适的处置是
68某标注团队把同一批图片分给两名标注员独立标注,然后比对两人结果,对不一致的样本组织第三人裁定并统一口径。这种做法属于质量复核中的
69模型评估报告显示准确率为 0.95,但混淆矩阵表明少数类样本几乎全部被预测为多数类。若要更真实反映模型对少数类的识别能力,应重点查看
70在目标检测标注复核中,标注员把一张图中被截断、仅露出一角的行人标为「行人」,复核员认为应标为「忽略区域」。两者的核心分歧在于
71标注平台要求对每条标注结果记录「标注员、标注时间、所用规范版本」。新增这一要求的主要目的是
72某团队用同一批已标注数据先做训练集再做测试集,报告中的准确率明显高于线上表现,最可能的原因是
73某标注项目要求对语音片段做“是否包含唤醒词”的二分类,标注员遇到听不清的片段时,按可复现流程应优先
74在提示工程中,让模型对长文档做问答时,若把整篇文档一次性放入上下文导致关键信息被忽略,较有效的改进是
75某团队用大模型生成标注初稿再由人工审核,若发现初稿在否定句上错误率偏高,较合理的改进措施是
76在提示工程中,为让大语言模型稳定输出JSON格式,下列做法最符合可复现流程要求的是
77某团队完成一轮数据标注后,质检抽样发现某标注员的边界框普遍比规范大一圈,下列纠正措施中最能针对性解决该问题的是
78在提示工程中,若希望模型在回答数学应用题时展示推理步骤,下列提示设计最符合可复现流程的是
79在图像标注项目中,标注员对同一批图片连续两天完成标注,质检员用同一份标注规范复核后发现两天的框选位置差异较大,最应优先排查的环节是
80目标检测数据集中,标注员把被遮挡面积超过80%的目标也完整框出并标为正样本,质检复核时最合理的判定是
81语音转写数据标注完成后,质检员抽取5%样本逐字复核,发现某标注员负责的片段中数字与专有名词错误集中出现,下一步最有效的质量改进动作是
82某标注任务要求对图片中的车辆按颜色分类,规范只列出了红、白、黑、银四类,实际出现深蓝色车辆时标注员最恰当的做法是
83某团队做文本情感标注,规范规定中性文本归入中性类,但标注员把大量中性短评标成正面,复核时应优先检查
84某标注项目采用多人交叉复核,复核员发现两名标注员对同一批样本的标签差异率突然升高,下一步最合理的处置是
85提示工程中让模型完成多步推理任务时,在提示里给出一个完整的输入输出示例,这种做法通常称为
86在标注团队中,甲负责把原始图片框出目标物体,乙负责对甲已框好的结果逐条判断是否合格并退回返修,甲与乙的职责划分属于以下哪种安排
87在数据集划分时,工程师把同一用户产生的多条记录分别随机放进训练集和验证集,导致验证集指标明显偏高,这种划分方式造成的问题属于
88提示词中用少量示例演示输入到输出的对应关系,让模型照此完成新样本,这种提示技术称为
89标注项目经理要为新任务制定可复现的标注流程,以下做法中最能保证复现性的是
90某文本分类数据集共10000条,其中正类9000条、负类1000条,若直接按此比例划分训练集和测试集,测试集上指标最可能出现的问题是
91某团队在划分数据集时先用全部数据训练模型,再从中随机抽取20%作为测试集评估,这种做法导致的主要问题是
92标注平台对一批医疗影像做病灶勾画,复核时发现两名标注员对同一病灶的边界差异较大,最应先采取的措施是
93在图像标注项目中,标注员对同一张图片中的同一目标重复画了两个高度重叠的边界框,质量复核时判定为不合格,最直接的判定依据是
94在划分训练集、验证集、测试集时,若同一用户的多条行为记录被随机拆到训练集和测试集,评估结果最可能出现的问题是
95标注规范中规定“遮挡面积超过50%的目标不标注”,某标注员对遮挡约30%的目标也选择不标,质量复核应判定为
96在图像标注项目中,标注员对同一张图片中的遮挡目标采用了“仅标注可见部分”的规则,复核员发现部分框只覆盖了目标可见区域,部分框却按预估完整轮廓画到了遮挡物后面,此时最应优先完善的环节是
97在构建提示词时,要求模型从一段客服对话中抽取“用户诉求”和“情绪倾向”两个字段,为了让输出便于程序解析,最稳妥的提示设计是
98在质量复核中,复核员对标注结果进行抽样检查,发现某类错误在抽样中反复出现但总体错误率低于合格线,最符合质量管理的做法是
99在多选题库建设中,为降低标注结果的可复现性风险,下列做法中合理的有(多选)
100在提示工程中,要求模型“先列出推理步骤再给出最终答案”,与直接要求“只给最终答案”相比,通常更可能带来的效果是
