2025年标注员质检考试题及答案

2025年标注员质检考试题及答案一、单项选择题（每题2分，共30分）1.以下哪项不属于文本情感标注的常见标签体系？A.积极/消极/中性B.喜悦/愤怒/悲伤/恐惧C.主观/客观D.强烈/中等/轻微2.在图像目标检测标注中，若标注框与实际目标边缘的交并比（IoU）为0.65，根据行业通用质检标准，该标注结果应判定为？A.合格（IoU≥0.5）B.基本合格（0.4≤IoU<0.5）C.不合格（IoU<0.4）D.需人工复核（IoU=0.6-0.7）3.多模态对话数据标注中，若用户输入“帮我订今晚7点的川菜馆”，系统回复“已为您预订XX餐厅晚7点座位”，则对话意图的正确标注应为？A.信息查询B.服务预订C.意见反馈D.闲聊4.标注一致性检验中，两名标注员对同一批100条数据进行标注，其中85条结果一致，15条存在差异。经专家确认，差异中10条为标注员A错误，5条为标注员B错误，则标注一致性率为？A.85%B.80%C.75%D.90%5.以下哪种情况属于“过度标注”错误？A.对“苹果”标注为“水果”（正确标签应为“食物”）B.在“他打开手机，查看天气”中，将“手机”和“天气”均标注为实体C.对模糊图像中的“可能是狗”标注为“狗”D.在情感标注中，将“这电影还不错，就是结局有点仓促”误标为“消极”6.视频动作标注中，要求标注“跑步”动作的起始和结束帧。若实际动作从第50帧开始抬腿，第80帧双脚离地，第120帧停止摆臂，则正确的起始帧应为？A.50帧B.80帧C.100帧D.120帧7.结构化表格数据标注时，某字段要求为“日期（YYYY-MM-DD）”，用户输入“2025年3月15日”，正确的标准化标注应为？A.2025/03/15B.2025-03-15C.2025.03.15D.2025年03月15日8.标注工具中，“撤销上一步操作”的通用快捷键是？A.Ctrl+ZB.Ctrl+SC.Ctrl+CD.Ctrl+V9.对于“实体嵌套”场景（如“北京海淀区”中“北京”和“海淀区”均为地名），正确的标注规则是？A.仅标注最外层实体“北京”B.仅标注最内层实体“海淀区”C.同时标注“北京”和“海淀区”，并明确层级关系D.标注为“北京（海淀区）”合并实体10.语音转写标注中，用户说“今天气温28°c”，正确的转写应为？A.今天气温28°cB.今天气温28°CC.今天气温二十八度cD.今天气温28度c11.标注质检抽样时，若批次数据量为2000条，行业常规的抽检比例是？A.1%（20条）B.3%（60条）C.5%（100条）D.10%（200条）12.以下哪项不属于标注质量的核心指标？A.准确率（Precision）B.召回率（Recall）C.处理时效（Throughput）D.F1值（F1-score）13.对“用户：我想退订会员客服：请问您的会员类型是？”的对话角色标注，正确的标签应为？A.用户/用户B.用户/客服C.客服/用户D.客服/客服14.图像分割标注中，若要求“精确到像素级轮廓”，以下哪种工具更适用？A.矩形框标注工具B.多边形顶点标注工具C.自动边缘检测工具D.区域填充工具15.标注文档中规定“负面情感需包含明确的批评性词汇”，以下哪条文本不符合负面情感标注条件？A.“这手机用了三天就死机，太失望了！”B.“服务态度还行，就是等了半小时。”C.“菜品味道寡淡，完全没达到预期。”D.“快递三天才到，物流太慢了！”二、判断题（每题1分，共10分。正确填“√”，错误填“×”）1.标注冲突（不同标注员结果不一致）时，应直接采用多数标注员的结果，无需专家复核。（）2.对“可能”“大概”等模糊表述的文本，标注时应优先选择“不确定”标签，而非强行归类。（）3.视频标注中，“关键帧”是指动作变化最明显的帧，非关键帧可跳过标注。（）4.标注工具的“锁定区域”功能可防止已标注内容被误修改，应在完成当前区域标注后立即启用。（）5.结构化数据标注中，“空值”应标注为“无”或“N/A”，不可留空。（）6.情感标注中，“反讽”（如“这服务真好，等了两小时”）应标注为“积极”，因字面是褒义词。（）7.标注质检发现某批次错误率为8%，需全部返工，而非仅修改抽检部分。（）8.多语言标注中，“英文缩写”（如“CEO”）在中文文本中应保留原缩写，无需翻译。（）9.图像标注中，“遮挡物”（如半藏在树后的汽车）需标注可见部分的轮廓，无需推测完整形状。（）10.标注规范更新后，历史数据无需回溯修正，只需新数据按新标准执行。（）三、简答题（每题6分，共30分）1.简述标注质检的核心流程（至少列出5个步骤）。2.列举文本实体标注中常见的3类错误，并分别说明改进方法。3.多模态标注（如“文本+图像”关联标注）的质检重点有哪些？4.标注一致性（Inter-annotatorAgreement）的计算方法是什么？请结合公式说明。5.当发现标注工具存在功能性缺陷（如自动保存失败）时，标注员应如何处理？四、案例分析题（每题10分，共30分）案例1：某团队标注“医疗问答意图”数据，其中一条文本为“高血压患者能吃香蕉吗？”，原标注为“疾病治疗”，质检时发现错误。（1）指出错误类型；（2）给出正确标注；（3）说明判断依据。案例2：图像目标检测标注中，标注员对“十字路口的红色轿车”标注了矩形框，但质检发现：①框体左下角超出轿车实际边缘2像素；②框内包含部分人行道区域；③轿车尾部有1/3被公交车遮挡，标注时未调整框体。（1）分析上述问题是否属于标注错误；（2）提出修正建议。案例3：语音转写标注中，用户原话为“请帮我把会议改到下周三，两点钟，地点在B栋302室”，原转写为“请帮我把会议改到下周三两点钟，地点在B栋302室”（遗漏“，”）。（1）判断该转写是否符合规范；（2）说明转写标注的核心要求；（3）若需修正，应如何调整？答案一、单项选择题1.C2.A3.B4.A5.B6.A7.B8.A9.C10.B11.C12.C13.B14.B15.B二、判断题1.×2.√3.×4.√5.√6.×7.√8.√9.√10.×三、简答题1.核心流程：①确定质检标准（依据标注规范）；②抽取样本（按比例或分层抽样）；③人工复核（对比标注结果与标准）；④统计错误（分类记录漏标、错标、过标等）；⑤计算质量指标（准确率、召回率等）；⑥反馈结果（标注员返工+问题总结）；⑦跟踪改进（复查返工数据）。2.常见错误及改进：①漏标（如遗漏“时间”实体）：加强培训，要求标注员通读全句；②错标（如将“苹果（水果）”标为“苹果（品牌）”）：完善标签定义，增加上下文判断规则；③过标（如将非实体词“的”标为实体）：明确实体边界，使用“非实体”标签排除干扰。3.多模态标注质检重点：①跨模态一致性（如文本描述“红色杯子”与图像中杯子颜色是否匹配）；②关联关系准确性（如视频动作“开门”与文本“他推开门”的时间戳是否对齐）；③单模态基础质量（图像标注框是否精准、文本实体是否完整）；④多模态冗余验证（通过任一模态可验证另一模态的标注合理性）。4.计算方法：通常使用Cohen'sKappa系数或简单一致率。简单一致率=（一致样本数/总样本数）×100%；Cohen'sKappa需考虑随机一致概率，公式为K=(P_oP_e)/(1P_e)，其中P_o为实际一致率，P_e为随机一致率（各标签标注概率的乘积和）。5.处理步骤：①立即暂停使用该功能，手动保存当前标注数据；②记录缺陷细节（如触发条件、错误提示）；③通过内部系统提交问题单（附截图/操作日志）；④与技术团队确认修复时间，期间采用人工备份（如每10分钟手动保存）；⑤修复后验证功能，确认无数据丢失。四、案例分析题案例1：（1）错误类型：意图分类错误；（2）正确标注：“饮食建议”；（3）依据：文本核心是“高血压患者”与“吃香蕉”的关联性，属于疾病患者的饮食指导，而非直接的“疾病治疗”（治疗涉及药物、手术等）。案例2：（1）①属于过标（框体超出目标边缘）；②属于过标（包含非目标区域）；③属于漏标（未根据遮挡调整框体，应仅标注可见部分）。（2）修正建议：①调整框体左下角至轿车实