人工智能训练师(五级)操作技能考核题目

人工智能训练师(五级)操作技能考核题目本考核采用现场实操结合仿真平台操作、书面记录配套的形式开展，总考核时长120分钟，试卷总分100分，成绩达60分及以上为考核合格，所有操作与作答需严格符合《人工智能训练师国家职业技能标准（2021年版）》中五级（初级）对应的技能要求，严禁虚构操作流程、编造校验结果，涉及仿真系统操作的环节由平台自动留存全操作轨迹，结合提交的书面记录、结果文件统一评分。考核过程中需严格遵守数据安全相关规定，涉及个人信息的操作需符合《中华人民共和国个人信息保护法》要求，不得擅自拷贝、传播考核过程中接触的所有训练数据、系统信息，考核结束后需按监考人员要求删除本地临时存储的所有考核相关文件。一、多模态训练数据采集与合规校验（分值25分，建议操作时长30分钟）本任务面向社区智能门禁人脸识别模型的基础训练集构建需求，考生需完成指定范围内的样本采集、预处理、合规校验全流程操作，具体要求及评分规则如下：1.样本采集操作（10分）：按采集规范完成30张人脸静态图像、10段时长10秒的人脸动态视频采集，采集对象需覆盖3个年龄段（18-30岁、31-55岁、56岁及以上），每个年龄段至少包含2名男性、2名女性。所有采集对象必须本人签署《个人生物信息采集授权同意书》，授权书需明确告知采集信息仅用于本次考核的模型训练场景，不得挪作他用，缺1份有效授权书扣2分，代签、冒签的授权书视为无效，对应采集样本全部判定为不合规。静态图像采集分辨率不低于1920*1080，对焦清晰无运动模糊，单张图像中人脸区域占比不低于画面总占比的30%，不得出现翻拍电子屏幕、佩戴口罩/墨镜/宽檐帽遮挡核心面部特征的样本，不符合质量要求的单张图像扣0.5分；动态视频采集帧率不低于25帧/秒，每段视频需覆盖正面平视、左侧45度、右侧45度、低头15度、抬头15度5种常规通行姿态，不得进行剪辑、拼接、消音处理，每段视频缺失1种姿态扣0.3分，存在后期剪辑痕迹的单段视频扣1分。所有采集样本不得添加滤镜、水印，不得进行裁剪、调色等修改，保持原始采集状态，违规修改的样本按无效样本计。2.数据预处理操作（10分）：对通过质量校验的样本按统一规则命名，命名格式为“年龄段编号_性别编号_样本序号”，其中18-30岁编号为A、31-55岁编号为B、56岁及以上编号为C，男性编号为M、女性编号为F，命名错误的单个文件扣0.3分。逐一排查所有样本，剔除重复采集、过曝（画面高光区域占比超过60%导致面部特征丢失）、欠曝（画面暗部区域占比超过60%导致面部特征无法辨认）的无效样本，每漏删1个无效样本扣0.5分。按规范搭建存储文件夹结构，根目录命名为“门禁人脸训练集_考生准考证号后四位”，根目录下设置“静态图像”“动态视频”两个一级子文件夹，每个一级子文件夹下按3个年龄段分别设置二级子文件夹，将对应样本存入指定路径，文件夹层级错误、命名不规范的每处扣2分，样本存放路径错误的单个文件扣0.2分。3.合规校验记录填报（5分）：填写《数据采集合规校验表》，逐样本记录采集时间、采集地点、授权状态、质量校验结果，汇总统计有效样本量、无效样本量、无效样本原因占比，漏填1项记录扣0.2分，校验结论与样本实际质量不符的每处扣0.5分，未按要求统计有效样本占比的扣2分。二、基础类型训练数据标注操作（分值40分，建议操作时长50分钟）本任务依托考核专用仿真标注平台完成，考生需严格遵守给定标注规范，完成计算机视觉、自然语言处理两类基础标注任务，标注结果直接在平台保存并导出，具体要求及评分规则如下：1.街景图像2D矩形框标注（25分）：平台共提供100张城市道路街景图像，需标注的目标类别包含行人、非机动车（含电动自行车、自行车、人力三轮车）、机动车（含小型载客汽车、公交车、货运车辆）、交通信号灯4类。标注需遵循以下规则：矩形框需紧密贴合目标可见区域的外边缘，框体与目标实际边缘的像素间隙不得超过5像素，不得出现截断目标有效区域、框选大量无关背景的情况，每出现1个标注框位置偏差超标扣0.2分；类别标签需准确匹配目标类型，将非机动车标注为机动车、将交通信号灯支撑杆件标注为灯盘本体等标签错选情况，每处扣0.3分；需完整标注图像中所有符合要求的目标（目标像素面积不小于32*32像素、遮挡比例不超过70%），漏标单个目标扣0.4分，其中骑乘非机动车的行人需分别标注行人、非机动车两个独立目标，不得合并标注；对遮挡比例在30%-70%之间的目标，需按可见区域标注并添加“部分遮挡”属性标签，未添加遮挡属性的每处扣0.2分，遮挡比例判定错误的每处扣0.3分；重复标注同一目标、标注不存在的虚假目标的，每处扣0.2分。遮挡比例超过70%、像素面积不足32*32像素、在图像边缘仅显示不足10%区域的目标无需标注。2.电商客服文本意图分类标注（15分）：平台共提供200条电商智能客服的用户真实咨询文本，分类标签包含咨询商品参数、咨询物流进度、申请售后退换、咨询优惠活动、投诉服务问题、其他无效咨询共6类。标注需遵循以下规则：单条文本仅匹配1个主标签，文本同时包含多个诉求的，以用户表述顺序中靠前的核心诉求作为分类依据，标签错选单条扣0.1分；无效咨询判定范围包含纯表情、乱码、商业广告、与购物服务无关的闲聊内容，将有效咨询判定为无效、将无效咨询错判为有效类别的，每处扣0.15分。所有标注完成后，需将结果导出为UTF-8编码的JSON格式文件，文件需包含“文本ID”“原始文本内容”“分类标签”“标注人ID”“标注时间”5个必填字段，字段缺失每处扣1分，文件编码错误导致乱码、无法正常读取的本项不得分。本任务整体标注准确率需达到95%以上，准确率每降低1个百分点扣2分，扣完为止；操作过程中需每10分钟主动保存一次标注进度，因未及时保存导致标注结果丢失的，责任由考生自行承担。三、智能交互系统基础巡检与异常记录（分值20分，建议操作时长25分钟）本任务依托社区政务智能客服仿真运维平台开展，考生使用给定的五级操作权限账号登录，完成1个模拟运行周期（30分钟）的系统巡检工作，不得越权操作平台内的配置修改、服务启停、日志删除等功能，越权操作导致仿真系统故障的本题记0分，具体要求及评分规则如下：1.模块运行状态检查（8分）：逐一核查语音识别模块、语义匹配模块、问答知识库模块、语音合成模块的在线运行状态，记录每个模块的CPU占用率、内存占用率、平均响应时延3项核心指标，其中CPU占用率正常阈值为＜70%，内存占用率正常阈值为＜75%，平均响应时延正常阈值为＜800ms，漏查1个模块扣2分，漏记1项运行指标扣0.5分，指标阈值判定错误（如将超标指标判定为正常、将正常指标判定为超标）的每处扣1分。2.异常对话日志筛查（8分）：从平台导出巡检周期内的150条用户交互日志，逐一筛查4类异常记录：一是机器人对同一用户问题重复回答相同内容超过3次且未触发人工转接；二是机器人回答内容与用户问题语义完全无关；三是机器人回答内容涉及政治敏感、低俗表述、虚假承诺等违规话术；四是语音识别结果与用户实际语音文本核心语义偏差超过40%（核心信息含办理事项、地点、时间、申请主体等要素）。每漏检1条异常记录扣0.5分，异常类型判定错误的每处扣0.3分；对筛查出的异常记录需标注对应的问题归属模块，如回答内容无关归属语义匹配模块、识别结果偏差归属语音识别模块、违规话术归属知识库模块，模块归因错误的每处扣0.4分。筛查过程中需区分用户自身原因导致的交互问题与系统原因导致的异常，如用户表述逻辑混乱、口音极重导致识别失败的情况不纳入系统异常统计，误判的每处扣0.3分。3.巡检记录填报（4分）：填写《智能客服系统巡检记录表》，明确记录巡检时间、各模块运行状态判定结果、异常记录分类数量、初步处置建议。初步处置建议需符合五级岗位权限，可提出“记录异常信息上报中级人工智能训练师或运维工程师处置”“整理知识库缺失的问题条目提交内容运营岗补充”等合规建议，不得提出超出权限的操作方案，记录内容缺项每处扣0.5分，提出越权处置建议的每处扣1分。四、模型推理结果初步校验与问题反馈（分值15分，建议操作时长15分钟）本任务依托人脸识别模型仿真测试平台开展，考生需对50张测试样本的模型推理结果进行初步校验，按要求反馈发现的显性问题，不得擅自修改模型参数、调整测试样本标签，具体要求及评分规则如下：1.推理结果比对校验（10分）：调用平台内置的样本真实标签库，逐一比对模型输出的3类识别结果（人员ID、性别、年龄段）与真实标签的一致性，记录所有识别错误的样本，错误类型包含4类：一是人员ID匹配错误（将样本对应人员识别为其他人员）；二是属性识别错误（性别或年龄段判定与真实标签不符）；三是漏检（样本中存在清晰人脸但模型未识别到）；四是误检（样本中无对应人脸但模型输出了识别结果）。每漏记1个错误样本扣0.5分，错误类型判定错误的每处扣0.3分。完成比对后，计算模型在本次测试集上的识别准确率，计算方式为（识别结果完全正确的样本数/总有效测试样本数）×100%，其中人脸存在大面积遮挡（遮挡比例超过70%）、光线极度昏暗导致特征完全丢失的样本为无效测试样本，不纳入准确率计算，准确率计算结果偏差超过1个百分点扣3分。校验过程中需将不同错误类型的样本按ID分类整理，为后续问题排查提供基础依据，未按错误类型分类整理样本清单的扣2分。2.问题反馈单填报（5分）：针对校验中发现的识别错误，填写《模型效果问题反馈单》，逐类记录错误样本ID、错误类型、出现场景特征、初步影响分析，场景特征描述需具体（如“夜间红外补光场景下6