教育机器人Interjoy人脸识别及情绪分析SDK开发平台-试验室管理处

大型精密仪器设备购置申请论证报告 仪器设备名称 教育机器人 Interjoy 人脸识别及情绪分析 SDK 开发平台和源代码 项 目 名称浙江省重点高校建设智慧教育项目经费 项目负责 人周跃良 填 表 日期20172017 年年 9 9 月月 1111 日日 1 实验室管理处制 填表说明 1 此表须在学院申购该设备前填写完成 并与申购计划一 起上报有关部门 2 单价 10 万元以上仪器设备的申购均需填写此表 单价 10 40 万元的仪器设备由各学院自行组织校内专家论证 评议 单价 40 万元以上的仪器设备由各学院组织校内外专家 其中必 须有校外专家 论证 评议 项目经费 设备管理等部门参与 3 此表填写必须使用碳素墨水钢笔或计算机激光打印 4 此表一式五份 学院 实验室各一份 交项目经费管理 部门一份 实验室管理处二份 2 中文 教育机器人 Interjoy 人脸识别及情绪分析 SDK 开发平台和 源代码 设备名称 英文 型号规格V2 0 人民币98 万 申购数量1 套现行单价 美元 1北京盛开互动科技有限公司 2 可供货 厂商 中英文 3 仪器设备 主要功能 及应用范 围 用于人脸识别并分析用户情绪状态 可用于教育机器人的人脸识别并分析用户用于人脸识别并分析用户情绪状态 可用于教育机器人的人脸识别并分析用户 情绪状态等开发 情绪状态等开发 InterjoyInterjoy 人脸识别及情绪分析人脸识别及情绪分析 SDKSDK 主要功能 主要功能 1 开发者提供图片文件或者图片 URL 或者视频流 进行图片分析 自动判断图 片中是否存在人脸并定位出五官位置 进行 1 1 与 1 N 比对 分析特定人脸 的性别 年龄 是否佩戴眼镜及喜悦 惊讶 愤怒 中性等情绪状态 2 判断图片中是否含有人脸 如有则给出所有人脸区域的坐标位置 3 精确定位人脸区域 5 个关键点坐标位置 包括眼睛 鼻子 嘴巴 4 计算两张人脸照片的相似度 用于判断属于同一个人的可能性 5 针对一个人脸 在已有的人脸集合中搜索相似的人脸 并给出相似度排序结 果 6 分析特定人脸的性别 年龄 是否佩戴眼镜及喜悦 惊讶 愤怒 中性等情绪状 态 7 估计人脸的颜值 给出相应的分值 8 记录首次看见人脸和最后一次看见人脸的时间 9 实现人脸的注册 删除及人脸昵称的修改 InterjoyInterjoy 人脸识别及情绪分析人脸识别及情绪分析 SDKSDK 接入方式 接入方式 1 文档说明 1 SDK 相关头文件与动态库 2 SDK Demo 演示程序 3 SDK 说明文档说明文档 2 使用步骤 1 下载 SDK 文件包 2 将 DLL 文件加载到对应工程目录下 并包含头文件 SKFaceSDK h 3 将资源文件 resources 下的图片放入对应的路径下 4 运行代码 3 接口模块 3 人物数据结构定义 typedef struct PersonInfo char sName 64 称谓 如果为空 则为未命名用户 int LeftEyeX 左眼 X int LeftEyeY 左眼 Y int RightEyeX 右眼 X int RightEyeY 右眼 Y int FaceRX1 人脸矩形左上点 X int FaceRY1 人脸矩形左上点 Y int FaceRX2 人脸矩形右上点 X int FaceRY2 人脸矩形右上点 Y int FaceRX3 人脸矩形右下点 X int FaceRY3 人脸矩形右下点 Y int FaceRX4 人脸矩形左下点 X int FaceRY4 人脸矩形左下点 Y int FaceID 用于链接人物记忆数据库索引 int iDistance 距离单位 cm char cAge 年龄 char cScore 颜值 char cGender 性别 0 不清楚 1 女性 2 男性 char cGlasses 0 不戴眼镜 1 戴眼镜 char cExpression 人脸表情 time t tFirstMeeting 首次见面时间 time t tLastMeeting 最后一次见面时间 PersonInfo SKSmartFaceSDK 初始化 需要输入视频的宽度与高度 extern C declspec dllimport bool SKSmartFaceInit int VideoWidth int VideoHeight SKSmartFaceSDK 资源释放 extern C declspec dllimport bool SKSmartFaceDestroy 进行人脸识别 extern C declspec dllimport bool SKSmartFaceOnLineRecognizer unsigned char pBuffer PersonInfo 修改人物昵称 extern C declspec dllimport bool SKSmartFaceSetPersonName int PersonID char Name 删除已经注册的人物 extern C declspec dllimport bool SKSmartFaceDelPerson int PersonID 获得认识的人 extern C declspec dllimport std string SKSmartFaceGetAllPersonInfo 4 得到当前人脸注册进度 0 100 extern C declspec dllimport int SKSmartFaceGetRegProgress 开始进行人脸注册 返回 0 成功 1 由于模式处于自动注册失败 2 已 经处于注册中导致失败 3 数据库 已满导致注册失败 extern C declspec dllimport int SKSmartFaceStartRegFace char name 注册一张人脸 extern C declspec dllimport bool SKSmartFaceRegFace 取消人脸注册 extern C declspec dllimport bool SKSmartFaceBreakRegFace 地点面积家具配备 是 否 需 改 建 落实情况 用房情况 30121 是否已落实 姓 名职称 专管 或兼管 是否 使用过 熟 练 程 度 是否 需培训 朱信忠教授专管否是是 使用人员技术情况 5 一 申购理由 包括购置目的 必要性和可共享情况 1 购置目的和必要性 拟采购的基于深度学习技术的人脸识别及情绪分析 SDK 可用于在教育机器 人 儿童益智智能设备上实现人脸识别及用户情绪状态分析相关的应用开发 拟 采购的相关深度学习算法源码 可协助相关老师与研究生快速开展算法方面的研 究 该 SDK 及源码各项性能指标符合科研工作的要求 在同类产品中具有一定的 价格优势 在智能机器人领域应用广泛 2 本仪器设备可实现共享的学科 智慧教育 电子信息工程 计算机科学与技术 软件工程 多媒体设计 二 调研情况 1 本校是否有同类设备 数量 如有请说明目前该设备的利用率情况 能否共享 否 2 可供货厂商及相关情况 要求货比三家 内容包括仪器型号 性能 特色 附 件情况 基本配置报价 附件价格 初步优惠折扣 售后服务承诺 应用支持等 教学实验名称时数组数 学生 人数 总学时数 年 科研实验名称时数样品数总时数 年 仪器设备使用效益分析 经济效益等其它效益 6 专家论证意见 申请采购的 教育机器人 Interjoy 人脸识别及情绪分析 SDK 开发 平台和源代码 可用于在教育机器人 儿童益智智能设备上实现人 脸识别及用户情绪状态分析相关的应用开发 该平台的相关深度学习 算法源码 在智能机器人领域应用广泛 可协助相关老师与研究生快 速开展算法方面的研究 以该系统平台和源码为基础 相关老师与研 究生可开相关方面的研究 通过 2 3 年的研究 有望得到国家 省部 级项目的支持 同时 通过与相关科研院所 智能产业化公司合作 有望产生较大的市场价值 欲购置的 教育机器人 Interjoy 人脸识别及情绪分析 SDK 开发平 台和源代码 符合学科的发展 建议购置 组长签字 李建华