深度学习-视觉算法新2.0

1、计算机视觉深度学习平台张益新基本信息基本信息男男27岁岁165cm60kg湖北湖北北华航天工北华航天工业学院业学院2010-2014网络工程网络工程本科本科5年年工工作作经经验验岗位匹配技能人脸识别 ，理解常用人脸识别原理，并且灵活应用到其他场景灵活应用到其他场景；人体动作，openpose 成功落地于商品识别，撰写相关专利一篇撰写相关专利一篇算法实现和部署，使用c+ 编写基于caffe的前向推理框架，满负载运行满负载运行5个月个月自己使用c+自己实现 opencv 里的 Canny边缘检测边缘检测，高斯模糊等系列函数自己使用python实现简单的简单的cnn框架和框架和bp反向传播算法反向传

2、播算法每周至少运行起一套前沿算法代码前沿算法代码，论文落地实现框架性思考问题方式框架性思考问题方式，目前已经拥有一套算法解决问题的框架思维精通精通基于关键点的检测算法基于关键点的检测算法商品自由组合识别算法商品自由组合识别算法效果一个模型只能识别28个sku变为100个sku自由组合显存占用有16G以上以上变为 只有4G算法实现一个基于关键点识别的关键点特征检测器关键点特征检测器+一个分类器一个分类器首先由检测器提取出关键点，获取商品的数量然后以此为中心运用多尺度的方法多尺度的方法获取ROI，把ROI输入分类器得到商品的类别优化方向去掉分类器，使用分类器使用分类器softmax层后提取到的特征

3、层后提取到的特征，进行进行特征匹配，减少标注工作量特征匹配，减少标注工作量使用softmax后的特征比全连接层的特征效果要好10%密集场景下基于关键点的商品识别算法密集场景下基于关键点的商品识别算法效果基于点的检测在密集场景99%的识别准确率基于框的方法方法ssd，faster-rcnn，yolo等不等不work算法实现基于openpose的点的检测方法点的检测方法主要思想是前面进行图片的特征提取，接着进行点的回归和连接关系的回归点的回归和连接关系的回归重要点：增加高斯响应 ，heatmap半径半径，匈牙利算法，中继监督；NMS是基于峰值的，不是基于基于峰值的，不是基于IOU基于关键点的云端商

4、品识别服务使用使用c+实现云端推理的主要逻辑；实现云端推理的主要逻辑；1.支持多支持多GPU管理管理2.支持多个任务同时请求支持多个任务同时请求3.编写支撑服务的各种监控脚本编写支撑服务的各种监控脚本4.在满负载的情况连续在满负载的情况连续5个月正常运行个月正常运行5.一台服务器一台服务器p1002卡卡支撑起支撑起1000多个客户端的请求多个客户端的请求6.API请求地址请求地址工作经历工作经历 2015.08 2017.09 1:游戏功能优化，cocos2dx，unity 2:乐园APP客户端，react-native 3:AR项目，维汉学习机，参加展会上海韬图动漫科技有限公司上海韬图动漫科

5、技有限公司-程序员程序员 2017.12 2018.4 高级辅助驾驶系统adas 语义分割语义分割 司机行为识别司机行为识别目标检测目标检测 人体姿势识别人体姿势识别关键点识别关键点识别友邦网络科技有限公司（上海）友邦网络科技有限公司（上海）-深度学习深度学习2018.5-至今至今新零售小兰项目重构新零售小兰项目重构发明专利发明专利3项项密集场景下基于关键点的云端商品识别服务密集场景下基于关键点的云端商品识别服务深兰科技（上海）有限公司深兰科技（上海）有限公司-算法工程师02系统架构系统架构算法模型训练平台算法工程师标注数据数据标注员数据收集，处理和自动标注平台边缘计算平台部署平台云端服务平台平台算法工程师时间分配：10%会在沟通确定数据处理流程10%会在调参50%会在实现算法30%会在思考算法优化优点：GPU利用率提升数据费用下降数据量持续增加算法验证任务可并行处理03主要功能主要功能基于tensorflow 和pytorch的分布式训练平台支持单机单卡，单机多卡，多机多卡支持同时运行数百个任务，快速验证算法性能训练平台训练平台利用Tflite，tensorRT的等框架，结合其他加速方法，彻底释放嵌入式终端性能；相比普通模型提高3倍性能边缘计算平台边缘计算平台数据格式：支持视频，图片，文本标注方法：网页标注，多人协同预标注：100张图片只需要修改10张数据