智慧医疗语音识别技术的应用课件

1、智慧医疗语音识别技术的应用智慧医疗语音识别技术的应用语音识别历史回顾与技术变迁医疗语音识别需求与国内外应用现状 协和医疗语音录入探索与实践医疗语音识别应用挑战及注意事项 更多医疗语音应用场景探讨与思考语音识别历史回顾与技术变迁50年代AT&T贝尔实验室实现 的Audry系统60-70年代实现了基于线性预测倒谱和DTW技术的特定人孤立词 语音识别系统80年代人们终于在实验室突破了大词汇量、 连续语音和非特定人这三大障碍， 第一次把这三个特性都集成在一个 系统中90年代研究重点已转向识别装置 中的自然语言处理部分。出现了支持普通话、上海 话、四川话、广东方言的 识别系统21世纪（现在）深度学习、互

2、联网大 数据，云计算等技术应 用相对成熟，助力语音 识别在地图、聊天、搜 索、客服、电信、法律 医疗等领域逐渐商用。50年代AT&T贝尔实验室实现 的Audry系统Nuance公司（Nuance Communications, Inc. (NASDAQ: NUAN) 是最大的专门从事语音识别软件、图像处理软件及输入法软件研发、销 售的公司。Nuance公司（Nuance Communicatio智慧医疗语音识别技术的应用微软的对话语音识别技术在 产业标准Switchboard语音 识别基准测试中实现了词错率（word error rate, WER） 低至5.9%，首次达成与人类专业速录员持平

3、，并且要优 于绝大多数人的表现。Achieving Human Parity in Conversational Speech Recognition微软的对话语音识别技术在 产业标准Switchboard语音信号处理及 特征提取声学模型解码器发音词典语言模型识别 文字语音识别（ Automatic Speech Recognition ）是将人类自然语音转换为可供计算机识别的文本信 息的过程。语音识别引擎可智能识别客户语言并与其他应用系统进行匹配，是人机交互的重要接口。信号处理及 特征提取声学模型解码器发音词典语言模型识别 文字100%90%80%语别音 识70%字 错 误60%50%率40

4、%30%20%10%0%统计学习（HMM HiddenMarkovMode / GMM GaussesMixtureMode ） 引入深度学习（微软）LSTM，长短期记忆网络(Long Short Term Memory networks) CTC，联结主义时间分类器（Connectionist Temporal Classification）100%语别音 识字 错 误60%率40%30%20%10%地方 方言 口音多音字 多音词中文 语义 丰富中华文化 博大精深中文的发音和字是 独立的，仅仅是中 国大陆地区就有很 多的方言，口音问 题非常严重。中文有415个基本 的无调音节来构成7000多

5、个基本汉 字的发音地方 方言 口音多音字 多音词中文 语义 丰富中华文化 博大女孩对男朋友说：“如果你到了，我还没到，你就等着吧；如果我到了， 你还没到，你就等着吧。”冬天能穿多少穿多少 vs 夏天能穿多少穿多少。外国盆友，从这段话里，好好领悟下“意思”的意思。 领导：“你这是什么意思？”阿呆：“没什么意思，意思意思。” 领导：“你这就不够意思了。”阿呆：“小意思，小意思。” 领导：“你这人真有意思。”阿呆：“其实也没有别的意思。” 领导：“那我就不好意思了。” 阿呆：“是我不好意思。”女孩对男朋友说：“如果你到了，我还没到，你就等着吧；如果语音识别历史回顾与技术变迁医疗语音识别需求与国内外应

6、用现状 协和医疗语音录入探索与实践医疗语音识别应用挑战及注意事项 更多医疗语音应用场景探讨与思考语音识别历史回顾与技术变迁智慧医疗语音识别技术的应用智慧医疗语音识别技术的应用20世纪60年代初，著名经济学家马寅初的夫人弭患怪病，一感冒就休克，很多专家都无法确诊。协和医院著名内科专家张孝骞参加会诊后，从家里翻出昔日 记录的病历小本，上面记载着该患者30年前曾有过难产大出血，于是准确诊断 出马夫人的病症是一种垂体前叶功能减退症。这件事在当时轰动了医学界。张孝骞常说，“病历是有历史意义的公共财富，不能看成个人的小事而漫不经 心，要对别人和后人负责”。病历是给患者诊疗的重要依据，是科研的第一手临床资料

7、，同时也是医生的脸面，更直接反映了一个医院医疗质量、学术水平 和管理水平。20世纪60年代初，著名经济学家马寅初的夫人弭患怪病，一智慧医疗语音识别技术的应用Traditional dictationHIMSS EUROPE调查显示：一位主任医师平 均每年因语音录入需花费65500欧元。Traditional dictationHIMSS EURHIMSS EUROPE调查显示，大部分欧美诊疗机构已经采用了 语音作为病历收集的方式。全美72%以上的医疗机构正在使用语音系统。语音识别的 应用提高医生录入工作40%效率且调研显示94的欧美医疗机构正在使用或正在考虑使用 临床语音识别技术提高医生的工作

8、效率。HIMSS EUROPE调查显示，大部分欧美诊疗机构已经采用智慧医疗语音识别技术的应用语音识别历史回顾与技术变迁医疗语音识别需求与国内外应用现状 协和医疗语音录入探索与实践医疗语音识别应用挑战及注意事项 更多医疗语音应用场景探讨与思考语音识别历史回顾与技术变迁近50%医生每天医疗文档录入超过4小时看电脑多过看病人近50%医生每天医疗文档录入超过4小时看电脑多过看病人利用声学模型自适应和大数据语音建模技术，解决不同地区口音/噪声对语音识别的干扰，增强声学模型的鲁棒性。研究医生说话口音统计医生说话习惯收集噪声环境数据jiangjianxianweiwenmingminxiangxianxin

9、声学模S型yiyuchanchuangchang语S言模型利用声学模型自适应和大数据语音建模技术，解决不同地区口音研究针对性结合医疗领域的大量文本术语语义知识，构建统计医疗语 言模型，减少解码搜索范围，降低医疗语言识别的错误率。研究医疗术语表述收集医生常用说法构造字词关联算法胃建明未见件名显险鲜语言模S型异易尝常长文S本输出针对性结合医疗领域的大量文本术语语义知识，构建统计医疗语 言针对性结合医疗领域的大量文本术语语义知识，构建统计医疗语 言模型，减少解码搜索范围，降低医疗语言识别的错误率。研究医疗术语表述收集医生常用说法构造字词关联算法胃建明异未见件名显险鲜易语言模S型尝常长文S本输出针对性

10、结合医疗领域的大量文本术语语义知识，构建统计医疗语 言专业术语特殊单位切开阔筋膜并钝性分离阔筋膜张肌Cells/l个细胞每微升cmH2O厘米水柱难点特殊符号呈（-）呈阴性叁点五乘五点二厘米3.5*5.2cm医学专业术语、特殊单位、特殊符号转写的准确性，是医疗语音录入应用的关键！专业术语特殊单位切开阔筋膜并钝性分离阔筋膜张肌Cells/医生的说出的医疗特殊单位、特殊符号、英文缩写，按照医疗行业要求 进行识别和转写。已收集整理300多个。微米m微克每升g/L微克每千克g/kg微克每毫升g/ml微克每分升g/dl微克g微国际单位每毫升IU/mL升每分钟L/min摄氏度千克kg千单位每升KU/L千单位

11、KU皮克每升pg/L皮克每毫升pg/ml皮克pg十的九次方109医生的说出的医疗特殊单位、特殊符号、英文缩写，按照医疗行业要手术 休息室病房手术 休息室病房与电子病历结合协和定制医疗输入法与电子病历结合协和定制医疗输入法智慧医疗语音识别技术的应用不同病房语音识别调用次数及总时长不同病房语音识别调用次数及总时长语音识别历史回顾与技术变迁医疗语音识别需求与国内外应用现状 协和医疗语音录入探索与实践医疗语音识别应用挑战及注意事项 更多医疗语音应用场景探讨与思考语音识别历史回顾与技术变迁头戴式耳麦桌面麦克风蓝牙耳机领夹式麦克风手持麦克风7.78% (7/90)11.11%12.22%55.56%13.

12、33%(10/90)(11/90)(50/90)(12/90)头戴式耳麦桌面麦克风蓝牙耳机领夹式麦克风手持麦克风7.78%与患者沟通内容会录进去吗？环境嘈杂会影响准确率吗？在患者面前语音录入合适吗？“你只是观察，而我是在体验”哇塞，太先进了，太高级了， 特殊的医学字符，外院检查检验与患者沟通内容会录进去吗？“你只是观察，而我是在体验”主动检查忘记关闭Williams B. Normal Accidents: Living with High-Risk TechnologiesJ. Bulletin of Science Technology & Society, 1989, 9(2-3):19

13、9-201.主动检查忘记关闭Williams B. Normal智慧医疗语音识别技术的应用智慧医疗语音识别技术的应用Average 69%$3 million /yrAverage 69%$3 million /yr语音识别历史回顾与技术变迁医疗语音识别需求与国内外应用现状 协和医疗语音录入探索与实践医疗语音识别应用挑战及注意事项 更多医疗语音应用场景探讨与思考语音识别历史回顾与技术变迁超声科内窥镜室病理科口腔科工作时双手被占用，写 病历或诊断报告时需要录入 员配合完成，或者操作完成 后才可录入。低效且助手录 入的报告质量不高。超声科内窥镜室病理科口腔科工作时双手被占用，写 病历或诊断报患者：

14、下周二，肾内科有哪些医生坐 诊？机器人：已经帮您搜索到下周二肾内 科12个坐诊医生。您可以说名字，我 帮您预约。患者：下周二，肾内科有哪些医生坐 诊？6床患者，添加医嘱：口服 阿莫西林，每次1粒，每日3次，服药一周。并帮我申请 该病人明天的手术。手 术 申 请智能眼镜6床患者，添加医嘱：口服 阿莫西林，每次1粒，每日3手 术 智慧医疗语音识别技术的应用/content/mayo-clinic-study-shows-voice-analyzing-app-may-be-useful-heart-disease-diagnosis/ 声纹鉴别技术属于“生物因子”认证范畴。同 指纹一样，声纹同样是不可复制的，每个人的 指纹都是唯一的，数百万人之间才会发现有两 个人有相同的指纹；与此类似，声纹也是人的 个性特征，很难找到两个声纹完全一样的人。 说话人识别，也称声纹鉴别，就是根据人的声 音特征，鉴别出某段语音是谁说的。 声纹鉴别技术属于“生物因子”认证范畴。同 指纹一样