【通用】听见智能会议系统建设方案(一体机)

1、建设方案2017 年 1 月项目概述 TOC o 1-5 h z ? 1.1. 建设背景1? 1.2. 建设重要性1建设内容及目标 2产品施工条件 3建设方案 7? 4.1. 系统概述7 ? 4.2. 软件详细配置中 文语音转写引擎9应 用系统基本功能11用 户管理错误!未定义书签。音 频采集处理错误!未定义书签。实 时语音转写11历 史语音转写12内 容编辑12效 果优化14内 容展示15. 容管理4.2.2.16全 文检索错误 !未定义书签。硬件设备配置17一 体式智能会议主机错误!未定义书签。应 用端主控电脑5.错误!未定义书签。项目报价19项目概述建 设背景随着信息时代的到来，海量语音

2、的获取和存储能力愈发强大，基于会议办公的实际场景， 会存在需要大量的人力投入、工作效率不高的情况、语音技术在会议场景中的应用质量和效果不高。因此， 结合会议会务场景对语音技术的实际应用需求，开展了基于会议场景下的语音技术应用关键技术研究，突破语音合成、语音识别、 语音转写等核心技术，提升语音技术在会议会务场景中的应用水平，切实提升日常会议办公的工作效率和效果。建 设重要性语音识别(Speech Recognize )技术，是让机器通过识别和理解过程使之听懂人类语言的技术。语音识别技术是信息技术中人机交互的关键技术，目前已经在呼叫中心、电信增值业务、企业信息化系统中有了广泛的应用。 随着语音识别

3、在语音搜索、语音控制等全新应用领域的深入应用，语音识别第 1页第 页技术被业界权威人士誉为有可能引发人机界面领域革命的关键技术。近年来， 语音识别技术取得了长足的进步。智能会议系统是基于语音识别技术所研发，可满足会议演讲、 会议研讨、沟通交流、大型会议等一系列需要进行实时文字转写的场景。此部分项目的实施主要解决会议记要整理时间长、会议中心思想因记录人员的理解而可能出现的偏差、会议录音及关键点难以查找等问题。项目建成后当天即可完成所有相关会议记要的整理工作，同时， 每一个人的发言均可记录在纪要当中，可有效减少因不同原因造成的会议中心内容理解的偏差，提升纪要整理的效率。建设内容及目标本项目计划选取

4、1 个 会议室分别部署单机版听见智能会议系统，进行基于会议场景下的新型语音转写技术的应用，实现会议过程中音频实时转写成文字，辅助会议记录人员进行纪要的整理与校正，实现快速成稿，在整体上打造样板化智能语音转写会议室。产品施工条件听见智能会议系统的部署环境整体要求如下：环 境 指 标 要 求电源机柜要求音频接口麦克风视频接口1.5KW高度：6U深度：500MM 对应机 柜托盘一个需提供 一路音频接 口，支 持卡侬 公或大 三芯或 双莲花需配置麦 克风对每个说 话人声音 进行采集如需上屏，需提供投屏接口，支 持HDMI 或VGA详细说明如下：环境要求智能会议系统采用专业定制一体机的硬件形态，一体机的

5、安装机柜需要6U 空间，安装于正常室外室内即可，设备深度为500MM ，系统本身局域网组建自带，网络带宽在100M 以上，主控PC需要连接局域网下使用，整套设备局域网下运行即可。同时需要1.5KW 电源。音视频需求该系统是基于音频基础上实现语音转写，麦克风等音响设备利用会议室现有环境。为实现对现场音频的采集，需要现场音响设备 （调音台或相关音频设备）提供会议话筒音频供转写，同时设备接口支持卡侬公、大三芯（6.5） 、双莲花输入。如有展板上屏需求，需要会议室内配有投影仪或者电视机，且具备VGA 或者 HDMI接口任意一种，展板通过连接投影仪或者电视机进行投屏展示。系统连线图听见智能会议系统的配套

6、硬件设备，其形态为：通过国家CCC 认证和专业定制一体机 +应用端主控电脑。一体式智能会议主机为讯飞听见专业定制设备，集成了包括服务节点、应用节点、声卡、显示器、路由器等部件， 用于部署引擎等核心能力软件，并提数据传递等能力；主控端控制提供软件各个功能的操一体机支持显示输出，主控一体机整体外观图示意图及背后面板图整套产品即可参数说明：? 整 机电源：AC 100-240V 700W；? 服 务器节点：XEON 2.6G 20M 2011PCORE，E5-2620 V3*2； 32G DDR4REG/ECC；接口2*千网口（IntelI210AT ) ， 1* RS232， GPIO， Watc

7、h dog，VGA- 切换器；USB： 6*USB(前置1*USB2.0+后置(2*USB 2.0/2*USB3.0) ；? 应 用节点：CORE 3.2G 6M 1151P 4CORE I5-6500； 8G DDR4， 2*千兆网口( Intel 82579V ) 1*千兆网口(Intel2579V ) ， 1*RS 232， 1*VGA， 1*PS2，DVI 转 HDMI ；? 坦 克声卡： 一个麦克风输入并自带音量增益旋钮,XLR/6.3mm混合式接头一个乐器输入并自带音量增益旋钮,6.3mm接头4个模拟输入（RCA接头） 一组唱盘输入并内建RIAA等化放大及自带音量增益旋钮6个模拟输

8、出（RCA接头 ）一个耳机接孔（6.3mm接头）并自带音量增益旋钮一个光纤数字输出/输入一个同轴数字输出/输入 一组 MIDI I/O产品连线说明：本产品为一体机形态，只需要接通一根电一根音频线、一根视频线，并通过一 听、 重点标记等功能方便快速整理出会议材建设方案5.5.1. 系 统概述听见智能会议系统由软件、硬件共同构实现在会议场景下的实时音频或录音采料； 并且通过系统提供的语气词过滤、自动分段等功能自动优化文字结果；同时， 用户可以使用全文检索功能方便检索历史音频。系统具备会议音频管理、即时校对编辑、敏感词屏蔽、转写文字实时直播等基本功能。麦克风一体机主控电脑实时字幕性 能参数系统关键性

9、能指标如下：转 写结果能够实时上屏展示；2）转 写结果能够音字对照、编辑校正；3）普 通话转写指标：安静环境下的标准普通话转写正确率90%；4）系 统响应指标：常规页面操作的响应时间 5 秒；5)转 写效率指标：实时语音转写效率500 毫秒。软 件功能配置中文语音转写引擎听见智能会议系统需要解决语音转换成文字的问题。机器语音识别技术是一种实现从“声音”到“文字”转换的技术，通过将人的语音直接转换成相应的文本。语音识别技术的研究工作开始于上世纪五十年代。Bell 实验室的研究人员利用模拟元器件提取了语音信号元音共振峰频率变化的信息，有史以来第一次实现了识别十个英文数字的语音识别系统-Audry

10、系统。八十年代，Bell 实验室的Rabiner等科学家将原本艰涩难懂的隐马尔科夫模型(Hidden MarkovModel-HMM )理论工程化，形成了较为完善的概率统计模型体系，识别性能也得到了很大的提高。2006 年以来 Deep Learning理论和技术成为了模式识别领域的一个热门研究方向，G. E. Hinton 等深入研究了深度置信网络 ( Deep Belief Network-DBN ) 以及深度神经网络( Deep Neural Network-DNN)等模型结构，微软通过与Hinton 合作率先将 DNN 应用于语音识别任务，识别性能取得了显著提升。此后谷歌、蒙特利尔，以

11、及IBM 又将循环神经网络(Recurrent NeuralNetwok-RNN )成功应用于语音识别领域，特 别 是 长 短 时 记 忆 ( Long-Short Term Memory)神经网络结构，取得非常出色的语音识别性能。加上目前图形处理器( GPU)计算能力的提升，以及互联网时代大规模标注数据获取成为可能，基于深度学习的语音识别技术已经在多个领域达到实用水平。传统的语音识别技术主要用于解决人与机器的交互问题。而在会议场景需要需要转成文字的音频内容是人与人之间交互，听见智能会议系统需要基于机器语音识别技术构建语音转写引擎。听见智能会议系统构建的语音转写引擎需要能够实时、高效的把人与人

12、之间交流的语音转换为文字的能力，具体包括中文语音转写引擎与英文语音转写引擎， 本系统需要完成中文语音转写引擎的建设。应用系统基本功能 TOC o 1-5 h z 听见智能会议系统，可以实现在会议、教学、演讲等场景下的实时音频或录音采集，并通过语音识别技术实时转化为文字。用户可以通过系统提供延时播放、按句回听、重点标记等功能方便快速整理出会议材料；并且通过系统提供的语气词过滤、自动分段等功能自动优化文字结果，可人工进行角色分离； 同时， 用户可以使用全文检索功能方便检索历史音频。实时语音转写听见智能会议系统需要通过对实时音频流信号的处理完成从信号获取、转换、 处理、识别、 输出、 展示等一整套流

13、程动作，需要由强大的音频采集处理模块。系统讲通过使用特定的录音服务，通过麦克风收集后，送达后台服务端完成编码工作，实时上传到系统， 供后续的转写文字等功能使用，同时保存到内容管理模块中。系统通过专业麦克风对会议全程进行高保真录音,并针对连续中文语流进行实时语音转写识别，并持续进行转写结果文本内容的输出。历史语音转写相比于实时语音转写模块，历史语音转写模块提供对于已经录制好的历史音频需要转写情况下的解决能力；用户可以通过系统提供的功能按钮，导入历史音频并实现快速离线转写；支持音频批量导入。图：历史音频转写编辑效果图内容编辑在实时语音转写过程中用户可以实时对转写出的文本结果进行编辑，并进行重点内容

14、标记。在实时编辑的过程中采用延时播放的策略，用户可以在查看到转写文本之后及时根据听到的音频进行文本校对编辑。用户也可不戴耳机直接听现场的实时音频。支持第 12页第 页选择查看原始结果，对比修改，方便快捷，会议结束后即可直接成稿,并根据重点内容，整理导出会议纪要。具体功能包括：延时播放：在实时语音转写过程中,识别结果展现之后再开始连续播放音频，即用户在看到转写文本的时候，同步听到对应的音频 ,使得校对和编辑更加便利。重点内容标记：在实时语音转写过程中或者暂停和结束时，用户均可以选中文本来进行重点内容的标记，已标记的文本也可以进行修改和标记取消，方便整理会议纪要，会议结束会后即可或直接成稿。音字对

15、照：在实时语音转写暂停的时候，用户如果对于有些内容没有听清，对于文本内容不确定的情况下，双击原始结果即可听到文本对应的音频，方便用户对写结果进行编辑， 尤其是不小心误删除了编辑文本，可以通过回听原始结果来进行回溯。实时语音转写结束状态时，原始结果及编辑结果均可双击进行音频回听。图：实时语音转写效果图效果优化在实时语音转写过程中，听见智能会议系统通过提供语气词过滤、自动分段等功能自动优化文字转写和显示结果。具体包括：自动分段：在会议内容实时语音转写成文字的过程中，为了方便用户编辑何查看，系统提供根据VAD+ 固定字数和VAD+ 固定关键词两种自动分段方式。系统提供最佳的默认自动分段方式，用户也可

16、根据实际情况进行设置。语气词过滤：用户可以在实时语音转写开始前或者进行文稿整理时可以根据需要选择是否开启语气词过滤按钮，若开启按钮可将语气词和多余的词汇去除，以保证文稿的规整。 语气词过滤只针对新转写的结果，已经修改过的内容不支持过滤。关键词优化：用户可通过关键词优化功能将此次会议相关的关键词进行添加，能有效提升该关键词的识别准确率。实时转写过程中用户也可添加关键词，并且可以实时生效，后续识别结果可得到有效优化。内容展示系统通过提供展板上屏等形式进行实时语音转写结果的展示。具体功能包括：实时上屏：通过展板上屏展示中实时语音转写结果。并且， 字体颜色和展板背景颜色可以根据实际情况需要进行调整。上

17、屏后台修改：如果在实时转写过程中使用了实时上屏功能,希望保障上屏效果，那么可以使用上屏后台修改功能进行展板端的结果纠正。在开始时点击展板按钮，调出展板，此时该展板端会同步出现识别文字。如果在转写过程中出现明显错误或不适宜展示的词语，则可以在主控端进行展板编辑，可以修改或删除,修改之后按Enter 键则修改的内容会同步到现场的投影屏幕上。内容管理所有通过听见智能会议系统转写的实时录制的音频文本数据和本地上传的音频文本数据系统都会以列表形式进行管理，后台通过分布式存储集群实现高效安全存储，整个过程用户无感知。用户可以通过内容管理模块随时查看和编辑，并且可以根据名称等信息快速检索。此外， 编辑后的全

18、文本、重点文本以及音频、某一角色的文本，用户都可以快速导出,方便快捷。系统通过自然语言理解、语音识别和语义分析技术理解用户意图，执行用户的检索指令（包括语音、文本等），实现资源文本内容的语音搜索服务能力，不仅能检索文本资源，也能根据文件名对音视频内容进行搜索。 该服务在传统的文字输入搜索方式基础上，不仅能支持搜索语音时的相对自由表述， 也应当能够支持传统文字检索时的相对自由表述。硬 件参数配置听见智能会议系统的配套硬件设备，具体包括： 一体式智能会议主机、应用端主控电脑。产品参数如下：名 称参数配置数单 量位定制一体机讯飞听见专业定制一体式智能会议主机，提供4U 设备形态，集成了包括服务节点、

19、应用节点、声卡、显示器、路由器等部件。? 服 务 节 点 配 置 ： 2*E5-2620V32.6GHZ/32G/900G*3SAS10KRPM+raid5/1*USBkey+3*USB2.0/1000M NIC；1 台?应 用 节 点 配 置i5/8G/500GIntel CoreSATA7200RPM/VGA+HDMIDVIDP/3*USB2.0/1000M NIC ；? KVM 控制器：二路信号切换，支持一键切换服务端、应用端信号源； 键鼠支持切换使用二切一。? 声 音采集 工作站 ： DMX 6FireUSB，单路声卡? 支 持路由功能，提供三个连接外网标准网络LAN 接口、 1 个标准主 控 电 脑网 WAN 口，配备1 个加密狗。i5-6200U 2.3GHz，内存：G，硬华硕PRO453U。 cpu： Intel Core盘： 500GB SATA，显卡：2GB 独显（满足同等配置均可）本产品为软硬件一体的离线式单机产品，主机采