简单1080P视频会议测试方案

1080P1080P 视频会议系统视频会议系统 测试方案测试方案 2009.92009.9 目目 录录 一、测试概要一、测试概要.3 二、测试环境和测试设备二、测试环境和测试设备.3 三、测试内容和方法三、测试内容和方法.4 3.1 系统平台可靠性测试.4 3.2 系统平台安全性测试.5 3.3 系统管理功能测试.7 3.4 会议应用测试.8 3.4.1 音视频质量测试.8 3.4.2 会议功能测试（包含双流测试）.14 3.5 厂商特色功能测试.20 3.6 测试结果统计.21 一、测试概要一、测试概要 1、 高清/标清视频会议声音及图像质量测试 2、 高清/标清视频会议系统稳定性和功能测试 3、 高清/标清视频会议双流效果测试 4、 软终端视频会议声音及图象质量测试 5、 软终端视频会议稳定性、易用性、功能测试 6、 软终端视频会议双流效果测试 7、 视频会议系统对网络适应性（如混合各种网络条件会场的测试） ，对网络防火 墙的穿越测试 二、测试环境和测试设备二、测试环境和测试设备 测试时间测试时间： 测试地点测试地点，主会杨： 第一分会场： 第二分会场： 测试网络：测试网络： 测试设备列表测试设备列表 设备类型安装地点设备品牌设备型号备注 MCU 主会场 Tandberg4500 1 台 通信服务器主会场 TandbergVCS 1 台 管理服务器主会场 TandbergTMS 1 台 高清终端主会场 TandbergC60 1 台 高清终端第一分会场 Tandberg C20 1 台 标清终端第二分会场 TandbergEdge95 MXP 1 台 软件终端各会场 TandbergMonvie 2 每个会场 1 台 三、测试内容和方法三、测试内容和方法 3.13.1 系统平台可靠性测试系统平台可靠性测试 测试目的：测试各厂家的系统平台的可靠性。 测试项目测试项目 1 1MCU 设备可靠性测试 测试方法和 步骤描述 观察 MCU 具体形态。 打开 MCU 机箱，确认基本 DSP 芯片型号 召开一个会议，然后把 MCU 断电重起，观察是否正常工作，并记 录时间 原来进行的会议是否可以正常恢复？ MCU 类型插卡式 一体式 MCU 架构基于硬件 DSP 架构 基于 PC 架构 DSP 芯片型号 操作系统嵌入式操作系统 windows 操作系统 断电重起工作正常 不正常 重起时间（秒）： 会议恢复正常恢复 未能恢复 测试项目测试项目 2 2终端设备可靠性测试 测试方法和 步骤描述 观察终端的形态，登陆终端，确定其操作系统。 把主会场的终端多次断电重起，观察是否正确恢复，并注册到 GK 上，记录多次恢复时间； 终端类型专用硬件 基于 PC 终端架构分体式 一体式 备注： 3.23.2 系统平台安全性测试系统平台安全性测试 系统平台安全性测试，主要集中在两个方面，一个是每一台设备的安全性，另一 个是网络和应用层面的安全机制。 操作系统嵌入式操作系统 windows 操作系统 断电重起工作正常 不正常 重起时间（平均秒）： 测试项目测试项目 1 1终端设备安全性测试 测试方法和 步骤描述 登陆终端，确认只有正确的用户名密码才能接入。 在终端上，是否可以设置登陆密码； 确认终端上是否可以关闭非必要的服务，如 FTP，HTTP，telnet，SNMP 等服务 召开一个会议，确认终端在 H.264 协议下支持 AES 内容加密 安全密码支持 不支持 登陆密码设 置 支持 不支持 服务关闭支持 不支持 部分支持 包括： AES 加密支持 不支持 测试项目测试项目 2 2GK 平台设备安全性测试 测试方法和步骤测试方法和步骤 描述描述 1. 登陆 GK，确认只有正确的用户名密码才能登陆。 2. 在 GK 上，是否可以修改登陆密码； 3. 启用 H.235 用户名密码认证功能，在一台终端上配置 用户名密码，确认只有正确的用户名和密码才能注册 到 GK 平台上。 3.33.3 系统管理功能测试系统管理功能测试 安全密码支持 不支持 登陆密码设置支持 不支持 H.235 认证支持 不支持 测试项目测试项目 3 3MCU 设备安全性测试 测试方法和 步骤描述 登陆 MCU，确认只有正确的用户名密码才能接入。 在 MCU 上，是否可以可以定义多级用户权限及用户名和密码； 确认 MCU 上是否可以关闭非必要的服务，如 FTP，HTTP，telnet，SNMP 等服务 召开一个会议，设定会议密码，终端呼叫 MCU，确认只有正确输 入会议密码的用户才能加入会议。 确认刚才开启的会议，启用了 AES 内容加密 安全密码支持 不支持 多级用户权 限定义 支持 不支持 服务关闭支持 不支持 部分支持 包括： 会议密码支持 不支持 AES 加密支持 不支持 测试项目测试项目 1 1设备管理系统测试 测试目的测试目的测试各厂家的设备管理方式和效果。 3.43.4 会议应用测试会议应用测试 测试准备： 测试厂家用高清 MCU，建立一个混速混协议会议（H.323 和 SIP 协议） ，具备 AES 加密和双流功能，会议分屏模式设置为 7+1 分屏（如没有，可采用其他 测试方法描述测试方法描述 1、 各厂家展示对 GK、终端和 MCU 等主要设备的管理方式， 观察管理工具是集中式管理系统，还是登陆每一台设备， 每次进行单台设备管理； 2、 人为修改一台分会场终端注册 GK 信息，导致分这台终 端注册失败，观察管理界面上是否有设备告警； 3、 观察管理平台是否可以以拓扑图的形式动态显示所有设 备状态。 4、 在管理平台上设置统一号码簿，然后下发到所有终端， 检查终端的号码簿是否合管理平台一致。 5、 观察管理平台的设备信息日志，是否能直接导出成文件 打印 管理方式集中管理系统 单台设备管理 备注： 管理界面WEB 专用 中文 英文 备注： SNMP 协议支持 不支持 备注： 设备远程维护支持 不支持 备注： 实时告警支持 不支持 备注： 动态状态拓扑 图 支持 不支持 备注： 统一号码簿支持 不支持 备注： 设备信息日志支持并可以导出打印 支持 不支持 备注： 一个大主屏+多个小分屏的分屏模式，以下同） ，且具备语音激励功能； MCU 用 2.5M 呼叫主会场高清终端，用 2.5M 呼叫第一分会场高清终端，用 1.5M 呼叫第二分会场高清终端，用 768k 呼叫软件终端； 为了方便统计和评分，各会场名称固定设置为“主会场” 、 “第一分会场、 “第 二会场” 、 “软件终端” 。 测试平台对网络的适应性（不同呼叫带宽下的效果评分和统计） .1 音视频质量测试音视频质量测试 高清 MCU 同时呼叫高清终端，软件终端；进行混速、混协议通讯测试。目的：视频 会议的视频质量。 测试项目测试项目 1 1会议分屏下的视频清晰度、色彩还原度和流畅度测试 测试目的测试目的测试会议多分屏模式下视频清晰度、色彩还原度和流畅度。 测试方法和测试方法和 步骤描述步骤描述 1、 在刚刚建立的会议中，把主会场设定为 7+1 分屏中的大画面 2、 主会场镜头设定为全景会场，从主会场观看主会场图像是否 清晰，色彩还原是否正常； 3、 把主会场测试人员图像放大，观看测试人员的图像是否足够 清晰，色彩还原是否正常； 4、 主会场测试人员快速挥手、大范围走动，观看远端图像的连 续性和流畅度； 5、 观察主会场的图像有无马赛克，是否存在闪烁和抖动现象。 6、 再把分会场高清设定为 7+1 分屏中的大画面，重复 2-5。 图像清晰度 色彩还原度 图像流畅度 图像马赛克 各会场 根据现 场观测 结果评 分，0 为 效果最 差，100 为最佳 有无闪烁抖 动 测试项目测试项目 2 2会议声音质量测试 测试目的测试目的测试会议音视频同步、声音质量、声音延迟和多方混音。 测试方法描测试方法描 述述 1. 第一分会场测试人员缓慢拍巴掌，其他会场观察声音和图 像同步； 2. 第一分会场测试人员场围绕麦克风走动读报纸，检查声音 清晰度 3. 主会场和第一分会场来回报数（主会场报 1，1.5M 分会场 在听到后报 2，然后主会场听到 2 的再报 3，这样来回报 数到 10）的方式检查声音时延。 4. 所有会场打开麦克风，随机进行语音交流，检查多方混音 效果。 音视频同步 声音质量 声音延迟 多方混音效 果 分屏语音激 励 灵敏度 各会场 根据现 场观测 结果评 分，0 为 效果最 差，100 为最佳 测试项目测试项目 3 3手机干扰测试 测试目的测试目的测试会议是否会受到手机干扰。 测试方法描测试方法描 述述 1. 不中断刚才的会议 2. 测试人员在视讯终端附近拨打手机 3. 各会场观察是否受到影响 本地会场视 频效果 没有下降 有轻微下降 严重下降 本地会场音 频效果 没有下降 有轻微下降 严重下降 远端会场视 频效果 没有下降 有轻微下降 严重下降 远端会场音 频效果 没有下降 有轻微下降 严重下降 测试项目测试项目 4 4全屏会议视频清晰度、色彩还原度和流畅度测试 测试目的测试目的测试各远端会场的视频清晰度、色彩还原度和流畅度。 测试方法描测试方法描 述述 1、 不中断刚才的会议，切换为全屏模式。 2、 广播分会场高清图像，主会场和其它分会场观看； 3、 分会场高清图像设定为全景会场，观看整体效果是否清晰， 色彩还原是否正常； 4、 把高清分会场测试人员图像放大，观看测试人员的图像是否 足够清晰，色彩还原是否正常； 5、 测试人员快速挥手、大范围走动，观看远端图像的连续性和 流畅度； 6、 广播主会场图像，重复 2-5。 是否断会需要断会，重新组会 不需要断会 图像清晰度 色彩还原度 图像流畅度 各会场 根据现 场观测 结果评 分，0 为 效果最 差，100 为最佳 图像马赛克 有无闪烁抖 动 备注： 测试项目测试项目 5 5会议系统稳定性测试 测试目的测试目的测试单路图像质量下降会不会导致其他路图像质量下降 测试方法描测试方法描 述述 1、 不中断刚才的会议，使用全屏模式。 2、 广播其中一个分会场高清图像，主会场和其它分会场观看； 3、 将另一个高清分会场的呼叫挂断，用 MCU 用 384K 的带宽重 新将这个会场的终端呼叫入会 4、 观测之前广播的第一个高清分会场的图像质量是否下降 是否断会断会，要重新组会 不断会 图像质量是 否下降 没有下降 有轻微下降 严重下降 备注 测试项目测试项目 6 6高清终端多种呼叫带宽下会议分辨率测试 测试目的测试目的 测试高清终端在各种呼叫带宽下的视频清晰度、色彩还原度和流 畅度。 测试方法描测试方法描 述述 1、 不中断刚才的会议，使用高清分屏模式，采用 7+1 分屏或类 似一大多小分屏。 2、 MCU 分别使用 2M、2.5M、3M、4M 呼叫第一分会场(发改委)高 清终端。 3、 广播这台分会场终端图像，主会场和其它分会场观看； 4、 观看整体效果是否清晰，色彩还原是否正常，并记录下图像 的分辨率； 5、 把第一分会场测试人员图像放大，观看测试人员的图像是否 足够清晰，色彩还原是否正常； 6、 测试人员快速挥手、大范围走动，观看远端图像的连续性和 流畅度； 是否断会需要断会，重新组会 不需要断会 4M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 评分： 3M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 评分： 2.5M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 评分： 2M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 评分： 备注 测试项目测试项目 7 7标清终端多种呼叫带宽下会议分辨率测试 测试目的测试目的 测试标清终端在各种呼叫带宽下的视频清晰度、色彩还原度和流 畅度。 测试方法描测试方法描 述述 1、 不中断刚才的会议。 2、 MCU 分别使用 384K、512K、768K、1M、2M、呼叫第二分会场 终端。 3、 广播这台分会场终端图像，主会场和其它分会场观看； 4、 观看整体效果是否清晰，色彩还原是否正常，并记录下图像 的分辨率； 5、 把分会场测试人员图像放大，观看测试人员的图像是否足够 清晰，色彩还原是否正常； 6、 测试人员快速挥手、大范围走动，观看远端图像的连续性和 流畅度； 是否断会需要断会，重新组会 不需要断会 2M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 1M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 768K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 512K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 384K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 测试项目测试项目 8 8软件终端在多种呼叫带宽下会议分辨率测试 测试目的测试目的 测试标清终端在各种呼叫带宽下的视频清晰度、色彩还原度和流 畅度。 .2 会议功能测试（包含双流测试）会议功能测试（包含双流测试） 测试方法描测试方法描 述述 1、 不中断刚才的会议。 1、 MCU 分别使用 384K、512K、768K、1M、2M、呼叫第软件终端。 2、 广播这台分会场终端图像，主会场和其它分会场观看； 3、 观看整体效果是否清晰，色彩还原是否正常，并记录下图像 的分辨率； 4、 把分会场测试人员图像放大，观看测试人员的图像是否足够 清晰，色彩还原是否正常； 5、 测试人员快速挥手、大范围走动，观看远端图像的连续性和 流畅度； 是否断会需要断会，重新组会 不需要断会 2M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 1M 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 768K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 512K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 384K 清晰 流畅 色彩正确 马赛克 闪烁 图像格式： 测试项目测试项目 1 1MCU 会议控制功能测试 测试目的测试目的 测试 MCU 对会议分屏功能，对与会者操控，以及中文显示等常 用功能的支持能力 测试方法和步测试方法和步 骤描述骤描述 1、不断会，把会议切换为全屏语音激励模式； 2、按顺序广播主会场和各分会场； 3、各会场观察其他会场的中文会场名称是否正确显示； 4、向所有会场发送一个中文字幕，看看各会场是否正 确接收到 5、把会议分屏设置按顺序为 4、5+1、9、16 和 7+1 分 屏模式； 6、观察各分屏模式下各会场的中文名称是否正确显示； 7、对分会场进行静音和闭音，看看对分会场的声音操 作是否生效； 8、设置禁止分会场自主发送双流和改变分屏模式，观 察是否生效 全屏下的中文 会场名 正确显示 乱码 无显示 分屏下的中文 会场名 正确显示 乱码 无显示 中文字幕功能 正确显示 乱码 无显示 各种分屏模式 切换 无需断会正常 需要断会 分屏模式( )种 最大（ ）分屏 会场静音、闭 音 支持 不支持 备注： 禁止分会场发 送双流 支持 不支持 备注： 禁止分会场更 改分屏 支持 不支持 备注： 测试项目测试项目 2 2会议对话模式测试（语音激励） 测试目的测试目的测试系统对主会场和分会场对话模式的支持。 测试方法描测试方法描 述述 1、不中断前面的会议； 2、设置主会场为 2+4 分屏，即主会场和对话分会场为 2 个大画 面，其他分会场为小画面，各分会场为 2 分屏，即显示主 会场和对话分会场； 3、主会场发言，然后第一分会场、第二分会场、软件终端分别 发言，主会场的 2 个大画面是否正常显示主会场和发言分 会场，各分会场是否看到主会场和发言分会场的 2 分屏 是否断会需要断会，重新组会 不需要断会 主会场 2+4 分屏是否正 确 正常 不正常 备注： 分会场 2 分 屏是否正确 正常 不正常 备注： 测试项目测试项目 3 3双流功能测试（主要用于培训、讨论等应用） 测试目的测试目的测试系统对 H.239 双流功能的支持和质量。 测试方法描测试方法描 述述 1、不中断前面的会议，主会场发送 PPT 双流； 2、其它分会场观察是否收到双流，双流 PPT 是否清晰，翻页是 否流畅； 3、然后选择一个分会场发送双流，主会场和其它分会场观察是 否收到双流，双流 PPT 是否清晰。 4、不中断会议，主会场电脑放视频，测试动态视频双流效果。 是否断会需要断会，重新组会 不需要断会 图像清晰度 12345 色彩还原度 12345 各会场 根据现 场观测 结果评 分，1 为 效果最 差，5 为 最佳 图像流畅度 12345 图像马赛克 12345 有无闪烁抖 动 12345 测试项目测试项目 4 4分组会议测试 测试目的测试目的 测试 MCU 对分组会议的支持，尤其是高清分屏分组会议中音视 频质量、相互干扰等。 测试方法描测试方法描 述述 1. 不中断刚才的会议，再建立一个新会议，会议功能具备混 速混协议、AES 加密和双流功能； 2. 在原会议中把主会场、一个标清会议室分配到新建会议中， 高清分会场和其它分会场仍然保持在原会议中； 3. 在新建会议中，会议进行全屏和各种分屏模式切换，主会 场和高清分会场观察各自会议的图像质量。 4. 再把两个会议合并到原有会议中。 动态分组可以动态分组不断会 需要断会再分组 会议间干扰分组间音视频无干扰 分组间存在干扰 视频清晰度 1