上海联通OTN汇聚环设备升级方案20141107-8

1、上海联通OTN汇聚环设备软件版本升级方案文档密级：用户公开上海联通OTN汇聚环设备软件版本升级方案网络管理中心传输网支撑处目 录一、升级目的3二、升级内容3三、升级时间和人员安排4四、升级前的准备5五、升级步骤5六、升级后的业务测试验证23七、升级风险预测及应对措施24八、附件：版本降级操作24一、割接背景 1. 升级目的上海联通华为传输OTN汇聚环OSN6800、OSN8800设备存在R4和R5版本，存在组网保护失效问题。现建议升级统一至稳定维护版本R6。 2. 升级内容2.1 涉及的局点和设备涉及上海联通华为城域波分系统，9套OSN 6800设备和93套OSN 8800。具体局点信息及网元

2、数量及见下表： 所属子网网元/子架数量目前软件版本汇聚环11748网元/73子架5.51.06.14其它链及汇聚节点54网元/54子架5.51.06.142.2 涉及的软件描述升级后对应的软件版本详细信息描述见下表：2.3 升级业务影响情况a、本次升级影响在用业务，升级过程中0点至6点均会断续出现35分钟的业务中断。b、中断业务相关操作，复位单板，部分单板属于软复位操作，不影响电路；更新了FPGA的需硬复位单板影响电路3-5分钟。二、割接对网络、业务的影响：网络影响分析：对设备、链路所在网络的影响情况、网络保护情况详细说明；具体参见附件：三、配合部门和事项序号配合部门配合人员配合事项配合文档注

3、意：1、“配合部门”：格式二级/三级，如：网管/传输 2、“配合事项”：如有配合部门，配合事项必填。4、 割接准备工作及分工 1. 升级时间和人员安排 1.1 时间安排为了尽量减小对网络的影响，建议升级分10次进行，同一环网上的所有网元安排在同一次升级，具体安排如下：第1次，6月25日0:3006:00，汇聚环16、汇聚环17；涉及设备如下：15152-唐镇、15153-新场、15155-周浦、15154-宝山万达、15157-六里、15262-金桥、15261-江场、15156-包头第2次，7月22日0:3006:00，汇聚环13、汇聚环15；涉及设备如下：11336-新时空、11335-创

4、展、10901-新长宁、11338-市北、12841-中鑫国际、15354-闸北芷江、12842-虹口宝华、12843-黄埔金天地、12777-市北、10906-新黄浦第3次，7月30日0:3006:00，汇聚环12、汇聚环14涉及设备如下：11332-朱泾、12847-奉贤海湾、11333-奉城、11334-临港新城、11340-漕河泾、12835-七宝、12836-徐汇华京、12837-卢湾斜土第4次，8月30日0:3006:00，汇聚环7、汇聚环9涉及设备如下：10930-普陀、12929-江苏、10928-亚都、10895-市北、10902-漕河泾、11326-江桥、11325-马陆、

5、11324-顾村第5次，8月20日0:3006:00，汇聚环11、汇聚环10涉及设备如下：11331-宏南投资、11330-海运、11337-金桥、11339-乐凯、11328-重固、11329-松江宝胜、11327-紫竹园第6次，9月3日0:3006:00，汇聚环5、汇聚环6涉及设备如下：12848-复旦、10923-杨浦隆昌、10924-虹口商城、10925-锦森欧洲、10904-包头、10926-黄浦新昌、10927-卢湾复兴第7次，10月19日1:0006:00，汇聚环3，汇聚环2涉及设备如下：10916-南汇、10917-奉贤南桥、10918-浦江、10899-金桥、10905-六里

6、、10912-长江口、10913-罗店、10914-嘉定、10915-安亭第8次，11月19日0:3006:00，汇聚环1、汇聚环4涉及设备如下：10908-虹桥枢纽、10909-青浦、10910-松江、10911-莘庄、10919-外高桥、10920-川沙、10921-张江、10922-三林、11291-江场、12834-金桥1.2 人员安排上海联通：区旻晔为公司：林阳华为升级、网管侧责任人； 2. 升级前的准备2.1 信息收集1）查询各网元主机软件、单板软件、单板FPGA，确认需要升级的部分。2）查询设备运行情况，尽量消除设备存在的异常告

7、警，否则可能导致升级中产生回滚或业务中断。3）进行升级安全性检查，消除检查项中提示的那些对升级过程或业务的可能的影响。4）为防止配置丢失，使用网管备份网元数据库数据，并将设备配置数据备份至主控板。2.2 升级软硬件、工具的准备准备好升级工具DCV1R2版本，Navigator6.2以上版本，OSN6800和OSN8800设备5.51.06.14及5.51.07.37版本软件包。华为公司备件中心准备好相应备件：TN52SCC、TN52XCH、TN52NS3、TN52TQX、TN52TDX、TN11M40V/D40、TN12OLP、TN12OBU、TN12OAU、TN12SC2、TN13FIU、T

8、N52AUX、TN11AUX、TN55NPO2、TN55ENQ2、TN11BMD4各一块。2.3 后勤保障专用车辆1辆。5、 割接程序和实施步骤 1. 升级步骤 1.1 升级路径源版本目标版本OSN 6800 V100R005C00SPC800OSN 6800 V100R006C01SPC500OSN 8800V100R005C00SPC800OSN 8800 V100R006C01SPC5001.2 升级各步骤的时间安排及对业务影响操作项目时间段注意事项创建任务0弹出“文件传输服务状态”对话框，可忽略此消息。0无0无0一定要在"执行步骤前停止"配置项中，将"激活

9、"操作对应复选框勾上，在激活时暂停。0若不设置任务开始时间，则在任务创建、配置完成之后需手动开启升级任务执行。升级前检测0无备份0备份成功后，网管U2000将在“文件传输服务根目录”对应的根目录下创建如下目录：backup/NE-ID/ yymmddhhmmss/dbf.pkg。其中NE-ID表示网元ID，yymmdd表示年月日，hhmmss表示备份时间。加载软件、分发0无0分组可参考章节Error! Reference source not found.Error! Reference source not found.。网关网元和非网关网元不能分在同一组内，否则可能会使非网关网元

10、在激活过程中脱管导致升级失败。0 无0无0无0无0如果在步骤5中设置了任务开始时间，可以跳过此步骤。0无备份数据库到主控单板0在执行章节Error! Reference source not found.Error! Reference source not found. 操作时不需要执行0。激活、提交和升级后检测0如果“激活”、“提交”在“执行步骤前停止”复选框中选中，要人工选择“继续任务”。0无1.3具体操作步骤1)、升级操作前的准备工作a、 如果网络的DCN监控信道没有联通或是质量差（现象为：上载网元数据经常超时，查询比较大的数据很慢易超时等）需要到将DCN监控信道调通或是处理正常后再远

11、程升级，也可以到进机房到网元旁边升级。b、 使用附件中的脚本在升级的网元上运行一次。Navigation采用6.2版本。c、 包加载前请先使用下述办法检查主备主控板的CF卡大小是否一致。1、 使用下述命令行查询主主控板和备主控板的CF卡规格容量大小。:sftm-get-freespace:18,"cfs1"/18为主控板板位，其他槽位主控板需要修改此参数 RESULT-INFO BOARD_ID DEV_NAME FREE_SPACE 18 cfs1 126191616 Total records :1 数字126191616单位为字节，换算为M约为126191616/10

12、24/1024=120M，表明该CF卡规格容量为256M，如果查询上来的剩余空间大于256M，表明该CF卡规格容量为1G。2、 使用下述命令行查询主备主控状态。:hsc-get-work Work-Status : 18 Good 17 Good 板位在前的为主主控板，板位在后面的为备主控板。3、 根据1查询得到的CF规格容量大小采取相对应的处理措施。a、如果两个主控板中的CF卡规格容量大小一致，则不需要做任何处理。b、如果主主控板中的CF卡规格容量比备主控板中的CF卡规格容量小，也不需要做任何处理。先做主备主控倒换，再进行包加载操作。c、如果主主控板中的CF卡规格容量比备主控板中的CF卡规格

13、容量大，则需要先做主备主控倒换，再进行包加载操作。d、 如果网元主子架有主备主控板要确认主备主控板板类型配置一致。不能出现混配情况，例如TN11SCC和TN51SCC做主备主控板，必须是TN11SCC和TN11SCC配合做主备主控板或必须是TN51SCC和TN51SCC配合做主备主控板。e、如果网元主子架有主备主控板要使用下述命令确认主备主控板状态正常。查询包加载状态是否正常。:sftm-rtrv-state:swdl SFTM_RTVE_STATE CPY_TYPE MAIN_STATE SUB_STATE swdl NORMAL NORMAL Total records :1 注意：双NO

14、RMAL才正常，如果SUB_STATE对应的状态为UNSTABLE需要等待约5分钟再查看是否正常。:hbu-get-backup-info Backup-Info : 0x00000003注意：0x00000003表示主备备份状态为正常。2)、升级具体操作步骤1、进入网管T2000界面，选择主菜单“系统 > 网元软件管理 > 网元数据备份/恢复”。由于OSN 8800_6800_3800 设备不采用SFTP，TFTP协议服务。若是初次执行升级功能，在步骤1会出现以下对话框可点击“确定”直接忽略此消息。步骤2、在网管T2000的“网元视图”中，为待升级设备创建升级任务。在对应设备选项

15、上单击鼠标右键，在弹出菜单中选择“新建任务 > 包升级任务”。步骤3、在弹出对话框中为任务定义“任务名称”，选择相应的“网元类型”和“网元版本”，同时选择任务所需要包含的升级网元。点击“下一步”进入下一配置阶段。步骤4、为创建的升级任务进行操作步骤设置。请将所有操作步骤都勾选。一定要在“执行步骤前停止”配置项中，将“激活”操作对应复选框勾上，在激活时暂停。l “升级前检测”， “升级后检测”不是必需选项，但为保证对升级过程的安全、正确性进行监控，以及方便出现异常后的信息查询，推荐勾选此两项操作步骤。l “备份”操作是备份网元上保存的网元数据库，此操作与异常后的回滚操作无必然联系。l “升

16、级前检测”， “升级后检测”， “备份”以外的其他备选项均为必需操作，请勾选，否则将可能导致升级失败。l 后续的配置步骤需要点击“操作配置”栏中的对应项来进行操作。例如： l “分发”，“提交”操作无配置项，不需要点击后进行配置。l “执行步骤前停止”配置项，勾上表示在执行到这一操作时，会在此操作处暂停，需要人工选择继续操作，才能继续执行此步骤操作。l 对于网关网元，选择“如果待加载网元是网关网元，强制选择FTP协议加载”配置项，强制使用FTP协议，提升加载速度，非网关网元还是使用华为文件传输协议。步骤5、（可选）设置任务开始时间。若不设置任务开始时间，则在任务创建、配置完成之后需手动开启升级

17、任务执行。步骤6、点击步骤4中的蓝色链接字体“配置前检测项”，配置升级前检测的“检测项”，点“确定”。“升级前检测”和“升级后检测”设置对话框中的“告警”是要进行异常告警检查操作， “健康状况”是要进行运行性能检查操作。步骤7、点击步骤4中的蓝色链接字体“配置备份信息”，进入“配置备份操作”界面，选择“数据库包”，点“确定”。备份成功后，网管T2000将在“文件传输服务根目录”对应的根目录下创建如下目录：backup/NE-ID/ yymmddhhm。mss/dbf.pkg。其中NE-ID表示网元ID，yymmdd表示年月日，hhmmss表示备份时间步骤8、点击步骤4中的蓝色链接字体“软件包配

18、置”，选择加载软件包。点按钮。选择预先准备好存放于网管T2000服务器的软件包里的.PKG文件，点击“确定”。步骤9、点击步骤4中的蓝色链接字体“配置激活信息”，配置激活组。激活分组策略：在尽量不影响现有业务需求的基础上，缩短激活时间。当超过2个网元时，支持分组激活，默认分组是以一个网元为一组。以3个网元为例对分组激活进行描述。对于分组的操作包括：新建、删除、设备的上移和下移。分组可参考章节Error! Reference source not found.Error! Reference source not found.。网关网元和非网关网元不能分在同一组内，否则可能会使非网关网元在激活过

19、程中脱管，导致升级失败A、新建组。步骤(1) 点击按钮来创建的分组。步骤(2) 选择需要同时激活的设备，点击“确定”。被选中的设备被划分为同一组，同一组的设备将同时被激活。B、设备的上移动或下移动。通过向上或向下可以将设备移到上一组或下一组。操作步骤：选中要移动的设备，点击或按钮。C、删除组。步骤(1) 若要删除组，选中要删除的组点击按钮。步骤(2) 弹出提示框，点击“是(Y)”。步骤(3) 被删除组中的所有设备，都被分到相邻的下一组中。步骤10、（可选）设置激活时间。l 步骤4，“激活”对应的“执行步骤前停止”配置项可以勾选，用户可以根据需要选择激活前暂停或不暂停任务。l 步骤5的“激活前暂

20、停”和步骤10的“最初激活时间”不可同时设置。l 如果设置步骤5的“激活前暂停任务”，分发步骤结束后，任务将会暂停，需要选中任务点击右键，选择“继续任务”，开始激活步骤。l 对于设置了激活时间，分发步骤结束后，仍未到达激活时间，任务将自动暂停，待到达激活时间，激活步骤将自动开始（等待激活开始过程，不可手工开始激活操作）。l 设置激活时间的任务，到达激活时间，分发步骤仍未完成，分发步骤结束后，将自动执行激活步骤。l 对于没有设置激活前暂停和激活开始时间的任务，分发步骤结束后，将立即自动开始激活步骤。步骤11、点击蓝色链接字体“配置后检测项”，配置升级后检测的“检测项”，点击“确定”。步骤12、确

21、认升级任务配置信息。在弹出如下对话框后核对升级任务的所有配置信息，若需要修改，则点击“上一步”返回到步骤4界面，修改任务配置。任务一旦开始了配置项就不能被修改，所以请在点击“确定”前，检查各配置项。步骤13、确认配置正确后，单击“确定”完成任务配置操作。步骤14、手动开启升级任务执行。若执行了0，设置了任务开始时间，则可以跳过此步骤。在待升级资源项上单击鼠标右键，在弹出菜单中选择“开始任务”。弹出如下对话框，点击“是(Y)”按钮确认继续操作。步骤15、升级过程执行。在升级过程中可显示当前任务的总升级进度和当前处于的升级阶段及本阶段的执行进度。l “升级前检测”阶段操作状态为失败时，请确认当前网

22、络连接是否适合升级，并请现场工程师排查相关异常。可不做回滚操作，重新进入Error! Reference source not found.Error! Reference source not found. 检查升级前各项准备工作。l “备份”阶段操作失败，请现场工程师排查异常后重新升级。l “加载软件”，“分发”，“激活”，“提交”阶段操作失败，请参考Error! Reference source not found.Error! Reference source not found.。请确认目标文件是否正确，请现场工程师排查异常后重新升级。l “升级后检测”阶段操作状态为失败时，请确认当

23、前网络连接是否适合升级 ，并请现场工程师排查异常。l 升级过程中如果遇到异常，请参考章节Error! Reference source not found.Error! Reference source not found.。步骤16、分发完毕后，由于在0中，“激活”对应的“执行步骤前停止”配置项被勾选，分发完成后，任务会停止，然后手动备份数据库到主控单板。选择“配置 > 网元配置数据管理”。在图中左边的“物理视图”树选择要备份数据库的网元，并点。在右边的“配置数据管理列表”会显示处对应的网元。选中备份的网元，选择“备份网元数据 > 备份数据库到主控板”。弹出“确认”对话框，点“确

24、定”。 弹出“操作结果”对话框，点“关闭”。等待网管上显示“操作成功”后，还需要等待5分钟，设备才可完成数据库的备份。步骤17、由于在步骤4中，“激活”或“提交”对应的“执行步骤前停止”配置项被勾选，分发完毕后，任务停止，此时需要选中任务点击右键，选择“继续任务”。步骤18、确认升级完成。当所有操作步骤完成后，查看所有“操作状态”是否为“成功”。注意：在从老版本升级到OptiX OSN 8800 V100R002C02SPC800或者 OptiX OSN 6800 V100R004C04SPC800的过程中，新增了包加载容错功能：在激活过程中存在激活失败的单板，会出现升级任务暂停，需要用户根据

25、具体的业务配置影响决定继续激活还是回滚网元。具体流程如下：a、网元存在激活失败单板，升级任务挂起。b、出现上述情况后，需要在网元上点击“右键”，选择“查询”，在弹出对话框中，点击“显示查询结果”按钮。操作成功后，点击“关闭”。在接下来的界面显示当前失败的单板列表。c、根据显示的单板列表，用户判断这些单板是否存在保护组关系，是否影响业务。如果激活失败单板影响业务，在右键弹出菜单中选择“回滚”，该网元会回退到升级前的版本；如果激活失败单板不影响业务，则在右键弹出菜单中选择“忽略”，继续激活网元。网元升级成功后，会对失败的单板进行自动匹配，匹配时间视当前失败单板个数而定（假定为N个），按每块单板3分

26、钟计算，需要等待N * 3 分钟后，再查询匹配后的单板版本信息，确保当前运行的版本和目标版本一致。若单板无法正常匹配，请联系维护组升级接口人处理。-结束附录：包加载状态变迁图表:sftm-rtrv-state:swdl ; #查询加载状态CPY_TYPEMAIN_STATESUB_STATE说明可操作命令swdl NORMALNORMAL正常态：可以进行包加载。:copy-rfile:/拷贝文件，使用DC加载。swdl CPY_FILE_STARTNORMAL拷贝阶段：拷贝文件开始态swdl CPY_FILE_ENDNORMAL拷贝阶段：拷贝文件结束态:swdl-dnld-swmem;/分发s

27、wdl CPY_MEM_STARTNORMAL分发阶段：分发开始态swdl CPY_MEM_ENDNORMAL分发阶段：分发结束态:mon-init-sys:0, swdl;/激活swdl ACTIVEACTIVE_NE激活阶段：激活态swdl ACTIVATEDNORMAL激活阶段：激活结束态:swdl-commit-swmem; /提交swdl COMMITTINGNORMAL提交阶段：正在进行提交操作swdl ROLLBACKNORMAL回滚阶段swdl NORMALUNSTABLE不稳定态，一般等待5-10分钟即恢复正常态。swdl NORMALAUTOSWDL匹配阶段：新插入的单板正

28、在自动匹配加载软件。/下面是一个查询的结果示例:sftm-rtrv-state:swdl SFTM_RTVE_STATE CPY_TYPE MAIN_STATE SUB_STATE swdl NORMAL NORMAL Total records :1 六、测试方案及业务确认步骤首先，华为升级人员再次按照升级前的网络情况检查网络，并进行相关保护倒换测试、交叉板倒换测试，然后需要东方有线维护人员负责联系各业务部门确认业务。序号检查项目操作命令检查标准1主机和单板版本核对：ver或使用网管查询检查软件版本和配套表是否一致.2网元告警核对:alm-get-curdata:0,0或用网管查询 

29、;没有新增的异常告警3网管一致性校验使用网管网管与网元一致性校验成功。4网元性能检查使用网管各项性能值相对于升级前没有异常变化5主机、单板复位记录检查:errlog;:mon-get-errlog:bid;无异常的复位记录6数据库一致性检查:dbms-compare-all:drdb,mdb;:dbms-compare-all:drdb,fdb0;:dbms-compare-all:drdb,fdb1; 四个数据库经比较一致7同用户确认升级后业务是否正常配合用户进行检查 各项业务正常 如果升级过程中出现异常情况，04:00还没有解决，应立即恢复：使用备件直接更换，

30、如果是主控板，需要下发配置数据。七、割接应急方案序号风险描述应对措施1升级过程中出现问题，在该步骤的时间段内没有解决应停止下面的升级计划，在保证业务正常的情况下，进行问题查找、定位，直到解决，再执行下一步。2加载后主机进入安装态使用U2000网管进行数据配置下载。3升级过程中单板故障提前准备好相应备件更换。4在4:00升级还没有完成应停止升级，根据实际情况确定是否需要执行步骤7。5其它紧急情况为保证升级过程的顺利实施，应与华为公司研发人员直接联系，寻求最快的支援。8、 割接负责人、相关实施人员名单及联系方式上海联通：区旻晔为公司：林阳华为升级

31、、网管侧责任人；九、附件：版本降级操作执行降级操作时，数据库必须清除，业务无法保留，否则可能导致网元无法正常启动。为了保证降级成功，并且降级后网元可用，降级前和降级后必须进行清库操作。清库操作使用Navigator工具完成，不允许使用FTP直接删除数据库。TN11TBE和TN11L4G需要手工降级，操作步骤如下：在软件降级前 ，先将高版本TN11TBE和TN11L4G单板软件降级到低版本。(1) FTP登录单板目录：通过内网口ftp:/192.168.XXX.YYY。XXX：是子架编号，YYY：单板板位(2) 要求删除ofs2下的hwx和fpga文件夹；(3) 上传低版本软件；l TN11L4

32、G:BD_5G.hwx、ne.ini、EXTBIOS.HWX到ofs1hwx下；上传逻辑OTU_5G.pga、pl247.pga到ofs1fpga下；l TN11TBE: bd_5g.hwx、ne.ini、extbios.hwx到ofs1hwx下；上传逻辑OTU_5G.pga到ofs1fpga下；(4) 进行硬复位，待稳定后再做降级操作。(5)TN11TBE和TN11L4G手工降级过程，业务将会断。检测当前告警，确保没有影响软件降级的告警。备份网元数据数据库。Error! Reference source not found.。备份成功后，在指定目录下会生成一个dbf.pkg文件。如果备份失败

33、，网元状态将显示“挂起态”。开始降级，做“升级前检测”，“备份”，“加载软件”和“分发”，参考升级0到0，在“激活”时停止。此步骤要注意，在参考0时，一定要在激活选项处勾上“执行步骤前停止”。在“激活”前，使用Navigator工具清除网元数据库。1. 先禁止数据库自动备份和数据库周期备份:dbms-set-autobackup:disable;:dbms-set-cyclebackup:disable;2. 使用如下命令，清除主主控板上的数据库：如果是OptiX OSN 6800_3800 V100R004C01之前的版本，请运行以下命令：:dbms-delete-database:all，

34、drdb，master;:dbms-delete-database:all，fdb0，master;:dbms-delete-database:all，fdb1，master;如果是OptiX OSN 6800_3800 V100R004C01以及之后的版本，请运行以下命令：:dbms-delete-database:all，drdb，master;:dbms-delete-database:all，fdb，master;3. 若当前网元还存在备主控板，接着执行如下命令：如果是OptiX OSN 6800_3800 V100R004C01之前的版本，请运行以下命令：:dbms-delete-database:all，drdb，slave;:dbms-delete-database:all，fdb0，slave;:dbms-delete-database:all，fdb1，slave;如果是OptiX OSN 6800_3800 V100R004C01以及之后的版本，请运行以下命令：:dbms-delete-database:all，drdb，slave;:dbms-delete-database:all，fdb，slave;dbms-delete-