HBASE安装部署、参数设置、备份恢复、监控规范.doc

中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 1 / 29 袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄 袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀 艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅 蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅 袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿 袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆 肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄 薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇 蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁 羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁 芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄膀 蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄蒇虿羃节蚃薅羂莄蒅袄肂肄蚁螀肁膆蒄蚆肀艿虿薂聿蒁蒂羁肈膁莅袇肇芃薀螃肆莅莃虿肆肅蕿薅膅膇莁袃膄芀薇蝿膃莂莀蚅膂膂薅蚁膁芄蒈羀膀莆蚃袆膀蒈蒆螂腿膈蚂蚈螅芀蒄薄袄莃蚀袂袃肂蒃螈袃芅蚈螄袂莇薁蚀袁葿莄罿袀腿蕿袅衿芁莂螁羈莄薈蚇羇肃莀薃羇膆薆羁羆莈荿袇羅蒀蚄螃羄 HBASE 安装部署、参数设置、备份、恢复、安装部署、参数设置、备份、恢复、 监控规范监控规范 普元信息技术股份有限公司普元信息技术股份有限公司 2014 年年 10 月月 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 2 / 29 目录目录 1 1概述概述 3 1.1背景3 1.2目的4 1.3范围4 2 2硬件准备硬件准备 5 3 3实施实施 5 3.1软件准备5 3.2HBASE 服务器规划.5 3.3HBASE 安装部署.5 3.4HBASE 参数配置.9 3.5HBASE 备份恢复.10 3.5.1常用的在线备份方案及其比较10 3.5.2原理12 Replication 总体结构12 Replication 工作流程13 Replication Class 简介14 Replication Zookeeper 上的结构.15 Replication Failover .16 3.5.3部署18 Master 集群配置文件.18 Slave 集群配置文件.20 Master 集群配置.20 Slave 集群配置20 3.6HBASE 监控.20 3.6.1hbase 的监控配置说明.21 3.6.2hadoop 基于 ganglia 的监控框架.21 3.6.3hbase regionserver 中 RPC metric 的计算采集.22 3.6.4hbase 中 JVM 监控数据的计算采集.23 3.6.5hbase 中 regionserver 进程相关 metric 的计算采集.24 region 的 metric 采集.25 blockcache 相关的 metric 采集.26 读写请求的 metric 采集26 dfs 操作的 metric 采集27 compact 与 split 的操作数据采集.28 handler 的 metric 采集.29 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 3 / 29 1 1概述概述 1.11.1背景背景 随着 OSS 域各个系统的建设，系统间数据共享的需求也越来越多。目前，贵州移动的 网管系统在总部规范指导下，按需逐年建设而成的。这些系统实现对通信网络和业务平台 的管理，支撑配置管理、故障监控、指标分析、网络优化、例行维护、指挥调度等工作。 但是，面向网元和网络的分专业网管，难以支持以客户感知为核心、面向端到端业务实现 的运维管理新要求。越来越多的跨系统应用需要同时来自多个生产系统的数据进行支撑， 实际生产分析场景需要将多类型、多专业的性能、质量等数据的进行集中管理，并建立模 型关联，准实时、非实时分析需求并存。 CMOSS2.0 明确提出了数据集成和共享平台的技术架构要求。包括服务总线和数据总线。 数据集成和共享平台作为所有系统的交互桥梁，能够实现全面支持 CMOSS 规范中的所有共 享模式，提升系统稳定性及业务吞吐量；提供基于标准模型的数据共享服务，以解决数据 开放共享问题。建设效果直接影响到中国移动的 IT 业务能力和 IT 功能支撑能力。 根据集团 CMOSS2.0 技术规范的要求，结合贵州移动在网管领域对数据共享的具体需 求。贵州移动规划建立网络数据共享平台，通过对生产系统数据准实时的采集，将数据汇 总到数据共享平台上。利用目前业界最新的数据分析和处理技术，按照不同的业务视角利 用采集到数据，为企业运营提供技术决策依据。同时，由于统计分析使用的数据和生产运 营的数据分离，可以较少对正式系统的影响，从而保障生产系统运营更加稳定、可靠。 由于数据来自各个专业系统，需要面对不同的厂商、不同的技术架构。在数据共享平 台的建设过程中，存在数据标准化、服务标准化、大数据处理等问题。这些问题是数据集 成和共享平台建设成功的关键，需要重点解决。 1)对现有网管数据从生产到消费的全流程梳理，形成网管数据血缘关系和数据地图，以 作为网管数据统一建模、集成共享的基础； 2)根据数据地图，建立可扩展的、面向底层数据源和上层应用灵活适配的网管数据模型， 作为数据共享中心模型标准。 3)研究海量数据共享技术和模式，对数据库共享、数据编排、服务共享等数据共享技术 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 4 / 29 和模式进行评估，制定符合网络数据中心的共享技术标准。 4)Hadoop 是当前大数据处理常用的技术，但 Hadoop NoSQL 和多接点的特点，为应用开 发和平台维护带来一定的难道。通过技术服务，对 Hadoop 应用开发提供参考标准和技术支 持，研究并制定 Hadoop 平台的维护标准。 1.21.2目的目的 1)形成对网管数据地图与数据模型标准的梳理，作为在建数据共享中心的规范与指导； 2)研究海量数据的处理与分析技术、模式，为后续进一步建立针对大数据的数据共享中 心提供可行方案与指导。 为了达到上述目标，本项目分解为四个子项目，各子项目工作内容如下： 1)1)网络数据地图研究子项目网络数据地图研究子项目 对现有网管数据从生产到消费的全流程梳理，形成网管数据血缘关系和数据地图， 以作为网管数据统一建模、集成共享的基础； 2)2) 网络数据共享模型标准研究子项目网络数据共享模型标准研究子项目 根据数据地图，建立可扩展的、面向底层数据源和上层应用灵活适配的网管数据 模型，作为数据共享中心模型标准。 3)3) 网络数据共享技术标准子项目网络数据共享技术标准子项目 研究海量数据共享技术和模式，对数据库共享、数据编排、服务共享等数据共享 技术和模式进行评估，制定符合网络数据中心的共享技术标准。 4)4) 网络数据共享平台维护标准子项目网络数据共享平台维护标准子项目 数据共享平台采用 Hadoop 架构，多种技术共存，方案相对复杂，NoSQL 和多节点 的特点，为应用开发和平台维护带来一定的难道。通过技术服务，对应用开发提 供参考标准和技术支持，研究并制定平台的维护标准。 1.31.3范围范围 该文档是用于指导贵州移动网络共享平台 HBASE 安装部署、参数设置、备份、恢复、 监控的规范。 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 5 / 29 2 2硬件准备硬件准备 设备用途设备用途 操作操作 系统系统 设备设备 数量数量 设备设备 数量数量 主机名主机名 IPIP 说明说明 2 CXNDSP_HDP_01 CXNDSP_HDP_02 控制服务器 Hadoop 服 务器 Centos6.2 Centos6.2 16 14 CXNDSP_HDP_03 CXNDSP_HDP_04 . CXNDSP_HDP_16 数据节点 3 3实施实施 3.13.1软件准备软件准备 HADOOP 软件已经正确安装完成。 3.23.2HBASEHBASE 服务器规划服务器规划 Hadoop 版本：hadoop-1.2.1 Hbase 版本：hbase-0.94.19 zookeeper 版本：hbase 自带 主机名HADOOP 功能Hbase 功能zookeeper 功能 CXNDSP-HDP-01Master/NameNodeMasterHQuorumPeer CXNDSP-HDP-02Slave/DataNodeDataNodeHRegionServer CXNDSP-HDP-03Slave/DataNodeDataNodeHQuorumPeer/HRegionServer CXNDSP-HDP-04Slave/DataNodeDataNodeHQuorumPeer/HRegionServer CXNDSP-HDP-05Slave/DataNodeDataNodeHQuorumPeer/HRegionServer CXNDSP-HDP-15Slave/DataNodeDataNodeHQuorumPeer/HRegionServer CXNDSP-HDP-16Slave/DataNodeDataNodeHQuorumPeer/HRegionServer 3.33.3 HBASEHBASE 安装安装部署部署 1、 hbase 软件下载软件下载 官网：/dyn/closer.cgi/hbase/ 下载当前稳定版“hbase-0.94.19.tar.gz” 2、 下载后解压到下载后解压到 HADOOP 系统用户下系统用户下:/opt/cloud/ hbase-0.94.19 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 6 / 29 3、 配置配置 文件文件 1: hbase-env.sh 主要修改： a)JAVA 环境配置 export JAVA_HOME=/usr/java/jdk1.6.0_45/ b) HBASE_CLASSPAT, 利于 Hbase 与 Hadoop 关联 export HBASE_CLASSPATH=/opt/cloud/hadoop-1.2.1/conf c)设置使用设置使用 Hbase 自带自带 ZOOKEEPER export HBASE_MANAGES_ZK=true d) 参考： hbase-env.sh 配置文件配置文件 2: hbase-site.sh a)hbase.rootdir 这个目录是 region server 的共享目录，用来持久化 HBase 需要先创建该目录:hadoop fs -mkdir hdfs:/CXNDSP-HDP-01:9000/hbase b)distributed 是指定开启集群分布式,true 为开启 c)master 是指定 master 的机子和端口 d)quorum 是指定放 zookeeper 机子,被指定的机器上会运行 HQuorumPeer 进 程 e)dataDir 是指定临时目录，建议为$hadoop.tmp.dir/hbase f) 参考： hbase-site.xmlhbase参数.htm 配置文件配置文件 3: regionservers a)HregionServer 节点，配置为 hadoop 的 datanode 节点即可 4、 驱动包驱动包 因为 Hbase 与 Hadoop 有版本支持对应关系，所以要将 Hadoop 根目录下的驱动包 放到 Hbase 的 lib 目录，同时删除 Hbase 的 lib 下的旧版本的 hadoop-core-*包： 将 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 7 / 29 覆盖到 5、 安装到其他节点安装到其他节点 将当前配置好的 Hbase 同步到其他节点机： scp -r /opt/cloud/hbase-0.94.19/ hadoopCXNDSP-HDP-02:/opt/cloud/ scp -r /opt/cloud/hbase-0.94.19/ hadoopCXNDSP-HDP-03:/opt/cloud/ scp -r /opt/cloud/hbase-0.94.19/ hadoopCXNDSP-HDP-04:/opt/cloud/ scp -r /opt/cloud/hbase-0.94.19/ hadoopCXNDSP-HDP-15:/opt/cloud/ scp -r /opt/cloud/hbase-0.94.19/ hadoopCXNDSP-HDP-16:/opt/cloud/ 6、 启动启动 HBASE: Bin/Start-hbase.sh 启动完成后 JPS 查看进程： 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 8 / 29 也可网页浏览： :60010/master-status 7、 进入：进入：Hbase shell ，安装成功，安装成功 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 9 / 29 3.43.4 H HBASEBASE 参数配置参数配置 时钟同步： 所有节点机一定要时钟同步，如果不用 NTP 做时钟同步，可能无法启动 Hbase 的 HregionServer 进程。 ROOT 用户环境变量：/etc/profile 增加： 生效：source /etc/profile 同步到其他几点机 HADOOP 用户环境变量：/home/hadoop/.bash_profile 增加：增加： 环境配置环境配置 参考：/lijun4017/archive/2011/08/17/2143226.html 1）首先配置$HADOOP_HOME 下的 conf/hadoop-env.sh 文件，修改其中的 HADOOP_CLASSPATH，增加 HBASE 的相关 lib 包环境，如下: export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:/opt/cloud/hbase- 0.94.19/hbase-0.94.19.jar:/opt/cloud/hbase-0.94.19/hbase-0.94.19- tests.jar:/opt/cloud/hbase-0.94.19/lib/guava-11.0.2.jar:/opt/cloud/hbase- 0.94.19/lib/zookeeper-3.4.5.jar:/opt/cloud/hbase-0.94.19/conf 2）配置$HADOOP_HOME 下的 conf/core-site.xml,加入如下信息 hbase.zookeeper.quorum CXNDSP-HDP-01,CXNDSP-HDP-03,CXNDSP-HDP-04,CXNDSP- HDP-05,CXNDSP-HDP-06 3）配置$HBASE_HOME 下的 conf/hbase-env.sh，修改其中的 HBASE_CLASSPATH 为如下 4）重启 hbase 和 hadoop 先停 hbase ：./stop-hbase.sh 再停 hadoop： stop-all.sh 先启 hadoop： start-all.sh 再启 hbase： ./star-hbase.sh 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 10 / 29 案例测试：使用案例测试：使用 importtsv 加载加载 HDFS 文件为文件为 HFILE 给 hdfs 上传待导入 hbase 的数据文件，t8.txt 在 hbase 中创建表 t8 create t8,f1 在 hbase 中创建表 t8 在$HADOOP_HOME 下执行(二级列名可自定义，分隔符如果不是空格要指 明)： hadoop jar $HBASE_HOME/hbase-0.94.19.jar importtsv - Dimporttsv.columns=HBASE_ROW_KEY,f1:a,f1:b,f1:c -Dimporttsv.separator=, t8 /data01/work/Yang/ 查询表： 3.53.5 H HBASEBASE 备份恢复备份恢复 .1常用的在线备份方案及其比较常用的在线备份方案及其比较 对于数据中心的数据冗余的备份方案，目前从一致性，事务性，延迟，吞吐量，数据 损失，Failover 几个角度来分析有一下几种方案。 简单备份模式通过定时不定时的 Dump 出集群数据保证数据的安全性，通常可以通过 snapshot 或设置时间戳来 dump 数据来实现这种方案，如果方案简介，设计优雅可以做到 对在线数据中心低干扰或无干扰的数据备份。但这种方案缺点也是显而易见的，只是对时 间点之前的数据安全性得到保障，如果发生突发事件会导致不可避免的整段时间的数据丢 失，为很多人无法接受。 主从模式（Master-Slave）这种模式比起简单的备份模式多了很多优点，可以通过最 终一致性保证数据的一致，数据从主集群到备集群延时较低，异步写入不会对主集群带来 性能压力，基本不会产生多少性能的影响，突发事件来临时数据丢失很少，并且主集群的 事务在备集群也可以得以保证。一般通过构造较好的 Log 系统加上 check Point 来实现， 可以实现读写分离，主集群可以担当读写服务，但备集群一般只承担读服务。 主主模式 (Master-Master)原理总体类似于主从模式，不同的是 2 个集群可以互相承 担写的分离，都可承担读写服务。 中国移动通信集团贵州有限公司 2014 年网络部网管数据集成与共享标准技术服务项目 11 / 29 2 阶段提交这种方案保证了强一致性和事务，服务器返回给客户端成功则表明数据一 定已经成功备份，不会造成任何数据丢失。每台服务器都可承担读写服务。但缺点是造成 集群延迟较高，总体吞吐下降。 Paxos 算法基于 Paxos 算法的实现的强一致性方案，同一客户端连接的 server 能保 证数据的一致性。缺点是实现复杂，集群延迟和吞吐随着集群服务器增加而边差。 我们可以通过下面的一个图标来说明简化一下上面各种模式的特点。 备份主从主主2PCPaxos 数据一致性差保证最终一致性强一致性 事务无主集群保证分别保证主集群保证主集群保证 延迟低低低高高 吞吐量高高高低低 数据丢失大量最近短暂时间丢失最近短暂时间丢失无丢失无丢失 集群服务无服务主读写从只读读写读写读写 Hbase Replication 主从模式通过指定备集群，将 Hlog 里面的数据异步发送到备集群， 对主集群基本没有性能影响，数据延时时间较短。主集群提供读写服务，备集群提供读服 务。如果主集群有故障，可以快速切换到备集群。回过头来我们可以看看 Hbase 的备份状 况，Hbase 可以同过离线备份和在线备份提供上述的简单备份模式，主从和主主三种备份 模式模式 Hbase 简单备份模式如果表不在线比较好办，可以通过