维普资讯 http://www.cqvip.com 电估技求 周戈 蔡勇 中国联通深圳分公司 深｜Ｉｌ ５１８０３４ ｌ无线接入设备（ＡＮ）、选择分配单元（ＳＤＵ）、 镛Ｉ：对移动通信无线系统级设备自身具备的容灾机制进行７介 绍．分析７８常容灾中需要注意的问题．并ａ结合容灾Ｉ作实例对 容灾措施进行７介绍。 电路域至分组域网桥设备（ｃＥ）、分组数据 服务接点（ＰＤＳＮ）等。在制造商提供的系统 没备中，已经为重要设备考虑了基本的容 灾功能。 羹ｌ弭移动通信无线系统容灾ＢＳＯ （１）对于ＯＭＣＲ服务器 采用硬盘镜像和数据备份方法。ＯＭＣＲ １引言 用户对移动通信服务质量的要求日益提 高，而系统设备日益复杂，运营商对系统的 改造、升级、扩容等工作也更加频繁，无论 是人为的失误还是设备本身的故障或者是雷 电、火灾等灾害都可能造成系统设备工作异 常，如何避免设备故障引起长时间和大面积 的用户通信中断，是运营商应该认真思考的 问题。目前，移动基站的密度一般比较大， 个别基站停止工作—般不会造成大的灾难性 后果，因此本文主要讨论系统级设备的容灾 情况。 服务器最常见的问题就是硬盘损坏，ＯＭＣＲ 上的所有硬盘都成对配置，互为镜像。 ＯＭＣＲ］ＪＥ务器一般还配置有多个ｃＰｕ板，个 别ＣＰＵ异常不会对整个服务器带来致命损 害，如果整个服务器无法自动恢复，则可以 在本机或其它机器重装操作系统和应用软 件，并导入备份数据来恢复。 （２）对于ｘｃＤＲ 一般由多个机柜组成，主要板ｇｔ：￣ｆ主控 板、时钟板、２ Ｍｂｉｔ／ｓ接口板、１ ０００ Ｍｂｉｔ／ｓ 交换板、通用处理器板、光纤ＬＡＮ环、ＴＤＭ 总线等。其中的关键部件和链路都采用一主 一备配置，在主用设备出现故障时．备用设 ２系统自身容灾机制 ２Ｇ系统，包括ＧＳＭ和ＣＤＭＡ，一般都 备成为主用设备，接替原主用设备的工作。 （３）对于ＢＳＣ 各个厂商对不同产品的ＢＳＣ的定义和 由ＢＳＣ（基站控制器）、ＸＣＤＲ（语音变码器）、 ＯＭＣＲ（无线操作维护中心）等设备组成。在 ２．７５Ｇ系统中，引入了大量的与分组数据相 关的设备，如数字交叉连接设备（ＤＡＣｓ）、 结构有所不同。例如，Ｍｏｔｏｒｏｌａ ＣＤＭＡ系 统将移动管理器ＭＭ和ＸＣＤＲ一起合称为 ＣＢＳＣ，其中ＭＭ是一台康柏计算机；而 ｗｗｗ．ｔｔｍ．ｃｏｍ．Ｏｆｆ ｏ７ 维普资讯 http://www.cqvip.com Ｍｏｔｏｒｏｌａ ＧＳＭ系统的ＢＳＣ是与 建设的持续进行，经常都有大量的 ｘｃＤＲ机柜结构基本相同而功能 参数和配置修改，因此要保证比较 定义不同的于ＸＣＤＲ的机柜。 新的数据内容。一般要求每周进行 不管采用什么结构，实现的功能是 数据磁带备份，实际上可以每天拷 一样的。对采用与ＸＣＤＲ相同结构 贝数据库文件到其它计算机上作为 的ＧｓＭ的Ｂ ｓｃ，其容灾考虑与 备份。特别是在大型工程建设期间， ＸＣＤＲ相同。而对于采用移动管理 即使几天的数据差别都会对系统造 器ＭＭ的ＣＤＭＡ系统，康柏计算 成重大影响。另外，对于ＯＭＣＲ服 机采用双机热备份方式，具有两套 务器上的配置文件（例如，ＵＮＩＸ的 ＣＰＵ和１０接口，双主机安装相同 ｅｔｃ目录下的所有系统配置文件和用 软件并运行一样的进程，在主用设 户目录下的Ｃｒｏｎｔａｂ、Ｐｒｏｆｉｌｅ等文 备出现故障时，一般由人工进行主 件）也应该定期进行备份，因为这 备倒换使备用主机成为主用主机。 些文件涉及系统及应用软件的初始 （４）对于数据业务设备 化、网络路由设置、主机名设置、服 ＰＤＳＮ作为无线网络到ＩＰ网络 务设置、定时任务安排设置、软件 的接入网关，它就是一台路由器，一 路径和环境变量设置等内容，一旦 般采用群集技术，使不一定在地理 机器需要重新安装操作系统和应用 位置上相邻的两个以上的ＰＤＳＮ组 软件，那么临时再去设置这些文件 成群集，既实现负荷分担，又承担容 内容将会耗费大量时间。对于作为 灾备份。ＳＤＵ中完成分组数据的选 ＰＤＳＮ、ＡＮ的交换机和路由器以及 择分配功能（ＳＤＦ）和分组控制功能 ＤＡＣｓ设备，配置一有变化就应该保 （ＰＣＦ）的板卡硬件相同，通过软件配 存好配置文件并保证随时可用。 置实现不同功能，其中多块ＳＤＦ相 （２）及时监控并处理问题 当于Ⅳ＋１备份，当某块ｓＤＦ停止工 由于系统自身大部分关键设备 作时，只要剩下的ＳＤＦ具有足够的 具有主备倒换机制，因此在绝大多 容量，就不会影响业务。而ＰＣＦ一 数情况下个别设备出现故障不会出 般采用两块互相分担负荷，互为备 现灾难性后果。但运维人员对故障 份。在ＡＮ设备中，汇聚节点路由器 情况应保持高度的关注，形成日常 ＭＧｘ和ＩＰ交换机都采用单板Ⅳ＿ １备 的系统健康检查制度，用ＯＭＣＲ命 份。ＡＮ到各个关键无线设备的ＩＰ连 令检查每个设备的工作状态和系统 接都采用两条线路。 发出的故障告警，力争在当日内解 决故障。对于主备工作的关键设备， ３日常容灾工作需要注意 如果在故障设备恢复之前备用设备 的问囊 也出现故障，则系统可能出现大面 虽然系统本身已经考虑了很多 积用户无法通信或系统很长时间无 的容灾措施，但要保障系统稳定，运 法恢复正常的情况。这时可以通过 维人员还有很多工作要做，特别需 值班人员日常告警监控、每日健康 要注意下面的一些问题。 检查以及系统指标变化趋势进行分 （１）做好数据备份 析，以便及时、全面地发现系统故 首先要做好ＯＭＣＲ上的数据库 障，及时排除隐患。 文件备份工作。该数据库文件包含 （３）检查现场和规范人员行为 整个移动无线系统的设备配置数据 为了避免人为的失误，应建立 和系统参数设置，由于日常优化和 严格的２１２程施工管理制度和系统操 ６８ ＴＥＬＥＣｏＭＭＵＮＩＣＡＴ１０ＮＳ ＴＥＣＨＮ０ＬｏＧＹ／２ＯＯ６・３ 作维护规程，并经常进行机房现场 检查，以清除机房内不合理飞线、 杂物摆放、工具和其他金属杂物遗 漏等问题。通过规范施工、机房现 场管理、系统操作严格审核和标准 化，可以避免人为引发灾难，如火 灾、短路、断开连接、操作失误等 行为。 （４）保证常备重要而通用 的设备 有一些通用设备，价格并不 贵，但关键时刻如果没有备件，将 可能使小故障成为重大故障。例 如ＯＭＣＲ中的硬盘，本来是服务 器的通用硬盘，但并不是随便到 市场上买一个就能用的，由于需 要硬盘镜像，因此必须考虑是否 是服务器厂商建议的品牌；接口 针数是否与服务器一致；硬盘大 小是否与原盘一致；硬盘磁道数 是否与原盘一致等问题。在硬盘 出现故障时，任何不一致都可能 使新硬盘不能完成替换。而如果 硬盘成对替换则必须重新安装操 作系统和应用软件，这样故障时 间就太长了。如果通过正常流程 申请购买、审批、采购、试用等， 则过程会比较漫长，在这段时间 内镜像备份的另一块硬盘也可能 损坏，最终只能采取重新安装的 措施，这样故障时间将达到１０ ｈ 以上。 如果常备一些重要而不算贵重 的设备，如ＤＡＣｓ模块、ＯＭＣＲ硬 盘、Ｈｕｂ等，就能在单个部件故障 发生时及时替换，避免拖延时间造 成大的事故。 （５）在主备机制没有生效时 的操作方法 对于采用主备用机制的设备， 只要能及时发现故障并处理，一 般不会出现主备完全失效的情况， 但主备用设备同时异常的情况也 维普资讯 http://www.cqvip.com 电信投 有发生。对于一些￣＋ｌ冗余备份的 设备，如Ａ接口中继故障、数据业 下面笔者将介绍一种高效的容灾方 案——深圳联通所采用的使用备用 ＢＳＣ的容灾方案。 真正实施割接时可以挪用ｃＢｓｃ一 １０１ｌ、１０１３、１０１４、１０１５的部分中 务选择分配功能（ｓＤＦ）板等设备工 作异常时并不会被冗余设备替换， 这会造成大量￣－．ｔｔ失败，这些都需 继线路，基本可以满足５０条的要求。 以近期话务来看不会出现拥塞。 Ｎｏ．７信令的容量也应考虑，经分析， 对于ＣＢＳＣ－ｌ０ｌ２，只要配置６条 深圳联通ＣＤＭＡ网络有２１个 ＢＳＣ，我们将一个ＢＳＣ的基站尽量 搬移到其他ＢＳＣ，假设搬移图ｌ中 要通过指标监控及时发现，并使用 命令使设备恢复正常或者暂时锁掉 故障设备。 的ＣＢＳＣ一１０１２，使ＣＢＳＣ一１０１２余 下的基站管理能力能够满足其他任 何一个ＢＳＣ所带基站的数量。当某 Ｎｏ．７信令链路就够用了。要使数据 业务也能恢复，开始考虑还要配备８ ＂ｑ＂ＤＡＣｓ模块，经过网调后由于同一 ４采用备用ＢＳＣ的 容灾方案及实施 上述讨论的前提都是在整个 ＢＳＣ没有崩溃的情况下进行的。在 各地实际工作中，曾经出现过由于 设备起火、设备维护操作不当、抢修 判断失误等原因引起的ＢＳＣ长时问 个ＢＳＣ出现故障时，ＣＢＳＣ一１０１２将 代替故障ＢＳＣ管理其下属基站，也 个ＤＡＣｓ模块带的基站都同属一个 ＣＢＳＣ，因此在某个ＣＢＳＣ出现故障 就是将故障ＢＳＣ下的所有基站割接 到ＣＢＳＣ－１０ｌ２ 时可以将其使用的ＤＡＣｓ模块割接 到ＣＢＳＣ一１０１２所在的ＡＮ。ＣＢＳＣ— ｌ０ｌ２上的大部分板件可以从故障 ４．１需要考虑的问题 要以ＣＢＳＣ—ｌ０ｌ２替换任一个 ＣＢＳＣ上挪用，因此不需要太大量的 板件备份。 无法恢复的情况。对于发生ＢＳＣ无 法恢复的情况，一般的办法就是割 接基站，即将故障ＣＢＳＣ下的基站 割接到其￣ＣＢＳＣ，由于各个Ｂｓｃ带 故障ＢＳＣ，容量方面需要考虑Ａ接 口中继的条数，例如，ＣＢＳＣ一１０１２ 和１０１ｌ、１０１３、１０１４、１０１５同属于 ４．２确定２ Ｍｂｉｔ／ｓ线路连接方案 如图ｌ所示，２１个ＣＢＳＣ分布 ＭＳＣ２（交换机２）的范围，要使Ａ 接口中继完全满足新割接入１０１２的 基站需求，按照目前其他ＢＳＣ的最 大配置应为５０条以上，目前交换机 两只剩余２９条Ａ接［Ｊ中继电路，在 在４个位置，在新老机房各有一套基 站传输网络和相应的ＡＤＣ配线架， 图中红线和绿线为各处机房中 有不少基站，因此余下的端口有限， 基站只能分散割接到各个正常工作 的ＢＳＣ。这种方法的缺点是线路需 ＣＢＳＣ和基站传输网络的连接关系。 ＣＢＳＣ一１０１２位于老机房，如果从各 要临时搭建，数据也需要临时准备。 ＣＢＳＣ—ｌＯｌ２ Ｎ 图１ ＣＤＭＡ网络２１个ＢＳＣ的位置和传输连接示意 ｗｗｗ．ｔｉｒｅ．ＣＯＩＴＩ．Ｃｎ ６９ 维普资讯 http://www.cqvip.com ＣＢＳＣ Ｉ … … …． ｌｆ 老机房ＡＤＣ配线架 ：： 新机房ＡＤＣ配线架 ＤＤＦ配线架 图２ 容灾布线和跳线示意 个机房拉线到老机房，既增加了工 作量又降低了可靠性。由于新老机 房之间可利用光端机提供的传输电 路连接，因此我们确定将需要割接 ・核对传输端口资料和实际电 路的一致性； ・ｃＢＳｃ一１０１２上板件设备和 备用的ＣＢＳＣ一１０１２发生作用时，采 取如下操作： ・根据传输端口资料将需要跳 接的飞线连上，使故障ＢＳＣ的基站 害Ｕ接到ＣＢＳＣ－ＩＯ１２； ・完成故障Ｂｓｃ所连的ＤＡＣｓ数 据设备到ＣＢＳＣ一１０１２和到ＡＮ设备 的连接； ・如果容量需要，从ＣＢＳＣ一 １０１１、１０１３、１０１４、１０１５上割接部 分中继到ＣＢＳＣ－ＩＯ１２； ＡＤＣ配线架所需飞线到位； ・确定割接采用的１０３个站号， 的传输端口集中到一处（老机房）的 连接方案，如图２所示，这样避免了 错综复杂的连线。 图２中绿色连线表示连接新老 作为ＣＢＳＣ一１０１２备用，并以这些站 号在ＣＢＳＣ－ＩＯ１２上建立空的支持 双载波基站的配置数据； ・完成ＣＢＳＣ一１０１２作为容灾用 的２ Ｍｂｉｔ／ｓ线及相关跳线的布线工 程； 机房的传输电路，根据目前新机 房传输下站数量，在新老机房之 间保留６４对电路，就可以将可能 发生故障的ｃＢｓｃ从新机房上传 输的２ Ｍｂｉｔ／ｓ线路集中到老机房 的配线架。图中的蓝线为应急割 ・在交换机上完成ＣＢＳＣ一１０１２ 下１０３个基站的Ｃｅｌｌ ＩＤ数据； ・在ＯＭＣＲ上运行容灾数据库 脚本以完成数据的配置，包括小区 ＰＮ短码修改脚本、根据原故障Ｂｓｃ 的基站数据修正ＣＢＳＣ一１０１２上ＢＴＳ 配置数据的脚本、用单载波基站运 ・按商用服务标准完成ＣＢＳＣ一 １０１２与ＭＳＣ之间的数据配置和联 接时需要连接的飞线，完成故障 ＢｓＣ所属的基站（无论是通过新 调，开通２９条中继； ・为任意一个ＢＳＣ出现故障准 备完成割接的数据库脚本文件； ・保证传输端口资料能及时更 机房还是老机房上的传输网）到 ＣＢＳＣ－ｌ０ｌ２的传输连接。 行双载波需修改单载波的脚本、运 行邻小区关系脚本、运行跨ｃＢｓｃ链 路ＩＣ ｌｉｎｋ配置脚本； ４．３准备工作 要实现ＢＳＣ容灾目标，必须做 好以下准备工作： ・准备完整的传输端口资料和新 机房到老机房６４对容灾传输线路的 端口对应资料； 新，保持与工程建设部经常进行传 输割接后的实际传输端口一致。 ・局部参数调整和具体问题故 障稍｝除； ・激活ＣＢＳＣ－ＩＯ１２下所有的设 ４．４出现ＢＳＣ无法恢复时容灾 ＢＳＣ投入使用的步骤 备和基站。皿 如对本文内容有任何观点或评论．请发Ｅ—ｍａｉｌ至 ｅｄｉｔｏｒ＠ｎ『ｎ．Ｃｏｒｎ．ｃｎ。 当某个ＢＳＣ无法恢复需要容灾 ７Ｏ ＴＥＬＥＣｏＭＭＵＮＩＣＡＴ１０ＮＳ ＴＥＣＨＮ０Ｌ０ＧＹ／２００６・３
