异地容灾方案(通用8篇)
一、概述
备份与容灾是存储领域两个极其重要的部分,二者有着紧密的联系。一般来说,备份是指用户为应用系统产生的重要数据制作一份或者多份拷贝,以增强数据的安全性;容灾是用户为业务系统建立一个或多个冗余站点,达到业务不间断的目的。因此,我们可以把备份称作是“数据保护”,而容灾称作“业务应用保护”。备份与容灾中都有数据保护工作,备份大多采用近端方式,成本低;容灾则采用远程方式进行数据保护,成本较高。
大体上讲,容灾可以分为3个级别:数据级别、应用级别以及业务级别。数据级别容灾的关注点在于数据,即灾难发生后可以确保用户原有的数据不会丢失或者遭到破坏。数据级容灾较为基础,其中,较低级别的数据容灾方案仅需利用磁带库和管理软件就能实现数据异地备份,达到容灾的功效;而较高级的数据容灾方案则是依靠数据复制工具,例如卷复制软件,或者存储系统的硬件控制器,实现数据的远程复制。数据级别容灾是保障数据可用的基础,当数据丢失时能够保证应用系统可以重新得到所有数据。本案例容灾级别为数据级容灾,日后在此基础上可以进一步部署更高级别的容灾方式。
二、实施前状况及需求分析
本案例实施单位为某全国性金融机构的分支单位,在此简称A分支。该金融机构已经实现了全国性的数据集中管理(数据大集中),重要的生产数据已经集中在总部统一存储管理。而且A分支对于重要的业务中间数据在本地也有IBM 3584大型带库进行存储备份。所以说A分支针对于生产数据的备份和冗灾都有了较高级别的保障。
但对于A分支内部一些前置机数据虽然在本地也进行了备份,对于数据安全有一定的保护,但在数据容灾方面较为薄弱,由于备份数据与生产环境在同一楼内,数据较为集中,一旦发生火灾等大型灾难则对数据影响较为严重。
因此用户考虑针对于这些前置机数据部署远程的数据容灾系统。容灾地点定在25公里以外,线路采用租赁长波裸光纤,每天的数据量约为(110G),容灾级别为数据级容灾。
三、系统方案
系统结构示意图如下:
前置机IBM X3650 备份管理服务器p5TSM备份软件lanp5前置机光纤链路IBM SAN 交换机IBM SAN 交换机p5lanIBM T3200 磁带库IBM DS3400 存储DS4100前置机TotalStoragep51011121314SAN存储备份区域A分支异地容灾区域A分支机构区域A分支异地数据容灾系统结构示意图A分支异地容灾系统线路采用长波裸光纤,带宽可根据需要在线路两端架设网络设备的速率而定,根据A分支每日数据备份量(约为110G),若按100M网络线路负载80%计算,每天传输时间约为3小时。所以A分支的数据容灾系统可以采用直接将存储备份设备及备份管理服务器放置在远端的方式进行数据备份和管理。
硬件方案:在备份服务器上,本案例选用的是IBM X3650服务器,针对于备份管理服务器对运算方面要求不高,所以服务器配置单个4核2.0 CPU,为了增加本地数据存储量服务器配置了6块300G热插拔硬盘,另外服务器配置了IBM RAS II远程管理卡可以方便的进行远程控制管理,解决了服务器远程管理维护的问题。
存储及备份设备选用IBM DS3400(光纤通道)磁盘存储和TS3200(光纤通道)磁带库建立了SAN存储区域。这样为日后存储系统的扩展和备份系统实现统一管理建立了良好的平台。
备份管理软件选用IBM Tivoli Storage Manager,由于A分支的远程容灾数据为本地已经的打包好的数据不涉及数据库,所以在备份模块上只使用了最基础的文件备份模块,而且将服务器端和客户端同时装在X3650服务器上进行备份操作。
如上图所示,需要备份数据的前置机先将数据在本地打包,然后发送到远端的IBM DS3400存储上,然后再根据策略将需要永久保留的数据备份到磁带库中的归档存储池中,将只需要保存一份最新版本的数据循环保存到磁带库的循环备份存储池中。在DS3400存储上也保留了数据的最新2到3个版本,用脚本按时间对存储上备份的数据进行清理。
在远程管理方面,在远程服务器上安装远程监控软件(LINUX 系统采用VNC远程管理软件,WINDOWS系统采用远程桌面即可),再安装上IBM ServeRAID 管理软件就可以对本机和IBM DS3400存储的阵列和磁盘进行远程管理了。同时也可以使用IBM TSM备份管理软件和磁带库的管理软件对磁带库进行远程管理。这样整个系统基本上都可以在远程监管的范围内了。结合IBM RAS II远程管理卡可以进一步对服务器进行远程开关机及设置BIOS信息等操作,使远程管理更为方便。
用户使用评价:
所以, 灾难不能预测, 但是可以预防, 因此建立信息系统的异地容灾对企业, 特别是对那些全球覆盖, 二十四小时不间断运转, 高度信息化的世界性新闻媒体集团来讲是非常重要的。
一、容灾概述
信息系统异地容灾是指在相隔较远的异地, 建立两套或多套功能相同的信息系统, 互相之间可以进行健康状态监视和功能切换, 当一处系统因意外 (如火灾、地震等) 停止工作时, 整个应用系统可以切换到另一套, 使得该系统可以继续提供服务, 保证业务的连续。
从技术上看, 衡量容灾层次的主要有两个指标:RPO (Recovery Point Object) 和RTO (Recovery Time Object) ;RPO即数据恢复点目标, 主要指的是业务系统所能容忍的数据丢失量;RTO是恢复时间目标, 主要指的是所能容忍的业务停止服务的最长时间, 也就是从灾难发生到业务系统恢复服务功能所需要的最短时间周期。RPO针对的是数据丢失, 而RTO针对的是服务丢失, 二者没有必然的关联性。RTO和RPO的确定必须在进行风险分析和业务影响分析后根据不同的业务需求确定。对于不同企业的同一种业务, RTO和RPO的需求也会有所不同。
异地容灾的备份与恢复国家标准《信息系统灾难恢复规范》 (GB/T20988-2007) 规定了信息系统灾难恢复应遵循的基本要求, 适用于信息系统灾难恢复的规划、审批、实施和管理。并对灾难恢复能力作了6个等级的划分:第1级基本支持, 第2级备用场地支持, 第3级电子传输和部分设备支持, 第4级电子传输及完整设备支持, 第5级实时数据传输及完整设备支持, 第6级数据零丢失和远程集群支持。
二、容灾恢复技术
容灾系统所涉及的恢复技术一般包括三种:数据恢复技术、应用恢复技术和网络恢复技术。下面就这三种技术进行简要分析。
所谓数据恢复技术, 是指建立一个异地的数据备份系统, 作为本地关键应用数据的一个可用复制。在本地数据或整个应用系统出现灾难时, 确保在异地保存有一份可用的关键业务的数据。该数据可以是与本地生产数据的完全实时复制, 也可以比本地数据略微落后, 但一定是可用的。采用的主要技术是数据备份和数据复制技术。按照其实现的技术方式来说, 主要可以分为同步传输方式和异步传输方式。同步方式是指数据在本地和异地都保存成功后, 才会返回应用系统数据成功存储的信息;而异步方式是数据只要在本地存储成功, 就返回应用系统成功的信息, 而数据存储到异地是在后台异步完成的。
应用容灾恢复技术是在数据容灾的基础上, 在异地建立一套完整的与本地生产系统相当的备份应用系统, 也可以是互为备份。建立这样一个系统是相对比较复杂的, 不仅需要一份可用的数据复制, 还要有包括网络、主机、应用、甚至IP等资源, 以及各种资源之间的良好协调。主要的技术包括负载均衡、集群技术。数据容灾是应用容灾的技术, 应用容灾是数据容灾的目标。
网络恢复技术一般有:1) 4-7层交换机, 例如:无中断的网络恢复需要动态网络路由重选, 来保证应用能够在不中断最终用户的情况下转入备用数据中心。在SNA环境下通过APPN (Advanced Peer to Peer Networking) 来完成, 而在IP环境下则通过第4-7层转换来完成。通过标准的基于路由器的技术, 可以在通用的IP传输上使用APPN;2) 路由, 例如:可以通过APPN和/或标准的路由协议来完成 (OSPF/EIGRP/BGP-4) 在非GDPS环境中, APPN应用路由在容灾系统备用路径可用时, 自动恢复网络连接。3) 2层Reconnect, 例如:SNA子网在以太网/SNA中通过ATM/帧中继/DDN链路进行互联, 如果发生链路故障, 则可以通过手工切换来实现网络恢复。
综上所述, 在选择容灾系统的架构时, 还要建立多层次的广域网络故障切换机制。在远程的容灾系统中, 要实现完整的应用容灾, 既要包含本地系统的安全机制、远程的数据复制机制, 还应具有广域网范围的远程故障切换能力和故障诊断能力。也就是说, 一旦故障发生, 系统要有强大的故障诊断和切换策略制订机制, 确保快速的反应和迅速的业务接管。实际上, 广域网范围的高可用能力与本地系统的高可用能力应形成一个整体, 实现多级的故障切换和恢复机制, 确保系统在各个范围的可靠和安全。
三、异地容灾方案的实施
对于异地容灾系统的建立, 建议通过分步实施, 逐渐建立一套完善的系统容灾解决方案:
第一步, 完善深化本地备份系统
通过相应的备份软件, 对目前所有的计算机系统, 做好完善的数据备份, 特别是做好操作系统备份、文件系统备份、数据库系统文件备份、数据库数据文件备份、相关的核心应用程序备份;建立好完善的备份/恢复机制和远程磁带保管机制;这也是下一步实现远程数据复制容灾的基础, 容灾中心与生产中心的数据初始化同步, 都是通过备份恢复方式, 实现一个同步起点。备份非常重要, 可以防止出现一些恶意操作或误操作等造成的数据逻辑错误。
建立备份系统后, 再将备份文件在异地也保存一份, 保证出现地理上的不可预见灾难时, 在异地保存一份完整的数据。异地备份中心地理位置的选择, 大的方面需要对政治、军事、科技、人口和地质环境等因素加以考虑, 还要从企业或机构的远景规划, 业务布局, 实施、维护便利性等方面考虑。
第二步, 完善存储和应用的整合
存储整合是指通过相关的产品选择, 将各服务器的数据、或应用, 通过基于一定的管理及后续, 实现数据的快照、镜像等技术, 迁移到外置基于SAN的阵列库中, 通过唯一的管理接口, 实现统一管理, 屏蔽不同厂商阵列的差异。为后续进行容灾管理奠定基础。
应用整合是指通过相应的应用集群管理软件, 管理所有的应用系统状态。对现有的数据库系统Oracle、SQL Server、DB2、中间件等应用, 实现双机、多机或是单机集群管理。操作系统平台相同的, 可以整合在一起, 实现多机集群, 不同的数据库实例, 只是作为一个“数据库服务组”, 运行在多机或双机中的某一台服务器上, 为中间件、其他应用建立“应用服务组”, 也纳入到集群软件的管理;并且动过集权软件建立“应用服务组”与“数据库服务组”或其他“应用服务组”的依赖关系, 实现对应用启动、关闭的有序管理。
如果是Oracle RAC的应用, 则需要集权软件支持, 因此在选择集权管理软件时要纳入考虑因素, 通过RAC的支持使得数据库的RAC应用也在集群软件的管理之下。
第三步, 建立异地数据实时保护
通过第二步的存储和应用整合, 使得所有需要容灾的核心系统, 全部纳入到一个统一的管理平台之下, 我们将规划好应用数据的存放方式、数据文件的存放地点、日志的存放地点, 然后统一为这些数据指定一定的存储策略, 实现远程数据实时复制。
远程数据实时复制, 达到了真正的数据高可用, 任何一个节点出现问题时, 可以在很短的时间内, 将应用切换到另外一个节点, 实现业务的连续性。
第四步, 建立异地容灾切换演练机制
在数据库复制初始化完成, 相关应用复制完成, 就可以实现相关应用的“消防演习”了。这是保证容灾系统正常工作的最有效的手段。
第五步, 建立远程切换机制
确定外部DNS服务器对本地服务器与容灾中心服务器IP地址的对应关系, 确定DNS更新的内容。切换在某些情况下, 也是一个非常复杂的过程, 因为涉及切换的内容还是很多的, 包括数据库、应用系统、安全系统、中间件等等, 所以最好是能够建立一些自动切换的手段, 提高切换的效率和可靠。
四、案例分析
笔者以某传媒集团的异地容灾系统建设过程为例, 在此简单的介绍和分析容灾系统建设过程, 总结实施中的经验。
1.项目背景介绍
该传媒集团业务范围遍布各大洲, 主要业务系统数据集中存放在总部数据中心, 数据库为Oracle;应用系统为C/S结构, 终端分布部署在各分支机构, 通过分支的中间层服务器和数据库进行通信。
项目建设之前, 该集团已经有非常完善的数据备份恢复机制, 能够保证数据的RPO, 但是, 因为该集团需要一个不间断的业务保证, 而且一旦发生一些地理上的自然灾害等导致总部数据出现问题的时候 (包括备份数据) , 该集团的业务将很难恢复。为此, 管理层讨论后决策, 建设总部数据中心的异地容灾系统, 一方面保证数据的安全, 另一方面, 要保证业务的连续。
2.容灾需求分析
经过对该集团业务特点分析, 明确系统的异地容灾需要具有如下能力:
1) 数据能够在“运行节点”和“备份节点”之间达到接近实时的复制, 保障数据在上千公里外的异地有一份完全相同的副本, 不但要保证数据复制的准确性、一致性等, 更重要的是, 两个节点之间要能够随时“互换”, 也就是说数据可以从“运行节点”复制到“备份节点”, 当运行节点出现问题业务切换到“备份节点”时, 数据也可以从“备份节点”复制到“运行节点”;
2) “运行节点”和“备份节点”都要做好数据的备份, 防止出现恶意操作或误操作造成的数据逻辑错误。因为当“运行节点”和“备份节点”之间数据进行实时复制时, 一旦发生前端的误操作, 可能会导致数据库中数据的逻辑错误, 如果没有数据的定期备份, 错误的数据就很难恢复;
3) 当真正发生灾难时, 系统的运行环境能够迅速的从“运行节点”切换到“备份节点”, 保证业务的连续性。切换涉及到的数据库、中间件、安全、DNS等各种服务, 都需要进行平滑、迅速的切换, 不能有太多人工干预的操作;
4) 平时运行中, 建立“演练切换机制”, 定期将系统的运行环境在“运行节点”和“备份节点”之间切换, 一方面是使资源的利用率更加合理, 另一方面也是不断的对切换流程进行验证完善;
5) 建立并完善“安全系统”等关键支撑平台的高可用。在本方案中, DNS服务器、安全服务器、应用服务器等;
6) 建立网络通道备份机制, 防止因为网络出现问题造成系统切换失效。
3.容灾方案设计
1) 在“运行节点”和“备份节点”之间建立两条网络传输通路, 其中一条用作备份, 而且在选择网络服务提供商时, 该集团选择了两家。同时, 通过路由技术建立网络的切换机制, 保证在一条物理链路出现问题时, 能够快速的切换到另外一条, 做到了链路冗余, 这样保证了两个数据中心之间网络的高可用, 为建立系统的异地容灾奠定了坚实的基础;
2) “运行节点”和“备份节点”上的Oracle数据库之间采用Quest公司的SharePlex进行数据的双向异步准实时同步, 确保两节点上的数据都处于在线可用状态。
3) 在进行数据同步之初, 由于对产品不太熟悉, 有些配置不当的地方, 造成了数据的少量缺失, 后来建立了两节点之间数据的核对机制, 发现错误后, 及时修正, 最终保证了数据的一致。
4) 采用SharePlex进行数据同步时, 还需要解决下面的难题:数据库结构的升级, 因为数据库结构的变化有很多, 比如修改主键、增加字段、修改字段等等, 这些都得需要对SharePlex进行同步的配置, 而且同时需要对两个节点的数据库都要升级才能满足要求。需要建立方便、可靠的升级机制, 保证了数据库结构升级的顺利进行。
5) “运行节点”和“备份节点”的数据库都制定完善的本地备份策略, 并严格实施。该项目中, 两节点的数据备份时通过两种手段实现:一种是采用硬盘的镜像技术实现的, 这样不但速度快, 而且稳定可靠, 还可以提供一个在线可以使用的数据库, 但是容量有限;另一种就是采用磁带备份技术, 并定期将磁带运往同城异地, 保证备份文件的安全。
6) 在“运行节点”和“备份节点”分别建立CA、SCA和RA服务器, 平时只使用运行节点的服务, 并做好两节点之间服务器上配置信息的同步, 当运行节点出现问题时, 切换到备份节点。
4.经验总结与思考
尽管做了充分准备, 在该项目实际进行中, 依然遇到了很多问题, 但都通过各种手段研究解决, 这充分说明了实践出真知。通过这个项目, 总结一下在实施异地容灾项目时应注意的问题。
1) 技术工具的专业化
异地容灾技术要求高, 术业有专攻, 需要工具、组件专业化。在选择数据库复制软件时, 项目组最先准备采用数据库软件附属的复制工具, 但配置复杂, 难于操作, 还遇到一些意想不到的问题。所以, 转向考察一些专业的数据复制工具软件, 通过对专业工具软件测试比较发现, 这些软件比功能完善, 使用方便, 提高了数据库复制的可靠性。
2) 做好数据的准确性比对
在项目实施完成, 正式开始使用时, 一定要注意“运行节点”和“备份节点”之间数据的一致性, 最好是提前做好数据对比程序, 并由专人负责比对, 一旦发现问题, 务必及时处理。否则, 当时间长了以后, 数据误差越积越多, 最终造成很严重的数据准确性问题, 就会使方案得不偿失了。所以, 做好数据基准点工作很重要。
3) 编写必要的切换程序
该项目在实施之初, 对提高切换的自动程度缺乏考虑, 造成了切换过程需要很多人工干预工作, 降低了工作效率, 更容易引入人为失误。后来经过分析整理, 项目组编写了一个简练高效的切换程序, “一键”完成切换, 自动化程度大幅提高。所以, 在具体设计切换方案时, 最好将切换过程标准化、自动化, 提高切换的效率和稳定性。
4) 做好DNS、路由、安全等关键节点的高可用
异地容灾系统中, 很多切换都是通过DNS服务器完成重定向的, 所以DNS服务器本身的高可用和容灾一定要做好, 其他的比如安全服务、路由等也都要做好高可用, 保证在系统切换时, 这些关键要素要予以充分重视。
5) 成立“异地容灾委员会”
在所有的要素中, 人是最重要的。在建设异地容灾项目时, 最重要的因素是“人”, 一定要建立相应的组织, 专门负责异地容灾的管理, 包括方案的制定、切换演习等, 最好有高层领导统筹, 这样整项工作才有条不紊, 具有效率。
6) 制定完善的切换预案并定期演练
中烟商务物流有限责任公司承担着行业电子商务发展规划的实施、商务平台的建设、卷烟工商交易的运行、行业卷烟经营决策管理系统的运行维护和技术支持、行业物流的规划、建设、管理、运行、信息化等方面工作。
计算机系统的稳定运行对中烟商务物流公司至关重要。早在数年前,公司就对计算机软硬件故障、人为因素以及资源不足等引起的非计划性停机采取了各种措施,实现了系统冗余,增强了业务系统的高可用性。目前,公司的关键业务支持系统都建立在集群系统的环境中,系统中UPS、服务器、存储设备、网络、系统软件、数据库平台、应用系统都可以消除单点故障。
小范围的灾难事件可能只影响部分系统,但大范围的灾难事件不仅会破坏整个计算机系统,还会破坏机房场地,电力供应、通信等社会服务公共基础设施,造成无法挽回的损失。由于中烟商务物流公司的办公基本都在同城完成,公司决定建立一套高性能、高可靠性、高扩展性和低管理成本的异地容灾系统,以解决数据的安全问题。
异地容灾系统的核心在于在不同的地方将灾难化解,在实践中保证数据安全和业务连续性。但是,建立异地容灾中心不能纸上谈兵,必须考虑企业自身情况,有重点的建设异地容灾中心,实现资源配置最大化。
当然,也并不是所有网络系统都需要安装容灾系统,只有对不可中断(一般中断时间不可超过24小时)的关键业务才有必要进行灾难预防。另外,容灾系统也不能防止所有灾难,这很难做到。所以,企业应认真分析自身业务,确定成功恢复所需的条件,建立一套好用、实用、物有所值的容灾系统。其中,备份、容灾、恢复演练一个都不能少。
备份是基础
备份是数据提高可用性的基础,其目的是为了系统数据崩溃时能进行数据快速恢复。为保证备份数据和源数据的一致性和完整性,中烟商务物流公司将备份分成六步骤:
1.采用本地定期磁带备份数据;
2.采用远程磁带库、光盘库备份,即将数据传送到远程备份中心制作完整的备份磁带或光盘;
3.采用远程关键数据+磁带备份,磁带备份数据,生产机实时向备份机发送关键数据;
4.远程数据库备份,就是在与主数据库所在生产机相分离的备份机上建立主数据库的一个拷贝;
5.采用网络数据镜像,这种方式是对生产系统的数据库数据和所需跟踪的重要目标文件的更新进行监控与跟踪,并将更新日志实时通过网络传送到备份系统,备份系统则根据日志对磁盘进行更新;
6.采用远程镜像磁盘,通过高速光纤通道线路和磁盘控制技术将镜像磁盘延伸到远离生产机的地方,镜像磁盘数据与主磁盘数据完全一致,采取同步或异步的更新方式,同时采用服务器集群。
容灾不可少
一套完整的容灾方案应该包括本地容灾和异地容灾两套系统。中烟商务物流公司将异地容灾的技术思路分为基于主机系统的数据复制和基于智能存储系统的远程镜像两种。
基于主机系统的数据复制是通过软件形式来实现,能够把数据定期、在线地复制到目的地的机器上去。对用户来说,这种复制方式的优点是能够较好地保证数据的一致性,但它将消耗大量的主机资源(至少要占用监控和复制两个进程)。而且,严格来讲,这种方法很难有真正的同步方案,因为数据复制要求做任何一笔交易,都要实时地将结果发送到远程的站点中,等远程操作结束后,再执行下一笔交易,这在实际操作中,很难做到,只能做异步的数据复制。
基于智能存储系统的远程镜像是基于控制器的远程拷贝,它有在主副存储子系统之间同步数据镜像的能力,对主机的资源占用很小,能保证业务正常运行下的I/O响应。但缺点是会受通信链路的通信条件影响。当带宽不够的时候,只能做远程的异步复制。
最终,在这两种技术的选择上,中烟商务物流公司在成本预算较紧、主机资源还不是瓶颈的情况下,考虑选用基于主机系统的通过软件实现复制的方法。另外对于公司今后的一些关键应用,由于对可靠性要求高,业务不能中断,还需要选用针对高端应用的容灾解决方案。
恢复演练是保障
无论选择怎样的容灾方案,其最终目的都是在灾难发生后实现快速系统的恢复。这就需要在系统正常运行时进行灾难恢复演练。
但灾难恢复演练不能以停机为代价,更不能发生演练后系统无法正常运行情况。此外,还应该定时进行恢复演练,确保备份中心能恢复系统。
建立实际的灾难恢复计划是一个非常复杂的过程,而且情况千差万别。因此,首先要明确灾难恢复的每一个细节,清楚最大的风险是什么?系统对哪些灾难最为敏感?系统停机对每个部门会产生怎样的影响?同时要进行人员分工。当发生灾难时,谁将负责数据恢复?谁负责监控设备?谁负责与设备供应商联系?这些都必须在演练中明确分工,并且按照计划执行。
最后,要定时进行演练。仅仅制定出一个计划是不够的,必须对其进行经常性测试。这就需要对企业自身系统进行风险评估,了解实际需求,以此来制定灾难恢复演练计划。
明确了企业异地灾备中心的建设思路和目标,还要做好准备工作。首先,需要建立一个符合要求的备份中心。所谓符合要求,就是说备份中心应该具备与主中心相似的网络和通信设置、具备业务应用运行的基本系统配置、具备稳定高效的通信链路连接主中心(例如铺设光纤)以确保数据的实时备份、与主中心相距足够安全的距离等。无论是现有的数据中心还是备份中心,都应该有完善的容错措施,这将减少系统故障。其次,及时进行有效的备份。为了做好备份,应该注意选择恰当的硬件和软件,这是成功备份和灾难恢复的重要环节。
此外,完善的管理制度对企业来说,其重要程度不亚于技术和产品。数据的及时备份、灾难发生的处理方法等都将对灾难恢复的效果、速度产生非常大的影响。
链接
烟草行业特色异地容灾系统四项基本特点
1. 高性能:强调关键数据的保护与应用。保证关键信息系统运行永不停顿,随时提供全面的数据保护和恢复功能;大幅度降低受损数据的恢复成本,保证恢复过程的快速有效;减少创建数据保护备份所需的时间,在复制与备份的过程中对应用不产生任何影响。
2. 高可用性:对数据访问做到零等待。数据必须是可用的和完全有效的,并保证无论数据保存在何处,根据用户的要求能够快速重新分配存储资源,并且可以进行自由和即时的信息交换。
3. 高可扩展性:保证异构平台的通用性。中烟商务物流公司现有的服务器和存储平台能够快速的支持新应用,满足新的服务器不断变化的性能要求。同时保持系统的可扩展性,对更大灵活性的需求具有可根据情况集成新型存储技术的出色能力。
电信重组拉开了电信业全业务经营的序幕,各省电信IDC针对市场需要推出了一系列增值业务,而容灾备份业务正是关键的一环,
项目背景与需求分析
某省电信IDC是中国电信下属的全国第一家提供高档次、全方位服务的互联网数据中心。该省电信IDC目前主要提供主机托管、带宽出租等资源消耗型业务,为突破这一传统业务模式,计划在A、B两地建设IDC容灾备份中心,为省内现有IDC客户和中小企业客户提供数据备份、数据及业务恢复和应用容灾功能,既为企业客户提供一个理想的数据和应用容灾备份场所,又大幅节约了投资建设成本和维护管理成本,同时也避免了行业的重复建设和资源的浪费。
该省IDC在A、B两地分别建设IDC容灾备份中心,提供应用级和数据级的容灾服务,实现可运营的共享式的容灾备份业务。针对容灾备份管理系统,IDC提出了以下要求:
1.功能完善,必须能进行完整的数据备份/异地容灾和数据恢复,实现数据库系统和文件系统的在线备份;能实现实时数据保护和应用快速恢复;能进行基于磁盘阵列的VTL备份,提高备份/恢复作业的性能;做到自动合并式备份,缩短全备份时间,降低备份作业对网络带宽的占用。
2.兼容性强,数据备份管理系统的服务器和客户端必须能支持使用广泛的操作系统平台,能支持各种流行的数据库系统和文件系统的备份和恢复,支持各种类型和接口的存储设备,具备广泛的兼容性,满足各种类型的企业客户系统的需求,
3.操作简单,能完成自动化的备份管理,可通过统一的图形界面对备份系统进行集中管理,统一管理备份设备、备份介质和备份/恢复任务,并且能统一定义管理备份策略和恢复策略;提供图形化操作管理界面,易安装、维护和管理,以适应不同层次企业客户的需求,并降低整个系统的复杂度。[next]
UIT解决方案
根据实际需求,UIT提出了容灾备份管理解决方案。系统结构如图所示。方案中,在省IDC位于A、B两地的灾备中心分别部署了一套BakBone NetVault备份管理软件,实现数据级的容灾;同时,通过与第三方公司的合作,综合利用虚拟服务器、数据实时复制等技术实现应用级的容灾,从而建立一个功能强大的容灾备份管理系统,协助该省IDC为省内广大企业客户提供可运营的共享式容灾备份服务。两个灾备中心既可以分别对各自区域内的客户提供数据容灾备份服务,也可以互为备份,从而既能实现同城灾备,也能进行异地远程容灾。
UIT容灾备份管理系统具备广泛的兼容性,支持各种操作系统平台客户端,并支持各种流行的数据库系统的备份,能够统一完成数据备份/容灾/恢复等作业,从而满足各种企业客户的系统需求。该系统具有完善的数据备份/恢复功能,并综合利用了多种提高备份/恢复效率的技术,提供易操作界面,无论安装、配置还是操作都能够轻松迅速完成,大大减轻维护管理人员的负担和压力。对于企业客户而言,只需简单的安装相应的客户端软件选项,并连接到省级分公司网络,即可享受到省IDC提供的数据容灾备份服务,一举消除数据安全隐患,为企业关键数据加上可靠的保险。
项目效益
浙江省教科院普教所所长林莉说,浙江学生要去上海高考,至少得提前3年筹划。
前:浙江人拼中考成绩
成批到上海参加高考
浙江人成批到外地参加高考,之前有过先例,在上世纪末到之间,浙江学生曾“沾光”上海教育:当时上海的一些高中,向全国招收优秀初三毕业生,光20,上海的高中就录取了近3000名外地中考生。
嘉兴一中一位教书的老师记得,当时学校每年要流失一两百优质生源,因为很多优秀初三毕业生选择到上海读高中,在上海参加高考,虽然要交好几万费用,但家长觉得值。
湖州中学吴校长说,当时湖州也有不少学生中考后选择到上海读高中。后来,因为上海家长认为上海优质的高中、大学资源正在被外地人侵占,从20起,这个到上海高考的通道就关闭了。现在,浙江学生要到上海参加高考,基本上不可能。
嘉兴一中副校长朱玲说,除非在浙江读高中的学生具有上海市户籍,否则是不可能有机会参加上海当地的高考了。“上海对高考移民现象查得很严,想作弊基本上也是不可能的,被查出来,后果很严重。”
记者联系到一位倪姓家长,他女儿在年赶上了末班车,幸运地去上海读了高中。倪爸爸说,女儿在2005年中考毕业后去复旦附中读书,后来考上了复旦大学。“2005年允许报两所高中,在这之前好像能报五六所,只要不冲突就可以。当时复旦附中有人报名,根据当地中考成绩初选出了240人,再进行一次考试,录取了60人。当年上海的高中一共录取了近3000名外地中考生。”
中国美术学院“三位一体”综合评价招生简章
今后几年:浙江人再要去上海高考
至少得提前3年筹划
浙江籍学生想在上海参加高考,现在只能指望上海的异地高考政策。上海异地高考方案据透露已基本确定,方案以《上海市居住证管理办法(草案)》中关于中高考资格获得的相关规定为依据DD持《居住证》A证的在沪务工人员,其子女可以按规定在沪参加中考、高考;获《居住证》C证人员的随迁子女,按有关规定只能在沪参加全日制普通中等职业学校自主招生考试。
《居住证》A证相当于国内人才引进类,审核实行按计分制,对申请人的学历、职称、年龄、收入、工作岗位、在沪工作年限等都有极高的要求。但父母若获得了A证,其子女只要在上海读完3年高中,就可以在沪参加高考。
林莉说,可以预见,上海的异地高考门槛会很高。浙江应该也有一批人去参加,但父母至少得提前3年筹划这件事。在孩子读初中时,就得考虑去上海读高中的问题。
中国美术学院“三位一体”综合评价招生简章
“同学们,今天是你们第几次使用‘电子书包’了?”“第二次!”“现在心情怎么样?”“没有上一次那么紧张了……”嘉兴市实验小学朱筠老师和学生们的一问一答,让台下听课的老师们露出会心的微笑。作为长三角网络结对学校,嘉兴市实验小学昨天和上海民办丽英小学、江苏常熟市实验小学一起,进行了“电子书包”的课堂教学展示和研讨。记者发现,嘉兴的老师和孩子们面对“电子书包”这项尚属试点的新事物,已经表现得很淡定了。
“电子书包”个小容量大
研讨活动中,朱筠老师先用“电子书包”执教了一节语文课,上课的内容是《老人与海鸥》,讲述的是云南昆明一位老人和海鸥之间犹如父亲和儿女一般的感情。课上,“电子书包”的优势展示得淋漓尽致:孩子们人手一台电脑,鼠标一点开,除了课文的文字内容外,还有多张老人喂海鸥的照片,再一点开,还有老人和海鸥交流的视频;孩子们在老师的引导下仔细品读完课文,还可以在视频下阅读其他网友对这个故事的不同理解,从而让自己的理解更全面更立体;朱老师现场布置的课堂作业,孩子们写进自己的电脑后,老师在后台全部能看到,从而准确地了解到不同孩子的理解程度,以便及时去指导和纠正……
可能是现在孩子的书包太重,所以一说到“电子书包”,很多人首先想到的优点就是“轻”――无纸化,就不用背那么多厚厚的书和练习册了,而现场的老师们则告诉记者,“轻”只是“电子书包”优越性的一部分,“高效、自主、个性”才是“电子书包”真正迷人之处。传统的课堂上,一个老师为几十名学生授课,要了解学生对新知识的掌握程度,只能进行人数有限的抽测和提问,而“电子书包”可以让老师在自己的电脑上一目了然;一个班的学生水平难免参差不齐,学习主动性也各不相同,在传统的课堂里,一些学生可能会偷懒不做老师布置的课堂练习,但“电子书包”不仅能吸引孩子,而且老师也能马上知道哪些学生没做练习;学生的听课效率有高有低,而“电子书包”记录了每个学生的学习轨迹,如果学生有需要,可以调出课堂记录重新温习一遍。
记者从市教育局获悉,嘉兴市中小学网络覆盖率已达100%,具备开展远程网络教育能力的学校有143所。年以来,嘉兴市中小学通过网络进行异地互动教学和网络教学研讨已渐趋常态化,这也为“电子书包”的推广打下了较好的基础。嘉兴市实验小学作为“电子书包”的试点学校,在今年3月首次展示了一堂用“电子书包”授课的科学双语课,目前已经把“电子书包”的尝试领域拓宽到了语文、数学、科学、英语、美术和信息技术等多门学科。“‘电子书包’给学生很多便利,但老师要接受很大的考验,光备课就有很大的工作量,还必须熟悉‘电子书包’的各项操作系统。”嘉兴市实验小学校长张晓萍昨天介绍,“经过这半年多的摸索和适应,老师们都逐渐适应了,学生们则明显表示了欢迎。准备在各方面条件成熟后,把‘电子书包’的平台延伸到学生家里,那样学生就可以在家温习白天的功课,还可以和父母分享自己的上课过程。”
据了解,市教育部门将根据《嘉兴市智慧城市・智慧教育工程-建设规划》的要求,研究制订《嘉兴市中小学数字校园建设标准》、《嘉兴市数字校园建设实施方案》等一系列文件。从今年起到20间的每年9月,教育部门将组成专家组对照标准对中小学进行评估,年12月将召开全市中小学数字校园建设工作总结表彰大会,推广各示范学校的先进经验,“电子书包”就是其中的一项内容。
12月24日从浙江省教育厅获悉,浙江省将在义务教育阶段的中小学校新建和改造3000个科学实验室、音乐教室和美术教室。预计到今年年底,浙江省中小学科学实验室和音乐美术类专用教室的配备达标比例将达到70%。
为此,浙江省省级财政和地方财政将投入经费2.56亿元,鼓励各地各校建设科学实验室和音乐、美术教室,装备探究性、创新性等试验设备,促进学生多样化、个性化发展。
-------北京睿云翰林技术专员提供
随着科技的不断发展,现在我们是处在信息的时代,信息数据对我们的重要性是不言而喻的,像很多的大型企业或者公司因为丢失了数据而造成无法估量的损失,所以数据备份对于很多的企业是相当的重要的,而很多人对于服务器的备份不是很了解,导致遇到了类似的情况,不知道如何进行,下面就看看异地服务器备份时怎么进行的。
一、需求分析
用户现有2台服务器,其中1台作为主营业务服务器正常运行,里面存放着关键数据,另1台服务器在异地作为备份服务器,考虑到各种因素而遭到毁坏,如地震、火灾、丢失等,进一步提高数据抵抗各种可能安全因素的容灾能力。保障在主营服务器出现故障时,在异地的备用服务器中能有宕机服务器中的所有数据,保证业务的正常运行。
二、方案设计
根据用户需求,主营服务器上运行的应用程序和数据十分关键,因此我们设计将主服务器的数据ReYun DBOS服务器异地备份软件备份到异地的另一台服务器中,ReYun DBOS灵活多样的备份策略使得备份服务器中同样有主服务器的数据,这样就实现了即便主营服务器出现故障,用户可以在备份服务器中找回数据,保障了业务的正常运行和数据的安全。
三、方案必要性
如果按照传统的标准应用部署备份方式,要想保证数据不丢失,需要工作人员手动将数据导出并保存在其他硬件存储中,而且必须在服务器不工作的情况下,通常是在凌晨或占用周末时间,给工作人员带来极大的麻烦,作为企业,也需要投入大量人力资源完成备份工作,既耗费时间和金钱,又要冒着误操作导致数据丢失的风险。
四、方案拓扑图:
五、睿芸异地备份产品介绍:
ReYun推出DBOS云备份产品,能够实现用户跨地区备份,可以在不同网关下实现企 业数据迁移及备份,从而真正实现信息技术领域中搭建云备份平台的理想。
关键词:在线备份,异地容灾,数据保护
0 引 言
计算机网络等信息技术的发展,为人们的生活和工作带来了诸多便利。尽管我们一再小心谨慎,但不可避免地会发生数据丢失的灾难,包括软件缺陷、硬件损坏、电脑病毒、黑客攻击、异常断电甚至火灾地震。
如图1所示,结合自主开发的网络存储系统,以及在线备份和异地容灾软件,圣桥科技为中小企业提供了一套经济、安全、高效的数据保护解决方案。
· 5iSync:PC数据的在线备份解决方案,通过差异化的远程数据复制技术,提供安全、高效、灵活的数据保护能力。
· StorBackup:服务器数据的在线备份解决方案,通过主动备份和自动快照技术,实现企业数据的集中管理、备份和恢复。
· StorMirror:海量存储数据的异地容灾解决方案,采用异步数据拷贝模式,提升企业数据的容灾能力。
1 5iSync-PC数据的灾备专家
1.1 5iSync备份技术
圣桥5iSync备份软件是基于圣桥网络存储系统开发的,用于PC或笔记本的数据在线备份专用软件。它通过差异化的数据拷贝技术,只在网络中传输被修改的数据,保证数据在最短的时间内完成备份操作;通过设置其调动功能,还可实现数据的自动备份。
如图2所示,5iSync包含客户端和服务端。
· 5iSync客户端:安装于用户的PC或笔记本中,可根据实际情况和数据重要性设置不同的备份策略;
· 5iSync服务端:内嵌于圣桥网络存储系统中,和客户端完成数据的校验和传输。
1.2 Why 5iSync
5iSync是一个网络时代的个人数据在线备份解决方案。它基于网络,通过差异化的远程数据复制技术,提供安全、高效、灵活的数据保护能力。
(1) Flexible:
灵活,基于TCP/IP协议,最大程度地提高了数据备份的灵活性。
(2) Internet:
网络,不仅能通过LAN完成本地备份,也能通过Internet实现远程备份。
(3) Security:
安全,基于SSH协议,最大程度地提高了数据备份的安全性。
(4) Efficient:
效率,差异化的远程数据复制技术,支持数据压缩,最大程度地提高了数据备份的效率。
(5) Intelligent:
智能,通过任务调度,无需人工干预,实现数据的定时备份。
2 StorBackup-服务器数据的在线备份
圣桥StorBackup备份软件将数据保护技术和管理机制统一起来,通过主动备份和自动快照技术,使企业向数据的集中管理、备份和恢复迈出了革命性的一步。它通过局域网自动备份异构平台系统的数据,如MS Windows、Linux、IBM AIX、SUN Solaris和HP-UX系统,并恢复到异构平台中,最大程度地简化了系统管理员的数据备份工作。
2.1 StorBackup备份技术
如图3所示,圣桥网络存储系统通过StorBackup功能实现文件服务器的在线备份。StorBackup备份系统通过差异化的数据拷贝技术,只备份服务器中被修改的数据,保证数据在最短的时间内完成备份操作。
2.1.1 备份策略
(1) 在文件服务器中,将待备份的目录设置成共享,使得StorBackup能够读取其中的数据。
(a) Windows服务器将其设置成CIFS共享;
(b) Unix/Linux服务器将其设置成NFS共享。
(2) 在WEB管理界面中,设置StorBackup的备份策略,指定待备份服务器的IP地址、共享信息、备份时间和周期等。
(3) 设置完备份策略后,StorBackup将对指定服务器的共享进行自动定时备份。
2.1.2 优势
(1) 基于磁盘的备份模式,解决了磁带备份速度过慢和维护复杂等问题。
(2) 差异化的数据复制技术,最大程度地缩小了备份窗口。
(3) 自动的备份策略,节省了管理员的宝贵时间,并避免了人为误操作的潜在危险。
(4) 减少了备份软件和磁带的投入,为磁带备份提供高效、经济的磁盘备份替代方案。
(5) 为Windows、Linux、AIX、Solaris和HP-UX等异构环境,提供集中备份空间。
(6) 快速读取,管理员无需解压缩便可通过圣桥存储提供的共享列表获取所需文件。
(7) 快速恢复,管理员通过StorRestore功能实现所有数据的快速恢复。
2.2 StorSnap快照技术
圣桥网络存储系统结合StorSnap快照技术可维护文件服务器备份数据的多个时间点的副本。基于“copy-on-first-write”快照技术,若源数据没有变化,快照中仅保存文件元数据,所有对快照的读操作还是直接从源数据上读取;若源数据发生变化,则数据被修改前将被写入快照中。
2.2.1 快照策略
(1) 设置备份策略时,可指定待备份数据的快照个数(最大可支持32个快照),快照的最小时间粒度为一小时。
(2) 设置完备份策略后,StorBackup在自动备份服务器数据时,将自动产生快照。
2.2.2 优势
(1) 快照可通过Web管理界面设置,操作非常直观简便。
(2) 基于“copy-on-first-write”快照技术,可节省80%以上的存储空间。
(3) 结合Storbridge提供的共享列表,可灵活获取各个时间点的文件数据,灵活方便。
(4) 每个备份任务支持多达32个快照,每个系统支持1024个快照。
(5) 快照可读、可写、可复制,还可以作为离线备份源。
(6) 若在使用过程中,发现数据卷容量不够用,还可在线扩展数据卷。
3 StorMirror-网络存储的差异容灾
无论从理论还是从实践上讲,如果只做本地备份,仍然是不可靠的。所以,为了提升备份的可靠性,从数据的安全性出发,来自火灾、地震等自然灾害的安全威胁同样需要被考虑。它要求将实体的数据副本存储在远离基础站点的地方,在故障修理或数据恢复时可被使用,这样可以起到容灾的效果,大大提升备份的可靠性和数据的异地灾备能力。
3.1 StorMirror镜像技术
圣桥StorMirror数据镜像软件采用异步数据拷贝模式,是一种圣桥网络存储系统间的远程数据备份技术,在主存储系统和次存储系统之间通过差异化的数据传输技术提供数据镜像功能,而无需占用任何主机资源。此外,业务数据影像拷贝的生成和管理维护,使客户以不同的方式更好、更充分地利用业务数据,获得更大的增值效益。
如图4所示,StorMirror包含客户端和服务端。
· StorMirror客户端:安装于数据中心的圣桥存储中,可根据实际情况和数据重要性设置不同的备份策略;
· StorMirror服务端:安装于容灾中心的圣桥存储中,和客户端完成数据的校验和传输。
3.2 StorMirror的优势
(1) 安全可靠:
StorMirror采用基于整数有限域离散对数难题的公钥密码算法进行安全验证,从而实现安全的信息通道,保证镜像数据的安全传输。
(2) 快速高效:
StorMirror通过校验信息判断文件是否被修改,镜像新数据和经过改动的数据,减少了数据传输所需要的时间和对网络带宽的要求,甚至能通过ADSL等电信宽带网络环境中完成数据的异地灾备。
(3) 数据复制:
StorMirror能够帮助企业高效地使用信息,在多个地方可以得到本地的最新信息的镜像数据,大大地降低数据维护成本。
(4) 数据保护:
远程镜像技术增大了数据中心存储系统与备份中心存储系统之间的距离,当灾难在生产中心发生时,备份中心可以不受影响。
(5) 高经济性:
异步远程镜像方案能有效地利用通信带宽资源,为存储用户提供了无缝的、安全的、长距离的数据镜像功能。
4 结 论
圣桥存储结合了网络存储、磁盘备份和异地容灾技术,为中小企业提供了一体化的数据保护解决方案,简化了企业数据的管理和维护工作,降低了存储的成本和复杂性。
参考文献
[1]金崇英,范里.Storway NAS在线备份和异地容灾的数据保护模式.微型电脑应用,2006,5.
[2]圣桥存储用户手册.http://www.shengqiao.com.cn/support/prod-uct/storbridge/Storbridge_IP_STOR_Manual.pdf.
方案简介:
对银行金库、现金保管点的智能化管理,是保障国家及人民财产安全、提高金融场所的安全管理效率、降低银行管理成本的重要方法。针对网点位置分散、分布范围大、难以统一管理和调度的特点,提出了金库异地守库系统的解决方案。
方案详细介绍了金库异地守库系统的设计原则、系统架构、功能特点、设备选型等内容。结合最新的物联网安防技术,通过射频识别、视频图像、传感器等信息传感设备,将全国范围内涉及整个系统的各要素(人和物)与互联网连接起来,将人员管理、视频监控、门禁管理、告警联动等子系统融合起来,实现了银行金库及现金保管点分布式应用、集中式管理的要求,有利于提升银行的管理水平,降低管理成本。
本方案为现代银行金库的智能化管理和建设提供了有益的参考和帮助。
方案目录:
第一章 背景及需求 1.1 背景介绍 1.2 系统需求 第二章 设计原则 2.1 设计原则 2.2 设计依据 第三章 系统规划设计 3.1 总体设计 3.2 系统结构设计 3.3
系统操作流程设计
3.3.1 远程集中值守开库流程设计 3.3.2 无人值守开库流程设计 3.4
门禁子系统设计 3.5
视频监控子系统设计 3.6
报警子系统设计 3.7
IP对讲子系统设计 3.8 传输组网设计 3.9
管理中心设计 第四章 系统功能介绍 4.1 总体集成功能介绍 4.2
多种授权模式
4.3
多种开门模式(N+1开门)4.4
多级告警功能 4.5
多种告警设置 4.6
现场电子地图管理 4.7
银行金库业务介绍 4.7.1 固定监控中心看门 4.7.2 移动监控中心开门 4.7.3 出库布防 4.7.4 入库超时布防 4.7.5 出库未布防远程布防 4.8 报表分析功能 4.9 数据保护设计 第五章 系统建设要点 5.1 遵守标准原则 5.2 先进性 5.3 单一平台
5.4 分布式存储,集中式管理 5.5 大容量平台系统 5.6 系统安全性 5.7 产品的性能要求 5.8 产品可靠性 5.9 易维护性 第六章 配置清单 6.1 金库设备清单 6.2 管理中心设备清单 6.3 上一级中心设备清单 第七章 主要产品介绍 7.1 金库控制器 7.2 视频监控设备 7.3 报警联动设备 第八章 品牌介绍 8.1 品牌介绍 8.2 公司介绍
方案节选:
4.3 多种开门模式(N+1开门)
本金库异地值守系统具有异地监控开门、远程守库的功能,采用N+1模式,实现金库区域的出入只能由现场的N个人和值班室的工作人员(或者某位银行领导互)互相确认之后才能开金库门,否则,只有现场的N个人,或者只有值班人员/某位领导,都不可能单独打开金库门,确保了金库区域的安全性。
当我们设置了系统只有现场的N个人和监控室工作人员同时确认才能开门后,现场的N个人先刷卡或按指纹发出开门请求,平台在收到现场的开门请求后,确认键自动点亮,此时值班人员通过远程监控录像确认现场,没有问题的话手动点击确认键即可打开金库门。远程确认的这个人如果设置为银行某位领导的话,系统也可以通过将开门请求信号拨打电话或者发一条短信给相关领导来通过手机远程确认开库。
这种模式有效地保证了金库的安全性,受到各大银行的青睐。
金库门安装银行专用金库远程值守子系统(为本综合安防系统的一个子系统,子工作站),金库门采用本地和指挥中心双向认证的方式来确保金库门的安全,即只有本地组合认证通过后,指挥中心才有开门权限,也只有在指挥中心确认核实后,门才会被打开,兼容多种金库的业务流程。
“N+1”远程授权开门 领导短信授权开门 支持金库开门时段日程表 现场实时视频切换 现场人员实时抓拍相片 现场短信报警功能
更多详细信息请来电咨询:周’S 180*0257*9621
QQ:2860*896*579
深圳市中联创新自控系统有限公司是领先的智慧物联网系统和服务的提供商。公司创立伊始就竭尽全力来不断提高系统和产品的可靠性,以确保我们所提供的系统是全世界最可靠的系统之一。公司推出的S80智慧物联网系统包括:门禁、防盗报警、视频监控、停车场、消费、通道控制、动力环境监控、设备监控、能耗管理、电梯管理、会议室、访客管理、信息发布等子系统。
公司技术力量雄厚,拥有一支具有专业知识,专业技术,专业水平的研发团队,并在深圳设有研发基地,拥有安防业界领先的自主核心技术和可持续研发能力,产品获多项专利和资质证书,所提供的系统采用目前最先进的云计算和物联网技术,能够针对政府机关、通讯运营商、公安、司法、银行、教育、企业、电力、军队等行业提供先进的系统解决方案。
快速发展的中联创新,持续在各地拓展服务机构,贴近客户提供及时和周到的售前、售后服务,获得各合作伙伴的普遍认可。