2005-02-03
富士通(中国)信息系统有限公司
2005年2月3日 — 随着宽带因特网的普及,CRM/商务流程等企业关键业务越来越多地被转移到了网络上。数据传输速度的提高,图片/动画/声音等多媒体资料的增多,BtoB 或 BtoC 等电子商务的发展,带来了空前的数据处理量的增长。
权威部门的调查表明,存储使用率在Windows NT 环境下的仅有30%, 在UNIX环境下也只有40%,日益膨胀的信息量给有限的存储空间带来了巨大的挑战。24×7的不间断业务运行模式意味着数据的高安全性,快速的灾难恢复能力,以及在进行数据备份和维护操作的同时保障业务的不间断运作。此外,还必须保证不同厂商提供的存储设备的协同作业能力,保证管理人员能高效地维护大容量的存储系统。
SOFTEK TDMF是什么?
SOFTEK TDMF开放系统版本是一个基于网络的卷复制产品,目前可支持Solaris, HP/UX 以及Windows NT/2000 操作系统平台。TDMF 可实现数据交换和数据同步功能,可用于本地应用程序之间,或异地的数据共享以及灾难恢复等。
SOFTEK TDMF 专用于从主系统设备至次系统设备间复制基于磁盘的数据实况,它可以跨越任意支持TCP/IP 的网络连接。数据保持原来的顺序近乎实时地被复制,即使发生硬件故障、自然灾害或人为错误,亦可确保两个系统的一致性。利用checkpoint机制,存放在次系统的某个时间点的数据拷贝,可随时为次系统的应用所读取。这样,用户可对复制的数据机型备份、执行数据分析,或用于启动其他应用,如Web 服务。
当主系统发生故障时,次系统可即时提供对当前关键业务数据的访问。主系统和次系统都必须具备充足的磁盘存储空间和足够的网络带宽以承载数据流。SOFTEK TDMF 可与Solaris 和HP/UX 操作系统所支持的所有磁盘子系统一起运行。不需要修改标准的内核二进制程序,SOFTEK TDMF可兼容UFS、NFS、VxFS、VxVM和其它通用的文件系统、卷管理器、数据库管理系统以及磁盘实用工具。
在UNIX 环境中,每个磁盘按照特定操作系统的要求进行分区和访问。使用SOFTEK TDMF,用户可以轻松执行数据库或文件系统数据的复制。用户所做的只是将这些数据所存放的设备或卷定义到SOFTEK TDMF 的配置中。无需对磁盘重新进行分区或格式化,也不用对文件系统重新进行初始化,甚至不用将数据导入/导出。SOFTEK TDMF 结合了多层恢复软件,以确保用户可以获得对可用数据的无间断访问。SOFTEK TDMF 不会以任何方式篡改或损坏用户数据。与镜像或其他复制系统不同,SOFTEK TDMF 是将有变化的数据连续发送至远程站点,这样,在发生灾难时,可以将数据损失和恢复时间都降低到最小。
该软件产品的一个设计原则是使尽可能地降低数据复制过程对主系统的影响,并提供调节手段,可根据业务需求来分配网络带宽。
SOFTEK TDMF的应用
SOFTEK TDMF 软件是唯一一个定位于计划内和计划外事件的数据管理解决方案。下面简要介绍它的一些应用。
服务器迁移
当从一个数据中心向另一个数据中心进行服务器迁移时,通常的做法是,一边安装和准备目的服务器,而现有的服务器仍继续提供服务。在新的服务器上安装操作系统和应用程序过程中保证无间断的业务运行相对比较容易,然而在数据迁移中,即使是更新频率较低的应用请求,也会导致宕机时间的延长。这其中的过程包括:主服务器停止,将所有数据备份到磁带,将磁带运输到新的数据中心,然后将数据从旧服务器恢复到新服务器中。使用SOFTEK TDMF 可免除这样的宕机时间:TDMF 可将数据复制到新的数据中心,然后持续地将数据更新传送到新的服务器,等待用户进行最终的应用切换。
SOFTEK TDMF 还可大大降低数据迁移中的风险,使用SOFTEK TDMF的迁移方式中,用户可随时执行checkpoint操作,然后对迁移至目的端的数据进行试运行。而且这个过程对生产系统不会有任何影响。
测试
通常在升级新版本的操作系统时,也会相应的要求新的服务器硬件提供支持,例如需要升级网卡,增加内存,有时还可能要更新整套的服务器。传统的操作模式是直接将数据复制到新服务器所连接的新的存储设备上。即使不迁移应用程序,这样的过程也具有相当的风险,需要对生产卷中的数据卷预先进行严格的测试。
使用SOFTEK TDMF,用户可以在进行实际切换操作之前,就可获得完整的生产数据以进行新版本操作系统和应用软件的测试。这在很大程度上降低了应用升级的风险。另外,SOFTEK TDMF 的集成机制允许多个测试同时进行,减小了重新同步数据时对系统的影响。
脱机处理
在业务运行过程中,很少能够宕机进行“卷”一级的数据备份或数据库备份。连续地不断采集大量实时数据也会给系统造成较严重的负担。
SOFTEK TDMF 的“checkpoint”功能可用于与应用程序或基于时间的事件协同,进行数据的瞬时拷贝。这意味着在获得与生产系统数据一致的瞬时拷贝的同时,对生产运行影响极少。得到的数据拷贝可用于那些非常耗费资源的报告程序或数据分析功能,而这些功能一旦运行起来系统就几乎不能再运行别的应用。当备份程序或其它应用程序完成对次系统上的数据的访问时,同位于次系统上的TDMF 记录下的数据更新将迅速释放到TDMF 的目的设备,以保证最新的数据,所有这些过程不会增加任何影响给生产系统。
备份
用于数据分析的瞬时拷贝也可用于生成卷一级或文件级的备份。如果是备份数据库,有标准的数据库备份工具可用于一般的数据库备份。在生产数据出现问题时,可以利用这些备份将对象或数据直接恢复到生产系统中。
SOFTEK TDMF 补充了传统的应用程序级磁带备份。通过使用位于远程服务器上被复制的数据,在备用场所执行磁带备份的同时,主场所的关键业务的资源仍将保持可用。由于SOFTEK TDMF 基于TCP/IP网络进行操作,因此它也简化了生成离线数据拷贝的处理过程。
系统维护
SOFTEK TDMF 可用于临时将数据和应用程序迁移到备用系统,以便对主系统进行正常的系统维护工作,例如:升级操作系统或应用程序软件,增加存储空间和内存,甚至把主系统换成一个全新的型号。
在这种情况下,根据替代服务器运营事件的长短以及更新活动的总量,被升级的服务器的数据可以非常容易地重新保持同步。如果出现数据改变量大的情况,例如升级话费了数天或数周,这时也可以干脆将主系统与备用系统的角色对换。这时,可以执行到新服务器的完全的数据拷贝。
灾难计划及恢复
SOFTEK TDMF 提供了一个简单而又可靠的机制,以实现在远程灾难恢复中心可存有最新的数据拷贝。当与其他灾难恢复产品或程序一起使用时,可极大改善恢复时间,并可提供尽可能新的数据。SOFTEK TDMF 采用经由网络不断传送数据拷贝的方法大大减少了灾难发生时的数据丢失,而且还极大地简化了恢复的操作。同时,对主系统的影响也降至最低,而对网络的影响则可通过可调节的参数来控制。
SOFTEK TDMF体系架构
SOFTEK TDMF 在真正的磁盘设备驱动器或卷管理设备驱动器之上安装了一个特别的设备驱动器,而其在体系架构上位于文件系统或应用程序之下。因此,任何Solaris 或HP/UX 等UNIX 支持的基于磁盘的文件系统,以及那些直接使用裸磁盘设备的应用程序都与SOFTEK TDMF 兼容。SOFTEK TDMF 使用设备驱动器将数据更新同时写入到本地数据设备和内存缓冲中。
如图1 所示,SOFTEK TDMF 在主系统上使用一个核心的基于内存的缓冲存储器,记录所有写往本地数据设备的更新。数据写入本地数据设备的同时,同样的信息也会存放到位于物理内核内存的内存缓冲中接着,主镜像进程(PMD) 将从内存缓冲中读取条目,并通过网络传送到备用系统上的远程镜像进程(RMD)。PMD 是一个运行在主系统上的后台守护程序,SOFTEK TDMF 将对每个逻辑组创建一个PMD。RMD 是一个负责将通过网络从主系统接收到的数据写入到远程设备的守护进程。远程设备位于次系统,对应主系统上每一个本地数据设备,都有一个远程设备。SOFTEK TDMF 设备提供到一个特定的本地数据设备和其对应的远程设备的映射和管理。用户可定义一组设备作为一个统一的单元,这称为逻辑组。每个逻辑组有各自独立的一对PMD/RMD 进程。

在正常运行期间,数据更新将直接写入备用系统的复制设备。SOFTEK TDMF 不会对数据进行任何形式的转化、篡改和破坏。对于每个逻辑组,在备用系统上配置有相应的日志文件分区目录,它将用来处理传送的数据不是按更新顺序的情况,例如在一个smart refresh 操作期间。如果将这些数据直接应用到复制的设备上,将会使备用系统在一个较短的时间段内处于不可恢复的状态。SOFTEK TDMF 将确保备用系统上的数据总是可恢复的。
此外,在复制设备进入checkpoint 期间,备用日志同样也积极地接收数据更新。checkpoint 允许你将备用卷与SOFTEK TDMF 脱机,使之可用于其他应用的只读访问。在标准配置下,SOFTEK TDMF 将磁盘更新都收集在BAB 中,这个动作与发送这些更新到次系统的动作是独立的。这种模式称为异步模式。这种模式的优点是应用程序仍可获得近乎完全的I/O 性能的基础上,守护进程可最优地使用网络带宽。你也可以配置SOFTEK TDMF 运行在同步模式和半同步模式。
throttle 调节和可调参数
SOFTEK TDMF 包含一个throttle 调节系统,它不断地进行系统的评估,以便可以动态调整其操作,从而将对生产操作的影响降至最低。例如:网络流量的频率和尺寸可动态地调整,白天联机交易时间,发送尺寸小的数据而且发送频率较低,而在此后数小时后发生大批量数据更新时则采用尺寸大的数据块。
此外,SOFTEK TDMF 还有许多可调参数,通过设置这些参数,SOFTEK TDMF 可更贴近业务的需要。例如:一些应用可能要求以接近同步的状态维护被复制的拷贝,而对于其他应用来说却不是那么严格。可调参数使得它们可以控制,以满足应用程序恢复或性能的要求。
共存
为了与外部事件协同,SOFTEK TDMF提供了一系列脚本和API,它们可实现为自动操作事件。例如当一个数据库系统要求一个瞬时拷贝时, 通过执行checkpointpre(前)和post(后)脚本,该拷贝可与数据库的停顿保持同步。实际上,这些脚本可用于安装(mount)文件系统、启动诸如报告复制拷贝上的应用程序和备份等的处理。脚本和API 的目标是在与现有系统共存之时,即保持影响最小又提供足够的灵活性。
SOFTEK TDMF 软件是一个与硬件和供应商独立的复制解决方案,它提供了跨越TCP/IP 网络的不间断的数据同步。这对于服务器的移植或集中, 对于备份或off-host 处理采用瞬时拷贝,以及灾难恢复等尤为可用。
通过使用杠杆调节和可调参数,使SOFTEK TDMF 对现有的基础设施影响极小,而又具有完善的错误处理及控制能力
本产品也一体化了许多接口和API,这样可与其他应用程序产品交互并与应用程序事件协调行动。
SOFTEK TDMF应用案例
在本案中,多个服务器连接到一个大型的存储器阵列。数据存取非常频繁,数据量也不断增长;系统资源也十分繁忙,而且对系统资源的要求也在增长。存储器阵列已接近其最大容量,因此客户决定将四个大型服务器改为连接到一个新的大型存储器阵列,使得每个服务器能够访问约250Gb 的数据。每台服务器都不允许有长时间的停机时间。
硬件解决方案可从存储器阵列制造商处获得,然而这种解决方案的费用将十分昂贵,而且由于采用低层的微码方法,会使系统停止一段时间。于是,在四个服务器上安装了SOFTEK TDMF。TDMF 也将连接到新的存储器阵列。用TDMF 的术语,即采用了“回路(loopback)”的模式,在这种模式中,本地系统与远程系统的是同一系统。(参见图2)

逐个服务器地进行数据迁移,直到将原阵列上的全部数据都迁移到新的阵列,然后对每台服务器将存储切换到新的阵列。切换期间,停止应用,关闭服务器,配置新阵列,以恢复mount point 和设备名,然后重启服务器。在这种情况下,应用程序的停机时间均不超过一个小时。
富士通(中国)信息系统有限公司为富士通集团在中国设立的独资公司,也将成为富士通在中国业务的核心公司。公司不以单一产品销售为目标,而是强调为客户提供全方位解决方案,特别是软件与服务、IP网络和无线通讯,而这也正是富士通的强项所在。
如需更多资讯,请浏览:http://cn.fujitsu.com/