IT博客-地下清泉-文章分类-IT-数据备份技术

Linux下备份恢复技术的应用

地下清泉 — Wed, 13 Jun 2007 03:30:00 GMT

　　备份与恢复系统承担着事前备份与事后恢复的职能。在当前高速发展的网络环境下，任何一个网络上的信息系统都不可能保证绝对的安全。只要有网络存在，就会有来自网络的形形色色的威胁。为了抵御网络的攻击和入侵，虽然我们引入了日趋成熟的入侵检测系统、防火墙系统等，黑客们的入侵手段也日益高明，他们总能找到这些系统的安全漏洞及不足进行入侵，因而网络入侵所引起的安全事件呈逐年增加之势。　　

　　在这种情况下，我们难以保证网络中关键系统的绝对安全，因而就需要采用备份及恢复技术。备份及恢复技术就是使用存储介质和一定的策略，定期将系统业务数据备份下来，以保证数据意外丢失时能尽快恢复，将用户的损失降到最低点。它是信息安全学科中一种非常重要的核心技术。　　

　　Linux下的备份技术 　　

　　对于备份和恢复来说，Linux提供了诸如tar、cpio、 dump等工具来实现。这样，用户无需花钱购买，便可根据系统的实际情况，结合使用相应的备份恢复工具实现备份与恢复的基本功能。　　

　　tar工具介绍　　

　　tar是一个已移植到 Linux 中的经典 Unix 命令。 tar 是 tapearchive（磁带归档）的缩写，最初设计用于将文件打包到磁带上，现在我们大都使用它来实现备份某个分区或者某些重要的文件目录。我们使用 tar可以打包整个目录树，这使得它特别适合用于备份。归档文件可以全部还原，或从中展开单独的文件和目录。备份可以保存到基于文件的设备或磁带设备上。文件可以在还原时重定向，以便将它们重新放到一个与最初保存它们的目录（或系统）不同的目录（或系统）。tar是与文件系统无关的，因而它的适用范围很广，它可以使用在ext2、ext3、jfs、Reiser和其他文件系统上。　　

　　使用tar非常类似于使用诸如Windows环境下的Winzip、WinRAR这样的文件实用工具。只需将它指向一个目的（可以是文件或设备），然后指定想要打包的文件，就可以通过标准的压缩类型来动态压缩归档文件，或指定一个自己选择的外部压缩程序。要通过bzip2压缩或解压缩文件，可使用tar -z命令。

　　下面是一个简单的使用该工具进行数据备份的例子：　　

　　tar czvf - /root/code > /tmp/code_bak.tgz （将/root/code目录下的所有程序文件打包备份到/tmp/code_bak.tgz）　　

　　tar xzvf /tmp/code_bak.tgz /root/code （将备份的目录文件恢复到指定目录）　　

　　cpio工具介绍 　　

　　cpio命令可以从tar或者cpio档案文件中拷入或者拷出文件。cpio命令和tar命令兼容，但是这个命令具备一些tar命令没有的功能，如下所示：　　

　　● 支持cpio和tar两种档案文件格式；　　

　　● 支持许多老式磁带数据格式；　　

　　● 能够通过一个管道(pipe-line)读取文件的文件名。　　

　　目前看来，只有很少的Linux软件包是以cpio格式发行的。用户如果对cpio命令的详细情况感兴趣，可以通过“man cpio ”命令阅读它的使用手册。　

　　dump 和 restore介绍 　　

　　dump可以执行类似tar的功能。然而，dump倾向于考虑文件系统而不是个别的文件。dump检查ext2文件系统上的文件，并确定哪些文件需要备份。这些文件将出于安全保护而被复制到给定的磁盘、磁带或其他存储媒体上。在大多数媒体上，容量是通过一直写入直至返回一个end-of-media标记来确定的。　　

　　配合dump的程序是restore，它用于从转储映像还原文件。restore命令执行转储的逆向功能。可以首先还原文件系统的完全备份，而后续的增量备份可以在已还原的完全备份之上覆盖。可以从完全或部分备份中还原单独的文件或者目录树。　　

　　dump和restore都能在网络上运行，因此用户可以通过远程设备进行备份或还原。dump和restore使用磁带驱动器和提供广泛选项的文件设备。然而，两者都仅限用于ext2和ext3文件系统。如果使用的是JFS、Reiser或者其他文件系统，将需要其他的实用工具，比如 tar。举个例子：　　

　　dump 0f /dev/nst0 /（将ext2文件系统备份到第一个SCSI设备）　　

　　restore -xf /dev/nst0 /home/code（将备份的SCSI设备中的/home/code目录下的所有数据还原到磁盘）　　

　　另外，现在市场上还存在着诸如Tivoli StorageManager之类的商业化存储备份工具，这些都是可视化的工具，用户可以方便地通过用户界面来实现备份与恢复。值得注意的是，这是一款商业软件，因而并不是免费的，对于很多用户来说，它所提供的功能与我们上述的Linux自带的备份与恢复工具比较相似，只是更加人性化和友好，使用户从枯燥的命令行方式下摆脱出来，从而方便用户使用。　
　　备份需要花费一定量的物力和财力，如何在备份所取得的收益与备份消耗的资源上做一个权衡是网络安全工作者需要考虑的一个大问题，因为支出大于产出也就意味着低效甚至失败。所以在Linux环境中进行数据备份，需要根据实际情况进行区分对待，以取得比较好的效果。特别是，需要对一些关键的目录进行区分，从而做到有针对性的备份，减少不必要的浪费。　　

　　一般情况下，以下所列目录是需要备份的，它们在系统中具有举足轻重的地位：/etc包含所有核心配置文件，这其中包括密码文件、网络配置文件、系统名称、防火墙规则、NFS文件系统配置文件以及其他全局系统项；/var包含系统守护进程（服务）所使用的信息，包括 DNS 配置、DHCP 租期、邮件缓冲文件、HTTP 服务器文件等；/home包含所有用户的默认用户主目录，这包括他们的个人设置、已下载的文件和用户存放在系统中的重要的信息；/root是根（root）用户的主目录；/bin是存放许多系统中常用的诸如ls、ps等命令的重要场所，这些命令在磁盘上均有影响，极容易遭受黑客的破坏。　　

　　相反地，在Linux系统中，如下目录是不应该备份的：/proc永远不需要备份，它不是一个真实的文件系统，而是运行内核和环境的虚拟化视图，它包括诸如 /proc/cpuinfo、/proc/meminfo 这样的文件，这个文件是整个运行内存的虚拟视图，一旦系统关机或者重新启动，该目录下的信息便不复存在；/dev包含硬件设备的文件表示，如果计划还原到一个空白的系统，那就可以备份 /dev，如果计划还原到一个已安装的Linux系统，那么备份/dev是没有必要的；另外，一些软链接（也就是指向另外一些磁盘文件的文件）是不需要备份的，因为这些文件当中存储的只是被指向文件的地址，这些软链接文件，用户可以通过使用“ls -l”命令来判定，如下所示，其中linux-2.4即为一个软链接文件，它指向的是linux-2.4.7-10这个目录。　　

　　lrwxrwxrwx 1 root root 14 6月 19 2004 linux-2.4 -> linux-2.4.7-10 　　

　　链接　　

　　备份技术及基本分类　　

　　一般说来，建立一套完备的网络数据备份系统必须具备如下几个必要条件：　　

　　● 数据备份的容量都是比较大的，所以针对关键业务系统的数据备份需要实现自动化，以减少系统管理员的工作量；　　

　　● 以备份服务器形成备份中心，对各种平台的应用系统及其他信息数据进行集中的备份，系统管理员可以在任意一台工作站上管理、监控、配置备份系统，实现分布处理，集中管理的特点；　　

　　● 用户可以比较方便和快捷地恢复损坏的整个文件系统和各类数据；　

　　● 备份系统还应考虑网络带宽对备份性能的影响，备份服务器的平台选择及安全性，备份系统容量的适度冗余，备份系统良好的扩展性等因素。　　

　　进行备份工作需要确定数据备份的策略。备份策略指确定需备份的内容、备份时间及备份方式。用户要根据自己的实际情况来制定不同的备份策略。目前被采用最多的备份策略主要有以下三种：　　

　　1．完全备份　　

　　就是每天对系统进行完全备份。这种备份策略的好处是：当发生数据丢失的灾难时，就可以恢复丢失的数据。然而它亦有不足之处。首先，由于每天都对整个系统进行完全备份，造成备份的数据大量重复。这些重复的数据占用了大量的空间，这对用户来说就意味着增加成本。其次，由于需要备份的数据量较大，因此备份所需的时间也就较长。对于那些业务繁忙、备份时间有限的用户和单位来说，选择这种备份策略是不明智的。并且，由于备份的时间间隔太小而造成的完全备份数目过多，造成硬件资源的大量浪费，也是很不必要的。　

　　2．增量备份　　

　　就是每天只对当天新的或被修改过的数据进行备份。这种备份策略的优点是节省了存储介质空间，缩短了备份时间。但它的缺点在于，当灾难发生时，数据的恢复比较麻烦。另外，这种备份的可靠性也很差。备份间隔中的数据是无法恢复的，这就需要用户在指定备份间隔时做适当的权衡，才能取得比较好的效果。　　

　　3．差分备份　　

　　管理员先在最初（例如星期天）进行一次系统完全备份，然后在接下来的几天里，管理员再将当天所有与星期天不同的数据（新的或修改过的）备份到磁介质上。差分备份策略在避免了以上两种策略的缺陷的同时，又具有了它们的所有优点。首先，它无需每天都对系统做完全备份，因此备份所需时间短，并节省了空间；其次，它的灾难恢复也很方便。

地下清泉 2007-06-13 11:30 发表评论

磁带机和磁带库的概念

地下清泉 — Wed, 13 Jun 2007 03:29:00 GMT

磁带机（Tape Drive）一般指单驱动器产品，通常由磁带驱动器和磁带构成，是一种经济、可靠、容量大、速度快的备份设备。这种产品采用高纠错能力编码技术和写后即读通道技术，可以大大提高数据备份的可靠性。根据装带方式的不同，一般分为手动装带磁带机和自动装带磁带机，即自动加载磁带机。

自动加载磁带机实际上是将磁带和磁带机有机结合组成的。自动加载磁带机是一个位于单机中的磁带驱动器和自动磁带更换装置，它可以从装有多盘磁带的磁带匣中拾取磁带并放入驱动器中，或执行相反的过程。它可以备份100GB-200GB或者更多的数据。自动加载磁带机能够支持例行备份过程，自动为每日的备份工作装载新的磁带。一个拥有工作组服务器的小公司可以使用自动加载磁带机来自动完成备份工作。

目前提供磁带机的厂商很多，IT厂商中HP（惠普）、IBM、Exabyte（安百特）等均有磁带机产品，另外专业的存储厂商如StorageTek、ADIC、Spectra Logic等公司均以磁带机、磁带库等为主推产品。

================================================================

广义的磁带库产品包括自动加载磁带机和磁带库。自动加载磁带机和磁带库实际上是将磁带和磁带机有机结合组成的。自动加载磁带机是一个位于单机中的磁带驱动器和自动磁带更换装置，它可以从装有多盘磁带的磁带匣中拾取磁带并放入驱动器中，或执行相反的过程。它可以备份100GB—200GB或者更多的数据。自动加载磁带机能够支持例行备份过程，自动为每日的备份工作装载新的磁带。一个拥有工作组服务器的小公司或分理处可以使用自动加载磁带机来自动完成备份工作。

磁带库是像自动加载磁带机一样的基于磁带的备份系统，磁带库由多个驱动器、多个槽、机械手臂组成，并可由机械手臂自动实现磁带的拆卸和装填。它能够提供同样的基本自动备份和数据恢复功能，但同时具有更先进的技术特点。它可以多个驱动器并行工作，也可以几个驱动器指向不同的服务器来做备份，存储容量达到PB（1PB=100万GB）级，可实现连续备份、自动搜索磁带等功能，并可在管理软件的支持下实现智能恢复、实时监控和统计，是集中式网络数据备份的主要设备。

磁带库不仅数据存储量大得多，而且在备份效率和人工占用方面拥有无可比拟的优势。在网络系统中，磁带库通过SAN（Storage Area Network-存储局域网络）系统可形成网络存储系统，为企业存储提供有力保障，很容易完成远程数据访问、数据存储备份，或通过磁带镜像技术实现多磁带库备份，无疑是数据仓库、ERP等大型网络应用的良好存储设备。

地下清泉 2007-06-13 11:29 发表评论

走出备份的误区

地下清泉 — Wed, 13 Jun 2007 03:24:00 GMT

HP始终认为，备份只是一种手段，备份的目的是为了防止数据灾难，缩短停机时间，保证数据安全，服务器硬件升级；而备份的最终目的：恢复！其中，磁带机提供了经济有效的备份，它能够以10%～20%的投资，实现100%的可靠。

　　很多系统管理人员以及CIO对备份的认识有着一定的误区。误区之一是：用拷贝来代替备份。实际上，备份等于拷贝加管理，备份能实现可计划性以及自动化，以及历史记录的保存和日志记录。在海量数据情况下，如果不对数据进行管理，则会陷入数据汪洋之中。误区之二是用双机、磁盘阵列、镜像等系统冗余替代数据备份。需要指出的是，系统冗余保证了业务的连续性和系统的高可用性，系统冗余不能替代数据备份，因为它避免不了人为破坏、恶意攻击、病毒、天灾人祸，只有备份才能保证数据的万无一失。误区之三是只备份数据文件。在这样的条件下，一旦系统崩溃，那么，恢复时就要——重新安装操作系统、重新安装所有的应用程序，需要相当长的时间才能恢复所有的数据，在时间等于金钱的后WTO时代，你的客户能够忍受吗？因此，正确的方法是对网络系统进行全部备份。

　　目前，备份的趋势是无人值守的自动化备份、可管理性、灾难性恢复，这三点正是针对系统的高效率、数据与业务的高可用性而增强的。

针对不同的应用环境与需求，HP的备份方案与产品包括磁带机、自动加载磁带机以及磁带库，分别满足不同层次的用户需求。

　　中小企业—磁带机与单键灾难恢复

　　任何企业、任何一个信息系统，都可能会发生灾难，但如何保证灾难的影响能够轻轻一点就消除呢？对于中小企业来说，HP StorageWorks DAT、SDLT/DLT、Ultrium磁带机产品加上HP单键灾难恢复技术（OBDR）是一个不错的选择，可以用于灾难恢复以及数据传递等。

　　利用该技术，一旦系统出现故障，IT管理人员可以直接从磁带机上引导整个系统，同时将数据完整地恢复出来，无需重新安装操作系统和应用程序，使用极为简便。利用OBDR，DR自动在每次备份时自动生成，在灾难恢复时无需软件/CD，而且只需要少量的时间，只需要少量的技术知识，从单一介质上恢复。与常规的灾难性恢复方案相比，HP单键灾难恢复方案让以往需要四步的工作简化为两步，而且操作人员可以完全不懂计算机管理。管理人员只需要更换硬件，然后以DR方式启动，只需要按一个键，系统就能整个自动恢复。单键灾难恢复方案的特点是高可靠性、速度快、最易实现性以及具有无人值守的备份功能。

　　中型数据备份应用：自动加载磁带机，无人值守的备份

　　自动加载磁带机将是备份市场的未来发展重点产品。HP的自动加载磁带机可以实现单服务器和多服务器的自动备份，是中小企业以及部门进行存储备份的理想工具。HP自动加载磁带机从磁带技术上分为DAT、DLT、LTO等技术，分别针对办公室服务器备份、工作组/本地网络备份以及远程网络备份，全面提高了硬件管理效率，并提供了有效机架空间，满足了用户更高的容量要求。

　　以HP StorageWorks SSL1016 Ultrium 460 自动加载磁带机为例，它是一种体积小巧、具有高度可管理性的产品，在一个2U机箱中提供了磁带库的特性和3.2TB的本机容量。同时，它能够提供强大的自动备份和恢复功能，适用于容灾系统；而基于网络的管理允许对许多地点进行集中管理。值得一提的是，它以自动加载磁带机的价格提供带库的特性。

　　大型数据库备份：磁带库+DP软件

　　对于大型企业来说，HP磁带库加上 HP OpenView Storage Data Protector 5.1软件，将为数据提供百分百的备份保险。其中，HP StorageWorks MSL5000系列磁带库为中档和部门级的企业提供全面的备份和恢复解决方案。HP StorageWorks ESL9000 系列磁带库为高端企业客户的关键任务数据存储需求提供了高度可靠的备份和恢复解决方案。ESL9000系列磁带库是直接 SCSI 和 SAN 环境的理想选择，在它紧凑的覆盖区域内提供了组件级冗余、高可用性以及企业级容量。它们提供了独特投资保护，那就是将来多单元可伸缩性和一个PCI底板，以便将来进行功能扩展。ESL 9000系列磁带库简化了对备份和恢复活动的管理，同时在数据保护需求中具有独特的价值。

地下清泉 2007-06-13 11:24 发表评论