ppl*_*ppl 12 tape backupexec lto-3
好的。一些考虑因素
我使用 Backup Exec 12.x/13.x,有服务器 2003/2008 环境,包括 Exchange。
我有备份到磁盘(完整/差异)发生,独立于备份到 LTO(完整/差异)。出于多个原因,我宁愿不只是从磁盘备份到磁带,而是希望将备份直接备份到 LTO。
我目前有一个 LTO-3 驱动器,没有任何加载器/机器人/库。为 LTO 驱动器提供服务的盒子中有一块Adaptec 39160 Ultra160 SCSI 卡。我目前使用一盘完整的磁带(每周一盘)和一盘差异磁带(一周四天,然后取出磁带)。完整备份正在突破 372.5GB 的障碍,当它完成时,备份在周六没有完成,它仍在等待周一早上的磁带。
Ward 提到在正常工作时间之后的周一下午/晚上放置第二个 LTO3 完整磁带。与此的问题比较如下:
正常流量
2 个 LTO3 磁带用于完整备份流
额外的磁带交换在周一持续了 6 个多小时(从我放入第二个磁带的时间开始)。如果我在下午 5 点这样做,我会在这里直到几乎午夜交换磁带。这不算周六/周日/周一等待磁带的空闲时间。
现在我可以关闭验证过程并保存两次磁带交换并将“备份”过程缩短几个小时,但如果我不关闭验证,我不能只是将磁带 2 放入并在一天结束时走开. 将备份溢出到第二个磁带上会延长备份过程,但它也会
是的,周六我不会去那里坐 6 个多小时并照看磁带驱动器。我想要工作之外的生活。12 小时天 MF 发生时已经够糟糕了。我不会将自己固定在每周工作 6 天的时间里。
磁带机是 Dell PowerVault 110T LTO3。备份服务器位于千兆以太网上,仅使用一个 NIC,可以在大约 12 小时内填满整个磁带。
我可以更改备份过程,将其中一台更密集的服务器分离到它自己的 LTO 上的完整备份,以暂时阻止此决定,但很快我想我需要选择以下选项之一:
购买一个 LTO-3 驱动器并利用第二个可用的物理磁带。这是一个不太理想的选择,只有在 LTO-3 驱动器比 LTO-4 驱动器便宜得多的情况下才有意义,但事实并非如此。
购买 LTO-4 驱动器并使用 LTO-4 磁带进行完整备份,并使用 LTO-3 磁带进行差异化,直到 LTO-3 磁带轮换使用并且新的 LTO4 磁带与 LTO3 磁带的价格相匹配。这可能会让我在未来几年内完成周末备份,而不必交换磁带。这也部分解决了擦鞋问题,因为 LTO4 的最低速度低于 LTO3。
购买可以自动送入磁带的东西。我假设我无法向 PowerVault 110T 添加任何东西,这意味着购买一个新设备,它将磁带和加载器集成在一个单元中。与仅获得驱动器和手动加载磁带相比,这可能不符合成本效益,但自动加载 LTO4 将是最方便的。我会让我上面的老板在单磁带驱动器和自动加载驱动器之间做出决定。
埃文安德森在另一个解决方案中提到你可以在这个价格范围内购买驱动器
LTO-4 (internal drive, 1 tape / day) - $2,766.00
LTO-4 (autoloader, 1 tape / day) - $4,566.00
Run Code Online (Sandbox Code Playgroud)
但我不知道他或你会为实际驱动器和控制器推荐什么的具体细节。如果您不介意查找或只给我一个品牌和型号,请向我显示您的解决方案的新蛋 URL(或戴尔、惠普或任何您最喜欢的供应商),我会很乐意这样做自己的腿工作。
我希望在此备用轮换变得过于繁琐之前的一段时间内进行必要的购买。我大概还有几个月。
Xenny 提到了服务器的年龄和备份速度。Exchange 服务器已有 6 年的历史(尽管硬盘驱动器要新得多)。有几个 4 岁的服务器与消费级 sata 驱动器 (WD6400AAKS) 混合使用。我认为“新”的服务器此时已经 2 岁了。
从旧交换服务器备份到磁盘的速度高达 2184 MB/分钟,但通常在此设置中备份到磁盘与备份到磁带一样慢。事实上,备份到磁盘有时比备份到 LTO-3 磁带驱动器要慢。我也遇到过驱动器故障和缺少用于添加更多驱动器的托架的问题。一般来说,备份到磁盘比 LTO3/4 转换更重要,但如果我想就该主题进行输入,这属于有关 serverfault 的另一个问题。
我将从最近的备份中挑选一些数字,让您了解速度。这不是一个完整的列表,但可以让您了解所涉及的各种速度。我计划很快以oldspeed MB/min newspeed MB/min的格式更新它,其中 oldspeed 是旧的 SCSI 320 LTO3,而 newspeed 是 SAS LTO4。
DC C: ~850 MB/min
DC 系统状态 ~700 MB/min
Exchange Server C: 和系统状态~500 MB/min ~600 MB/min
Exchange Server D: ~1400 MB/min ~1200 MB/min
Exchange Server First存储组~1100 MB/min ~700MB/min
Webserver C: ~600 MB/min ~950 MB/min
Webserver E: ~1700 MB/min ~1950 MB/min
Fileserver C: ~500 MB/min
Fileserver E: ~1500 MB/min ~2200 MB/min 文件服务器
G: ~1800 MB/min ~2400 MB/min 文件服务器
系统状态 ~650 MB/min
传真服务器 C: ~400 MB/min ~550 MB/min
计费服务器 C:~1300 MB/min ~1775 MB/min
计费服务器 D:~1500 MB/min ~2250 MB/min
计费 SQL 实例 ~1600 MB/min
应用服务器 C:和系统状态~700 MB/min ~900 MB/min
备份服务器 C: 700 MB/min ~1800 MB/Min
备份服务器 E: 1350 MB/min ~2900 MB/min
监控文件服务器 我看到的数字让我认为 RAID 控制器阻碍了传输速率。控制器为 SATA 1.5,但驱动器支持 3.0。我注意到将卷从 RAID 1 更改为 RAID 10 并且备份速度没有增加。不幸的是,将持续读取速度加倍对 LTO3 磁带驱动器的备份没有影响。
一般来说,直接备份到 LTO 为我提供了一个不错的基准,表明我的服务器 I/O 限制在哪里。备份速度低于 1500 MB/min 的服务器通常在磁盘方面很慢,而在 2400 MB/min 之间的服务器仍然是低垂的果实。例如,Exchange 2003 服务器的磁盘空间越来越低,并继续将第一个存储组的数据库扩展到磁盘的较慢部分。该服务器将替换为具有更快处理器和更多磁盘的 Exchange 2010 服务器。其他服务器将获得磁盘升级和/或添加 SSD。
http://en.wikipedia.org/wiki/Tape_drive提到“当擦鞋发生时,它会显着影响可达到的数据速率,以及驱动器和磁带的寿命。” 但它没有提到擦鞋会降低磁带的有效容量。在查看了银行的存档磁带后,我可以确认 LTO3 磁带上浪费了大约 2% 到 15% 的空间。远不足以阻止我转向 LTO4 或自动装载机,但它可能很重要。对于那些使用 Backup Exec 的人,您可以通过以下方式计算擦鞋浪费:
就我而言,我有一个存档的 LTO3 磁带,“使用”容量为 272.4 GB,但“数据”容量仅为 233.67 GB,另一个容量为 400.6 GB,而“数据”容量为 395.19 GB。我还尝试在没有压缩的情况下备份到 LTO4,得到了 833 GB 的“使用”,只有 786.77 GB 的“数据”。显然擦鞋会因我的环境而异,但在此之前我没想过要测试它。希望这能让您清楚如何确定备份环境中浪费了多少磁带。
编辑:http : //www.fujifilmusa.com/shared/bin/LTO_Overview.pdf 上的新信息显示了 LTO3 和 LTO4 的最低磁带速度。看起来 IBM LTO4 实际上的最低速度比 IBM LTO3 低。无论哪种方式,我的普通服务器都太慢了,无法在不擦鞋的情况下提供 LTO3/4。我担心即使我对磁盘本地卷的备份也会太慢而无法快速提供驱动器,但我必须对其进行测试。
从上面的 PDF 中提取 IBM 全高驱动器信息我得到
LTO4 : 30-120MB/s 800GB native (45-240MB/s compressed)
LTO3 : 40- 80MB/s 400GB native (60-160MB/s compressed)
LTO2 : 18- 35MB/s 200GB native (27- 70MB/s compressed)
LTO1 : 15- 15MB/s 100GB native (30- 30MB/s compressed)
Run Code Online (Sandbox Code Playgroud)
更新:我用于备份的服务器开始出现停止错误,因此我将磁带驱动器移至另一台服务器。旧的 SCSI 控制器是 Adaptec 160,“新”控制器是基于 LSI 的 320(至少我假设外部连接器是 320,因为服务器内部的 4 个硬盘在服务器管理中提到了 320 SCSI)。
新的服务器情况使我暂时无法备份到磁盘,直到我获得用于直接连接存储的外部机箱。总的来说,这个 LTO 讨论让我为我的服务器购买更多的硬盘驱动器。我将努力重新配置 RAID 阵列以提高备份速度,并希望提高整体设置的可靠性。
更新 2:下面的比较使用了一个旧的文件服务器,它的 RAID 控制器以 ~40MB/s 的速度限制所有传输,所以理想的速度约为 2400MB/min。这是关于测试鞋的边缘闪光所需的速度。据推测,数据流不会完全有规律,并且几乎在整个测试过程中都会强制速度匹配。
我不再知道我在旧 LTO3 驱动器的速度测试中使用的缓冲区大小和缓冲区计数,但它根本没有改变它我通过调整缓冲区可能获得了 100MB/分钟的增益。测试数据是大约 20GB 的扫描 tifs 和 jpgs。我在周五下午做了这些测试,我没有重复测试足够多的时间来平均数据或以其他方式剔除无效数据。下班后测试、选择不同的数据和其他变量可能会显着影响这些测试。
在所有测试中使用相同的服务器。旧驱动器位于 PCIx 的 320 SCSI LVD 控制器上。新驱动器位于 PCIe LSI 3801E SAS 控制器上。驱动器控制器和/或 LTO3 磁带驱动器可能是瓶颈。我不会测试单个组件,只会测试旧配对与新配对。运行 Backup Exec 的服务器有 4GB 内存、32 位 Server 2008 标准、Pentium D 3.2GHz 双核 CPU。
网络连接是通过 1Gb 交换机实现的,两台服务器都在同一台交换机上。我打开了一个远程桌面连接,但随着备份和该连接的进行,Gb 连接在最坏的情况下使用率低于 50%,平均使用率接近 25%。
因此,尽管测试方法很粗糙,但我有理由相信瓶颈不在我忽略的变量中。
简短测试结果:
约 1500 MB/分钟,使用 Dell LTO3 驱动器和 LTO3 磁带压缩开启,64KB 块大小(测试了许多缓冲区计数,此处列出了最佳结果)
~1800 MB/min使用 Quantum Superloader3 LTO 4 驱动器和 LTO3 磁带(与上述相同的磁带)压缩打开,64KB 块大小,64KB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式打开,写入 SCSI pass-通过模式开启
~2150 MB/min使用 Quantum Superloader3 LTO 4 驱动器和 LTO3 磁带(与上面相同的磁带)压缩打开,256KB 块大小,256KB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式打开,写入 SCSI pass-通过模式开启
~2200 MB/min使用 Quantum Superloader3 LTO 4 驱动器和 LTO3 磁带(与上述相同的磁带)压缩关闭,256KB 块大小,256KB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式开启,写入SCSI 直通模式开启
~2050 MB/min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩开启,256KB 块大小,256KB 缓冲区大小,缓冲区计数 10,highwater 计数 0,写入单块模式开启,写入 SCSI 直通模式开启
~2250 MB /min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩关闭,256KB 块大小,256KB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式开启,写入 SCSI 直通模式开启
~2050 MB/min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩开启,256KB 块大小,1MB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式开启,写入 SCSI 直通模式开启
~2300 MB /min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩关闭,256KB 块大小,1MB 缓冲区大小,缓冲区计数 10,高水计数 0,写入单块模式开启,写入 SCSI 直通模式开启
~2200 MB/min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩开启,256KB 块大小,1MB 缓冲区大小,缓冲区计数 20,高水计数 0,写入单块模式开启,写入 SCSI 直通模式开启
~2300 MB /min使用 Quantum Superloader3 LTO 4 驱动器,LTO4 磁带压缩关闭,256KB 块大小,1MB 缓冲区大小,缓冲区计数 20,高水计数 0,写入单块模式打开,写入 SCSI 直通模式打开
很明显,调整块大小比缓冲区大小更重要。无论您使用的块或缓冲区大小如何,如果您的源数据跟不上磁带驱动器的最低数据匹配率,关闭压缩将获得更好的性能。不幸的是,这是按驱动器设置,而不是按作业或按磁带格式设置,因此您不能仅将压缩限制为完整备份或 LTO3。您还必须测试硬件/软件组合的问题有多大。当然,对性能的影响很小,更重要的测试是将 600GB 的完整备份优化到 800GB 而不是 20GB。完成几周或几个月的备份后,我会尝试再次更新。
另外,请注意,100MB/min 远低于使用 LTO 3 进行磁带流传输的最低速度,因此随着磁带的停止和启动,您可能会损失大量容量(即您可能会变得比 1.5 更好: 1 压缩,但这会在磁带上的数据间隙中丢失)。LTO 4 的情况可能会更糟,因为我认为最低速度已经提高。
磁盘 - 磁盘 - 磁带将帮助解决最低速度问题,并免费为您提供一些容量。
如果您不这样做,请强烈考虑对您正在备份的服务器上的磁盘进行某种预定的碎片整理。在相当现代的硬件上,1000 MB/分钟对于千兆以太网来说并不是一个很高的吞吐量水平。我希望即使在使用 2 年的机器上,您也应该能够获得 1800MB/分钟的速度(这只是以 30MB/秒的速度从服务器磁盘读取),因此还有改进的余地。
编辑:对于 LTO 3,您确实需要 256KB 的块大小以获得最佳性能。
WRT鞋亮了,如果缓冲区暂时空了,磁带没有时间倒带,所以它会在磁带上留下间隙。
备份不可避免地会超出您最初计划的容量。关于您的情况,我的建议和说法如下:
所以完整备份超出了一盘磁带的容量。然后使用两条胶带。
按照 Symantec 的建议继续执行磁盘备份,然后将这些磁盘备份备份到磁带。安排在几小时后使用较少资源时进行磁盘备份。安排在磁盘备份完成后的一天中的任何时间进行到磁带的备份,因为到磁带的备份不会对生产系统产生任何影响。
将本周的备份(完整备份和差异备份)视为同一备份集的一部分。如果每周需要两到三盘磁带,那就这样吧。
安排仅在您交换磁带的一周内进行磁带备份。
我有类似的情况,我使用的是 Dell powervault 110t lto2 驱动器,这就是我所做的:
星期六,我将完整备份到磁盘(备份到磁盘文件夹以进行完整备份)。
周日到周五我将增量备份到磁盘(另一个备份到磁盘文件夹以进行增量)。
周一到周五,我将完整备份和增量备份备份到磁盘文件夹的磁带上。当磁带达到其容量时,我将其更换。如果它在半夜达到容量,我会在第二天早上将其更换,然后磁带工作就会完成。
周五备份到磁带工作后,我会更换下周的磁带。我拿出的两盘磁带是本周的完整磁带和增量磁带,并进入我的 4 周轮换。现在我知道当前几周的所有备份数据都在一套磁带上,存储在异地。
冲洗并重复
| 归档时间: |
|
| 查看次数: |
14887 次 |
| 最近记录: |