好。一些考虑因素
我使用Backup Exec 12.x / 13.x,具有包含Exchange的服务器2003/2008环境。
我发生了备份到磁盘(完全/差异)的情况,与备份到LTO(完全/差异)的状况无关。由于多个原因,我宁愿不只是要从磁盘备份到磁带,而是要直接将备份备份到LTO。
我目前只有一个LTO-3驱动器,没有任何装载程序/机器人/库。LTO驱动器包装盒中装有Adaptec 39160 Ultra160 SCSI卡。我目前使用一盘录像带来充满(每周一盘),用一盘录像带来比较(每星期取出磁带前四天)。完整备份正在突破372.5GB的障碍,当备份没有完成时,它将在星期一早上等待磁带。
沃德提到在正常工作时间之后的星期一下午/晚上放第二根LTO3完整磁带。问题与下面进行比较:
正常流量
- 星期五插入LTO3磁带1以进行第1周的完整备份
- 星期一插入LTO3胶带用于差分
- 星期二,星期三,星期四差异使用星期一插入的磁带
- 重复第2周
2条LTO3磁带可实现完整备份
- 星期五插入LTO3磁带1以进行第1周的完整备份
- 星期一插入LTO3磁带2以进行第1周的完整备份
- 星期一插入LTO3磁带1以进行第1周的完整备份(用于验证过程)
- 星期一插入LTO3磁带2以进行第1周的完整备份(用于验证过程)
- 星期二插入LTO 3差分胶带
- 星期三,星期四差异使用星期二插入的磁带
- 重复第2周
到星期一,多余的磁带交换会吃掉6个多小时(从我放入第二个磁带的时间开始)。如果我在下午5点这样做,我会一直待到午夜几乎要交换磁带。这还不包括等待磁带的星期六/星期日/星期一的空闲时间。
现在,我可以关闭验证过程并保存两次磁带交换,并将“备份”过程缩短几个小时,但是如果我不关闭验证,我就不能只放磁带2并在一天结束时走开。将备份溢出到第二个磁带上会延长备份过程,但同时也会
- 增加循环中的磁带数量(成本)
- 增加运输中的磁带数量(前往现场存放的公文包的大小/重量)
- 使我下班后仍待在现场进行验证过程,从而增加了备份过程的复杂性
- 增加了在我的办公室(服务器室旁边)管理备份/还原的复杂性。对于在家中处理此类问题,这要翻两番。
是的,我星期六不去那里坐6个多小时,然后照看磁带机。我想工作以外的生活。MF发生12小时后,它们已经很糟糕了。我不会将自己永久固定在每周工作6天的工作上。
磁带机是Dell PowerVault 110T LTO3。备份服务器仅使用单个NIC在千兆以太网上,并且可以在大约12小时内填满整个磁带。
我可以更改备份过程,以将一台更密集的服务器分离到自己的LTO上进行完全备份,以暂时搁置这一决定,但是不久之后,我想我需要选择以下选项之一:
购买LTO-3驱动器,并利用仅有的第二个物理磁带。这是不太理想的选择,并且只有在LTO-3驱动器比LTO-4驱动器便宜得多的情况下才有意义。购买LTO-4驱动器,并使用LTO-4磁带进行完整备份,并使用LTO-3磁带进行差异备份,直到LTO-3磁带旋转出来并且新的LTO4磁带与LTO3磁带的价格相符。这可能使我无需更换磁带就可以进行多年的周末备份。由于LTO4的最低速度低于LTO3,因此这也部分解决了擦鞋问题。
购买可以自动装入磁带的东西。我假设没有可以添加到PowerVault 110T中的东西,这意味着要购买一台新的设备,该设备在同一单元中具有磁带和装载器。与仅获得驱动器和手动加载磁带相比,这可能不具有成本效益,但是自动加载LTO4将是最终的便利。我让上面的老板在单个磁带驱动器和自动加载驱动器之间做出选择。
埃文·安德森(Evan Anderson)在另一种解决方案中提到,您可以在此价格范围内购买硬盘
LTO-4 (internal drive, 1 tape / day) - $2,766.00
LTO-4 (autoloader, 1 tape / day) - $4,566.00
但是我不知道他或您对实际驱动器和(如果需要)控制器的建议的具体细节。如果您不介意查找它,或者只是给我一个品牌和型号,请给我显示一个新蛋URL(或Dell,HP或您喜欢的任何供应商的名字),如果您不介意查找它,或者只给我一个品牌和型号,我会很乐意腿自己动手。
我正在寻找一些必要的购买方式,以免这种备用轮换变得太麻烦了。我大概有几个月了。
Xenny提到了服务器的年龄和备份速度。Exchange服务器已使用6年(尽管硬盘驱动器要新得多)。消费者级别的sata驱动器(WD6400AAKS)混合使用了两台具有4年历史的服务器。我认为“新”的服务器已有2年的历史了。
从旧的交换服务器备份到磁盘的速度高达2184 MB / min,但是在此设置中,通常备份到磁盘的速度与备份到磁带的速度一样慢。实际上,备份到磁盘有时比备份到LTO-3磁带驱动器慢。我还遇到了驱动器故障以及缺少托架以添加更多驱动器的问题。通常,到磁盘备份比LTO3 / 4过渡甚至是一个更大的问题,但是如果我想输入有关该主题的信息,则这是关于serverfault的另一个问题。
我将从最近的备份中选择一些数字,以使您对速度有所了解。这不是完整的列表,但可以让您对所涉及的各种速度有所了解。我计划尽快以oldspeed MB / min newspeed MB / min 的格式进行更新,其中oldspeed是旧的SCSI 320 LTO3,而newspeed是SAS LTO4。
DC C:〜850 MB / min
DC系统状态〜700 MB / min
Exchange Server C:和系统状态〜500 MB / min〜600 MB / min
Exchange Server D:〜1400 MB / min〜1200 MB / min
Exchange Server首先存储组〜1100 MB /分钟〜700MB /分钟
网络服务器C:〜600 MB /分钟〜950 MB /分钟
网络服务器E:〜1700 MB /分钟〜1950 MB /分钟
文件服务器C:〜500 MB /分钟
文件服务器E:〜1500 MB /分钟〜2200 MB /分钟
文件服务器G:〜1800 MB /分钟〜2400 MB /分钟
文件服务器的系统状态〜650 MB /分钟
faxserver C:〜400 MB /分钟〜550 MB /分钟
计费服务器C:〜1300 MB / min〜1775 MB / min
计费服务器D:〜1500 MB / min〜2250 MB / min
计费SQL实例〜1600 MB / min
应用服务器C:和系统状态〜700 MB / min〜900 MB /分钟
备份服务器C:700 MB /分钟〜1800 MB /分钟
备份服务器E:1350 MB /分钟〜2900 MB /分钟
监视文件服务器我看到一些数字,使我认为RAID控制器正在抑制传输速率。控制器为SATA 1.5,但驱动器为3.0。在将卷从RAID 1更改为RAID 10之后,我发现备份速度没有增加。不幸的是,将持续读取速度提高一倍对备份到LTO3磁带驱动器没有影响。
通常,直接备份到LTO可以为我的服务器提供I / O限制的地方提供不错的基准。备份速度低于1500 MB / min的服务器通常是磁盘速度较慢的服务器,而那里备份的服务器和2400 MB / min之间的服务器仍然是低挂果。例如,Exchange 2003服务器的磁盘空间不足,并继续将“第一存储组”的数据库扩展到磁盘的较慢部分。该服务器将被具有更快处理器和更多磁盘的Exchange 2010服务器替换。其他服务器将获得磁盘升级和/或SSD。
http://en.wikipedia.org/wiki/Tape_drive提到“ 擦鞋时,它会显着影响可达到的数据速率以及驱动器和磁带寿命。” 但是没有提到擦鞋会降低磁带的有效容量。查看了银行提供的存档磁带后,我可以确认LTO3磁带上浪费了大约2%至15%的空间。距离我足够远,无法阻止我迁移到LTO4或自动装带器,但这可能很重要。对于使用Backup Exec的人,您可以通过以下方法计算擦鞋浪费:
- 进行备份作业,无需压缩即可备份大约100%的磁带本机容量。运行测试时,禁用驱动器和软件上的压缩。
- 在备份执行程序的媒体标签中查看,然后将“已用容量”列与“数据”列进行比较。如果关闭了压缩并且数字匹配,那么您根本就不会感到厌烦。
以我为例,我有一个存档的LTO3磁带,其中“使用”为272.4 GB,但“数据”仅为233.67 GB,另一个为400.6 GB,而后者为395.19 GB。我还尝试了不压缩的LTO4备份,仅使用786.77 GB的“数据”获得了833 GB的“已使用”。显然,根据我的环境,鞋底会有所不同,但是在此之前,我不打算进行测试。希望这可以使您清楚地知道如何计算备份环境中浪费了多少磁带。
编辑:http://www.fujifilmusa.com/shared/bin/LTO_Overview.pdf上的新信息,显示LTO3和LTO4的最低磁带速度。看起来IBM LTO4实际上具有比IBM LTO3更低的最低速度。无论哪种方式,我的平均服务器速度都太慢,以至于无法毫不费力地喂LTO3 / 4。我担心即使备份到磁盘本地卷也太慢而无法快速填充驱动器,但我必须对此进行测试。
我从上面的PDF中提取IBM全高驱动器信息
LTO4 : 30-120MB/s 800GB native (45-240MB/s compressed)
LTO3 : 40- 80MB/s 400GB native (60-160MB/s compressed)
LTO2 : 18- 35MB/s 200GB native (27- 70MB/s compressed)
LTO1 : 15- 15MB/s 100GB native (30- 30MB/s compressed)
更新:我用于备份的服务器开始出现停止错误,因此我将磁带机移至另一台服务器。旧的SCSI控制器是Adaptec 160,“新的”控制器是基于LSI的320(至少我认为外部连接器是320,因为服务器内部的4个硬盘驱动器在服务器管理中提到320 SCSI)。
新服务器的情况使我暂时无法备份到磁盘,直到获得用于直接连接存储的外部存储设备为止。总的来说,这次LTO讨论使我倾向于为服务器购买更多硬盘。我将进行重新配置RAID阵列的工作,以提高备份速度,并希望提高整体设置的可靠性。
更新2:下面的比较使用一个旧的文件服务器,其RAID控制器以〜40MB / s的速度限制所有传输,因此理想的速度约为2400MB / min。这大约是测试鞋擦边缘所需的速度。据推测,数据流不会完全规则,并且会在整个测试过程中强制进行速度匹配。
我不再知道我在旧LTO3驱动器的速度测试中使用的缓冲区大小和缓冲区计数,但是它并没有太大改变,通过调整缓冲区,我可能获得了100MB / min的增益。测试数据约为20GB扫描的tif和jpg。我在星期五的下午进行了这些测试,但我没有重复测试足够的时间来平均数据或清除无效数据。下班后进行测试,选择不同的数据以及其他变量可能会明显影响这些测试。
在所有测试中都使用相同的服务器。旧驱动器位于PCIx的320 SCSI LVD控制器上。新驱动器位于PCIe LSI 3801E SAS控制器上。驱动器控制器和/或LTO3磁带驱动器可能是瓶颈。我将不会测试单个组件,只会测试旧配对与新配对。运行Backup Exec的服务器具有4GB内存,32位Server 2008标准,奔腾D 3.2GHz双核CPU。
网络连接是通过1Gb交换机实现的,两个服务器都位于同一交换机上。我打开了“远程桌面连接”,但是随着备份的进行,该连接的Gb连接在最坏的情况下利用率不到50%,而平均利用率则高达25%。
因此,尽管测试方法很粗糙,但我相当有信心瓶颈不是我要忽略的变量。
简短的测试结果:
使用Dell LTO3驱动器和LTO3磁带压缩功能打开时,〜1500 MB / min,块大小为64KB(已测试许多缓冲区计数,此处列出了最佳结果)
使用带有LTO3磁带(与上面相同的磁带)的Quantum Superloader3 LTO 4驱动器以1800 MB / min的速度压缩打开,64KB块大小,64KB缓冲区大小,缓冲区计数10,高水位计数0,写单块模式打开,写SCSI传递通过模式开启
使用带有LTO3磁带(与上述相同的磁带)的Quantum Superloader3 LTO 4驱动器以〜2150 MB / min的速度压缩打开,256KB块大小,256KB缓冲区大小,缓冲区计数10,高水位计数0,写入单块模式为ON,写入SCSI传递在Quantum Superloader3 LTO 4驱动器上使用LTO3磁带(与上述相同的磁带)压缩关闭,256KB块大小,256KB缓冲区大小,缓冲区计数10,高水位计数0,写入模式下,以
大约2200 MB / min的速度通过模式ON,写入SCSI直通模式开启
使用Quantum Superloader3 LTO 4驱动器以〜2050 MB / min的速度打开LTO4磁带压缩,256KB块大小,256KB缓冲区大小,缓冲区计数10,高水位计数0,写单个块模式打开,写SCSI直通模式打开
〜2250 MB / min使用Quantum Superloader3 LTO 4驱动器,LTO4磁带压缩关闭,256KB块大小,256KB缓冲区大小,缓冲区计数10,高水位计数0,写入单块模式打开,写入SCSI直通模式打开
使用Quantum Superloader3 LTO 4驱动器以〜2050 MB / min的速度打开LTO4磁带压缩,256KB块大小,1MB缓冲区大小,缓冲区计数10,高水位计数0,写单个块模式打开,写SCSI直通模式打开
〜2300 MB使用Quantum Superloader3 LTO 4驱动器/ min,使用LTO4磁带压缩功能关闭,256KB块大小,1MB缓冲区大小,缓冲区计数10,高水位计数0,写入单块模式打开,写入SCSI直通模式打开
使用Quantum Superloader3 LTO 4驱动器以2200 MB / min的速度打开LTO4磁带压缩,256KB块大小,1MB缓冲区大小,缓冲区计数20,高水位计数0,写单个块模式打开,写SCSI直通模式打开
〜2300 MB使用Quantum Superloader3 LTO 4驱动器/ min,使用LTO4磁带压缩功能关闭,256KB块大小,1MB缓冲区大小,缓冲区计数20,高水位计数0,写入单块模式打开,写入SCSI直通模式打开
显然,调整块大小比缓冲区大小更重要。无论您使用的块大小或缓冲区大小如何,如果源数据无法满足磁带机的最低数据匹配率,关闭压缩都将获得更好的性能。不幸的是,这是每个驱动器设置,而不是每个作业或磁带格式设置,因此您不能仅将压缩限制为完全备份或仅限于LTO3。您还必须测试硬件/软件组合带来的问题。当然,对性能的影响很小,更重要的测试将是将完全备份的容量从600GB优化为800GB,而不是20GB。备份几周或几个月后,我将尝试再次更新。