NetBackup™ 重复数据删除指南

关于采样和预测缓存

MSDP 使用内存（最大为在 MaxCacheSize 中配置的大小）缓存指纹，以实现高效的重复数据删除查找。NetBackup 版本 10.1 中引入的新指纹缓存查找数据方案可减少内存使用率。它将当前内存缓存拆分为两部分，采样缓存 (S-cache) 和预测缓存 (P-cache)。S-cache 可缓存来自每个备份的一定百分比的指纹，并用于从先前备份的样本中查找类似数据以进行重复数据删除。P-cache 可缓存最有可能在不久的将来用于重复数据删除查找的指纹。

在作业开始时，来自上次备份的一小部分指纹将作为初始种子设定加载到 P-cache 中。使用 P-cache 完成指纹查找以查找重复项，并从 S-cache 样本中搜索查找失误，以查找先前备份数据的可能匹配项。如果找到，则会将部分匹配的备份指纹加载到 P-cache 中以用于将来的重复数据删除。

对于具有 MSDP 群集部署（包括 Flex Scale、AKS 和 EKS 部署）的本地和云存储卷，启用了 S-cache 和 P-cache 指纹查找方法。对于 NetBackup Appliance、Flex 和 BYO 等 MSDP 非群集平台的纯云卷，也启用了此方法。对于支持纯云卷的平台，本地卷仍使用原始缓存查找方法。可以在配置文件 contentrouter.cfg 的“缓存”部分下找到 S-cache 和 P-cache 配置参数。

非群集部署的默认值：

群集部署的默认值：

对于 MSDP 群集部署，本地卷和云卷共享相同的 S-cache 和 P-cache 大小。对于非群集部署，S-cache 和 P-cache 仅适用于云卷，但 MaxCacheSize 仍用于本地卷。如果系统不用于云备份，MaxPredictiveCacheSize 和 MaxSamplingCacheSize 可以设置为较小的值，例如 1% 或 128 MiB。MaxCacheSize 可以设置为较大的值，例如 50% 或 60%。同样，如果系统仅用于云备份，MaxCacheSize 可设置为 1% 或 128 MiB，MaxPredictiveCacheSize 和 MaxSamplingCacheSize 可以设置为较大的值。

S-cache 大小由后端 MSDP 容量或后端数据中的指纹数决定。假设平均段大小为 32 KB，则每 TB 后端容量的 S-cache 大小约为 100 MB。P-cache 大小由并行作业数和传入数据的数据区域或工作集决定。每个数据流的工作集为 250 MB（约 500 万个指纹）。例如，100 个并行数据流最少需要 25 GB (100*250MB) 内存。对于具有多个数据流和大型数据集的某些应用程序，工作集可能更大。由于 P-cache 用于指纹重复数据删除查找，并且所有加载到 P-cache 中的指纹都将保留在那里，直到达到其分配的容量，P-cache 大小越大，潜在的查找命中率越高，内存使用率也就越高。大小不足的 S-cache 或 P-cache 会导致重复数据删除率降低，而大小过大会增加内存成本。