Veritas NetBackup™ Deduplication 指南

Last Published:
Product(s): NetBackup (8.1.1)
Platform: Linux,UNIX,Windows
  1. 介绍 NetBackup Media Server Deduplication Option
    1.  
      关于 NetBackup Deduplication Option
    2.  
      NetBackup 8.1.1 的新增 MSDP 功能
  2. 规划部署
    1.  
      规划 MSDP 部署
    2.  
      NetBackup 命名约定
    3.  
      关于 MSDP 重复数据删除节点
    4.  
      关于 NetBackup 重复数据删除目标
    5.  
      关于 MSDP 存储容量
    6. 关于 MSDP 存储和连接要求
      1.  
        MSDP 的光纤通道和 iSCSI 比较
    7. 关于 NetBackup 介质服务器重复数据删除
      1.  
        关于 MSDP 存储服务器
      2.  
        关于 MSDP 负载平衡服务器
      3.  
        关于 MSDP 服务器要求
      4.  
        关于 MSDP 不支持的配置
    8. 关于 NetBackup Client Direct 重复数据删除
      1.  
        关于 MSDP 客户端重复数据删除要求和限制
    9. 关于 MSDP 远程办公客户端重复数据删除
      1.  
        关于 MSDP 远程客户端数据安全性
      2.  
        关于远程客户端备份预定
    10.  
      关于 NetBackup Deduplication Engine 凭据
    11.  
      关于 MSDP 的网络接口
    12.  
      关于 MSDP 端口用法
    13.  
      关于 MSDP 优化合成备份
    14.  
      关于 MSDP 和 SAN 客户端
    15.  
      关于 MSDP 优化复制和主从复制
    16. 关于 MSDP 性能
      1.  
        文件大小如何影响 MSDP 重复数据删除率
    17.  
      关于 MSDP 流处理程序
    18. MSDP 部署最佳做法
      1.  
        使用完全限定的域名
      2.  
        关于扩展 MSDP
      3.  
        将初始完全备份发送到存储服务器
      4.  
        逐渐增加 MSDP 作业数
      5.  
        逐渐引入 MSDP 负载平衡服务器
      6.  
        逐渐实现 MSDP 客户端重复数据删除
      7.  
        使用 MSDP 压缩和加密
      8.  
        关于 MSDP 的备份流的最佳数量
      9.  
        关于 MSDP 的存储单元组
      10.  
        关于保护 MSDP 数据
      11.  
        保存 MSDP 存储服务器配置
      12.  
        规划磁盘写入缓存
  3. 置备存储
    1.  
      关于置备 MSDP 存储
    2.  
      不要修改 MSDP 存储目录和文件
    3.  
      关于添加更多 MSDP 存储
    4.  
      关于 NetBackup MSDP 的卷管理
  4. 重复数据删除的授权
    1.  
      关于 MSDP 许可证
    2.  
      授权 NetBackup MSDP
  5. 配置重复数据删除
    1.  
      配置 MSDP 服务器端重复数据删除
    2.  
      配置 MSDP 客户端重复数据删除
    3.  
      关于 MSDP 重复数据删除多线程代理
    4. 配置重复数据删除多线程代理行为
      1.  
        MSDP mtstrm.conf 文件参数
    5.  
      配置重复数据删除插件与多线程代理的交互
    6.  
      关于 MSDP 指纹识别
    7.  
      关于 MSDP 指纹缓存
    8. 配置 MSDP 指纹缓存行为
      1.  
        MSDP 指纹缓存行为选项
    9.  
      关于将远程客户端重复数据删除的 MSDP 指纹缓存设定为种子
    10.  
      在客户端上配置 MSDP 指纹缓存种子设定
    11. 在存储服务器上配置 MSDP 指纹缓存种子设定
      1.  
        NetBackup seedutil 选项
    12.  
      启用对 96 TB MSDP 的支持
    13. 关于使用 KMS 服务的 MSDP 加密
      1.  
        升级 MSDP KMS
    14. 为介质服务器重复数据删除池配置存储服务器
      1.  
        MSDP 存储路径属性
      2.  
        MSDP 网络接口属性
    15.  
      配置 PureDisk 重复数据删除池的存储服务器
    16.  
      关于 NetBackup 重复数据删除的磁盘池
    17. 配置用于重复数据删除的磁盘池
      1.  
        介质服务器重复数据删除池属性
    18.  
      为 96 TB MSDP 支持创建数据目录
    19.  
      向 96 TB 的介质服务器重复数据删除池添加卷
    20. 配置介质服务器重复数据删除池存储单元
      1.  
        介质服务器重复数据删除池存储单元属性
      2.  
        MSDP 存储单元建议
    21.  
      为 MSDP 客户端重复数据删除配置客户端属性
    22.  
      禁用客户端的 MSDP 客户端重复数据删除
    23.  
      关于 MSDP 压缩
    24.  
      关于 MSDP 加密
    25.  
      MSDP 压缩和加密设置表
    26.  
      为 MSDP 备份配置加密
    27.  
      为 MSDP 优化复制配置加密
    28.  
      关于 MSDP 的滚动数据转换机制
    29.  
      滚动数据转换模式
    30.  
      MSDP 加密行为和兼容性
    31.  
      为 MSDP 配置优化合成备份
    32.  
      关于用于 MSDP 重复和复制的单独网络路径
    33.  
      为 MSDP 复制配置单独的网络路径
    34. 关于同一域内的 MSDP 优化复制
      1. 关于同一域内 MSDP 优化复制的介质服务器
        1.  
          关于同一域内的 MSDP 推送复制
        2.  
          关于同一域内的 MSDP 提取复制
    35. 在同一 NetBackup 域内配置 MSDP 优化复制
      1. 配置 NetBackup 优化复制行为
        1.  
          使用命令行设置 NetBackup 配置选项
    36.  
      关于到其他域的 MSDP 复制
    37. 配置以不同 NetBackup 域为目标的 MSDP 复制
      1. 关于 NetBackup 自动映像复制
        1.  
          一对多自动映像复制模型
        2.  
          对自动映像复制进行级联的模型
        3.  
          关于复制的域关系
        4.  
          关于自动映像复制的复制拓扑结构
        5. 查看自动映像复制的复制拓扑结构
          1.  
            MSDP 复制的卷属性输出示例
      2.  
        关于自动映像复制的可信主服务器
      3.  
        添加可信主服务器
      4.  
        删除可信主服务器
      5.  
        启用 NetBackup 群集主服务器节点间身份验证
      6. 将 MSDP 复制的目标配置为远程域
        1.  
          MSDP 复制的目标选项
    38.  
      关于配置 MSDP 优化复制和复制带宽
    39.  
      关于存储生命周期策略
    40.  
      关于自动映像复制所需的存储生命周期策略
    41. 创建存储生命周期策略
      1.  
        “存储生命周期策略”对话框设置
    42.  
      关于 MSDP 备份策略配置
    43.  
      创建备份策略
    44. “弹性网络”属性
      1.  
        弹性连接资源使用
    45.  
      指定弹性连接
    46.  
      添加 MSDP 负载平衡服务器
    47.  
      关于 NetBackup 客户端上的可变长度重复数据删除
    48.  
      关于 MSDP pd.conf 配置文件
    49. 编辑 MSDP pd.conf 文件
      1.  
        MSDP pd.conf 文件参数
    50.  
      关于 MSDP contentrouter.cfg 文件
    51.  
      关于保存 MSDP 存储服务器配置
    52.  
      保存 MSDP 存储服务器配置
    53.  
      编辑 MSDP 存储服务器配置文件
    54.  
      设置 MSDP 存储服务器配置
    55.  
      关于 MSDP 主机配置文件
    56.  
      删除 MSDP 主机配置文件
    57.  
      重置 MSDP 注册表
    58. 关于保护 MSDP 目录库
      1.  
        关于 MSDP 卷影目录库
      2.  
        关于 MSDP 目录库备份策略
    59.  
      更改 MSDP 卷影目录库路径
    60.  
      更改 MSDP 卷影目录库日程表
    61.  
      更改 MSDP 目录卷影副本数
    62. 配置 MSDP 目录库备份
      1.  
        MSDP drcontrol 选项
    63.  
      更新 MSDP 目录库备份策略
    64.  
      关于 MSDP FIPS 遵从性
  6. 使用 NetBackup CloudCatalyst 配置云的重复数据删除
    1. 使用 NetBackup CloudCatalyst 将经过重复数据删除的数据上载到云
      1. 优化复制用于将数据从 MSDP 存储服务器复制到 CloudCatalyst 存储服务器(首选用例)
        1.  
          将 MSDP 存储服务器扇入到单个 CloudCatalyst 存储服务器
      2.  
        备份直接转到 CloudCatalyst 存储服务器
    2.  
      CloudCatalyst 要求和限制
    3.  
      将 Linux 介质服务器配置为 CloudCatalyst 存储服务器
    4. 配置用于云的重复数据删除的 CloudCatalyst 存储服务器
      1.  
        如何配置 NetBackup CloudCatalyst Appliance
      2.  
        如何将 Linux 介质服务器配置为 CloudCatalyst 存储服务器
      3.  
        将 CloudCatalyst 存储服务器配置为 MSDP 存储服务器的重复数据删除的目标
      4.  
        为 NetBackup CloudCatalyst 配置存储生命周期策略
    5.  
      关于 CloudCatalyst esfs.json 配置文件
    6.  
      关于 CloudCatalyst 缓存
    7.  
      控制使用 CloudCatalyst 时流向云的数据流量
    8.  
      配置 CloudCatalyst 推送或提取优化复制
    9.  
      淘汰 CloudCatalyst 云存储
    10.  
      NetBackup CloudCatalyst 工作流程
    11.  
      CloudCatalyst 的灾难恢复
  7. 监视重复数据删除活动
    1.  
      监视 MSDP 重复数据删除率
    2. 查看 MSDP 作业详细信息
      1.  
        MSDP 作业详细信息
    3.  
      关于 MSDP 存储容量和使用情况报告
    4.  
      关于 MSDP 容器文件
    5.  
      查看 MSDP 容器文件中的存储使用情况
    6.  
      查看 MSDP 磁盘报告
    7.  
      关于监视 MSDP 进程
    8.  
      对自动映像复制作业的报告
  8. 管理重复数据删除
    1. 管理 MSDP 服务器
      1.  
        查看 MSDP 存储服务器
      2.  
        确定 MSDP 存储服务器状态
      3.  
        查看 MSDP 存储服务器属性
      4.  
        设置 MSDP 存储服务器属性
      5.  
        更改 MSDP 存储服务器属性
      6.  
        清除 MSDP 存储服务器属性
      7.  
        关于更改 MSDP 存储服务器名称或存储路径
      8.  
        更改 MSDP 存储服务器名称或存储路径
      9.  
        删除 MSDP 负载平衡服务器
      10.  
        删除 MSDP 存储服务器
      11.  
        删除 MSDP 存储服务器配置
    2. 管理 NetBackup Deduplication Engine 凭据
      1.  
        确定具有重复数据删除凭据的介质服务器
      2.  
        添加 NetBackup Deduplication Engine 凭据
      3.  
        更改 NetBackup Deduplication Engine 凭据
      4.  
        从负载平衡服务器上删除凭据
    3. 管理介质服务器重复数据删除池
      1.  
        查看介质服务器重复数据删除池
      2.  
        确定介质服务器重复数据删除池状态
      3.  
        更改介质服务器重复数据删除池状态
      4.  
        查看介质服务器重复数据删除池属性
      5.  
        设置“介质服务器重复数据删除池”属性
      6. 更改介质服务器重复数据删除池属性
        1.  
          如何解决自动映像复制的卷更改
      7.  
        清除“介质服务器重复数据删除池”属性
      8.  
        确定 MSDP 磁盘卷状态
      9.  
        更改 MSDP 磁盘卷状态
      10.  
        清点 NetBackup 磁盘池
      11.  
        删除介质服务器重复数据删除池
    4.  
      删除备份映像
    5.  
      关于 MSDP 队列处理
    6.  
      手动处理 MSDP 事务队列
    7.  
      关于 MSDP 数据完整性检查
    8. 配置 MSDP 数据完整性检查行为
      1.  
        MSDP 数据完整性检查配置参数
    9.  
      关于管理 MSDP 存储读取性能
    10. 关于 MSDP 存储基址重置
      1.  
        MSDP 服务器端基址重置参数
    11.  
      关于 MSDP 数据删除过程
    12.  
      调整 MSDP 存储分区的大小
    13.  
      MSDP 还原的工作原理
    14.  
      配置 MSDP 直接还原到客户端
    15.  
      关于还原远程站点上的文件
    16.  
      关于从目标主服务器域上的备份进行还原
    17.  
      指定还原服务器
  9. 恢复 MSDP
    1.  
      关于恢复 MSDP 目录库
    2.  
      从卷影副本还原 MSDP 目录库
    3.  
      从 MSDP 存储服务器磁盘故障中恢复
    4.  
      从 MSDP 存储服务器故障中恢复
    5.  
      在执行 NetBackup 目录库恢复后恢复 MSDP 存储服务器
  10. 替换 MSDP 主机
    1.  
      替换 MSDP 存储服务器主机计算机
  11. 卸载 MSDP
    1.  
      关于卸载 MSDP
    2.  
      停用 MSDP
  12. 重复数据删除体系结构
    1.  
      MSDP 服务器组件
    2.  
      介质服务器重复数据删除备份进程
    3.  
      MSDP 客户端组件
    4.  
      MSDP 客户端重复数据删除备份过程
  13. 故障排除
    1. 关于统一日志记录
      1.  
        关于使用 vxlogview 命令查看统一日志
      2.  
        使用 vxlogview 查看统一日志示例
    2. 关于旧式日志记录
      1.  
        为 MSDP 创建 NetBackup 日志文件目录
    3.  
      NetBackup MSDP 日志文件
    4. 对 MSDP 安装问题进行故障排除
      1.  
        在 SUSE Linux 上进行 MSDP 安装失败
    5. 对 MSDP 配置问题进行故障排除
      1.  
        MSDP 存储服务器配置失败
      2.  
        MSDP 数据库系统错误 (220)
      3.  
        “找不到 MSDP 服务器”错误
      4.  
        MSDP 配置期间许可证信息失败
      5.  
        磁盘池向导不显示 MSDP 卷
    6. 对 MSDP 操作问题进行故障排除
      1.  
        验证 MSDP 服务器是否具有足够内存
      2.  
        MSDP 备份或复制作业失败
      3.  
        MSDP 客户端重复数据删除失败
      4.  
        卸载 MSDP 卷后,该卷的状态将更改为“关闭”
      5.  
        MSDP 错误、延迟响应和挂起
      6.  
        无法删除 MSDP 磁盘池
      7.  
        MSDP 介质打开错误 (83)
      8.  
        MSDP 介质写入错误 (84)
      9.  
        MSDP 未成功处理任何映像 (191)
      10.  
        MSDP 存储已满情况
      11.  
        MSDP 目录库备份故障排除
    7.  
      查看 MSDP 磁盘错误和事件
    8.  
      MSDP 事件代码和消息
    9. CloudCatalyst 问题故障排除
      1. CloudCatalyst 日志
        1.  
          esfs_storage 中的错误消息
        2.  
          esfs_filesystem 中的错误消息
      2. 使用云存储服务器配置向导时遇到的问题
        1.  
          无法选择所需的介质服务器
        2.  
          无法选择“重复数据删除”选项
        3. 存储服务器创建状态错误
          1.  
            登录凭据或证书失败消息
          2.  
            无法添加凭据
      3. 磁盘池问题
        1.  
          由于超时问题导致的磁盘池创建问题
        2.  
          每个 CloudCatalyst 存储服务器有一个磁盘池
      4. 云存储服务器配置期间出现的问题
        1.  
          “介质服务器”选项卡中没有可用于添加凭据的介质服务器
        2.  
          介质服务器添加凭据失败消息
      5.  
        状态码 191:未成功处理任何映像
      6.  
        由于本地缓存目录已满导致的介质写入错误 (84)
      7.  
        CloudCatalyst 存储服务器关闭后无法重新启动 ESFS
      8.  
        重新启动 vxesfsd 进程
      9.  
        重新启动 vxesfsd 时出现问题
      10. CloudCatalyst 疑难解答工具
        1.  
          esfs_cleanup.sh 脚本
        2.  
          esfs_check 一致性检查工具
        3.  
          setlsu_ioctl 工具
  14. 附录 A. 迁移到 MSDP 存储
    1.  
      从 PureDisk 迁移到 NetBackup MSDP
    2.  
      从其他存储类型迁移到 MSDP

MSDP 介质写入错误 (84)

表:介质写入错误原因 介绍了针对“介质服务器重复数据删除池”备份或复制期间可能发生的介质写入错误的解决方案。

有关更复杂的解决方案的介绍,另请参见后面几个小节:

表:介质写入错误原因

  

NetBackup Deduplication Engine (spoold) 太忙而无法响应。

检查“磁盘日志”报告是否存在包含名称 PureDisk 的错误。检查磁盘监视服务日志文件以获取来自重复数据删除插件的详细信息。

请参见查看 MSDP 磁盘报告

数据删除正在运行。

在删除数据的同时无法备份数据。

请参见关于 MSDP 队列处理

某个用户篡改了存储。

用户不能将文件添加到存储,不能更改存储上的文件,不能从存储删除文件,或者不能更改存储上的文件权限。如果添加了文件,请将其删除。

增大了存储容量。

如果增大了存储,必须在存储服务器上重新启动 NetBackup 服务,以便识别新容量。

存储已满。

如有可能,请增大存储容量。

请参见关于添加更多 MSDP 存储

重复数据删除池已关闭。

请将状态更改为启动。

请参见更改介质服务器重复数据删除池状态

防火墙端口未打开。

确保端口 10082 和 10102 在重复数据删除主机之间的任何防火墙中处于打开状态。

主机名解析问题

如果客户端无法解析服务器的主机名,则客户端重复数据删除可能会失败。更具体地说,如果为存储服务器配置的是短名称,而客户端尝试解析完全限定的域名,则可能出现该错误

要确定客户端为存储服务器使用了哪个名称,请检查客户端上的重复数据删除主机配置文件。

请参见关于 MSDP 主机配置文件

要解决此问题,请配置您的网络环境,以便存储服务器名称的所有变体都可以解析。

Veritas 建议您使用完全限定的域名。

请参见使用完全限定的域名

PureDisk 存储的复制作业失败

注意:

NetBackup 仅在 NetBackup 5000 系列设备上支持“PureDisk 重复数据删除池”存储。

存在大量小文件时,PureDisk 存储的复制作业可能失败。如果存储单元最大片段是默认设置,可能会发生此故障。

NetBackup 作业详细信息中可能出现如下类似消息:

2/12/2013 2:33:20 AM - Critical bpdm(pid=25204) Storage Server Error:
 (Storage server: PureDisk: msdp.example.com) async_get_job_status: 
 Replication started but failed to complete successfully:  __process_batch:
 CRStoreDO failed: broken pipe, DO fingerprint d6f2521a5c66c54225ecd6a4c92. 
 Look at the replication logs on the source storage server for more
 information. V-454-105
2/12/2013 2:33:22 AM - Critical bpdm(pid=25204) sts_copy_extent failed: 
 error 2060014 operation aborted       
2/12/2013 2:33:22 AM - end writing; write time: 3:39:53
2/12/2013 2:33:39 AM - Error bpduplicate(pid=5300) host 
 msdp.example.com backup id msdp.example.com_1360303271 optimized 
 duplication failed, media write error (84). 
2/12/2013 2:33:39 AM - Info msdp.example.com(pid=25204) 
 StorageServer=PureDisk:msdp.example.com; Report=PDDO Stats for 
 (msdp.example.com): scanned: 0 KB, CR sent: 0 KB, CR sent over FC:
 0 KB, dedup: 0.0%, cache disabled
2/12/2013 2:33:40 AM - Error bpduplicate(pid=5300) Duplicate of backupid
 msdp.example.com_1360303271 failed, media write error (84).    
2/12/2013 2:33:40 AM - Error bpduplicate(pid=5300) Status = no images 
 were successfully processed.      
2/12/2013 2:33:40 AM - end Duplicate; elapsed time: 3:41:03 media write 
 error(84)

处理复制操作的 PureDisk 内容路由器日志文件中也可能会出现如下类似消息。日志文件所在目录对应于执行复制操作的内容路由器的连接。目录的名称是 NetBackup 存储服务器 IP 地址,位于内容路由器 /Storage/log/spoold 目录下。

spad/Store/2/266020624-1360833685.log:July 14 04:12:03 ERR [1081665856]:
25112: DO: DO 065ab494d80277148c559071d007bde1: DO record size of 
378652257 bytes is larger than the maximum allowed size of 335544320 
bytes: DO has too many segments
spad/Store/2/266020624-1360833685.log:February 14 04:12:03 ERR 
[1081665856]: 8413608: Store terminated due to a local processing 
error at: Sun Jul 14 04:12:03 2013

要解决此问题,请减小代表了 PureDisk 存储的 NetBackup 存储单元的片段大小。根据源存储内容,可能需要显著减小片段大小。