Veritas Access トラブルシューティングガイド

Last Published:
Product(s): Access (7.4)
Platform: Linux
  1. 概要
    1.  
      トラブルシューティングについて
    2.  
      トラブルシューティングプロセスに関する一般的なヒント
    3.  
      トラブルシューティングプロセスの一般的な手法
    4.  
      サポートユーザーのアカウントについて
    5.  
      サポートユーザーのアカウントの設定
    6.  
      support ログインの使用
  2. 一般的なトラブルシューティング手順
    1.  
      一般的なトラブルシューティングの手順について
    2.  
      Veritas Access ログファイルの表示
    3.  
      イベントログについて
    4.  
      シェルアクティビティのログについて
    5.  
      CIFS ログレベルの設定
    6.  
      NetBackup クライアントのログレベルの設定とデバッグオプション
    7.  
      デバッグ情報の取得と送信
    8.  
      2 つの連続した OpenStack コマンド間の不十分な遅延によりエラーが発生する場合がある
  3. Veritas Access の監視
    1.  
      Veritas Access 操作の監視について
    2.  
      プロセッサアクティビティの監視
    3.  
      CPU とデバイスの使用率レポートの生成
    4.  
      ネットワークトラフィックの監視
    5.  
      ネットワークトラフィック詳細のエクスポートと表示
  4. 一般的な回復手順
    1.  
      一般的な回復手順について
    2.  
      サーバーの再起動
    3. サービスをオンラインにする
      1.  
        services コマンドの使用
    4.  
      異常なシャットダウンからのリカバリ
    5.  
      ネットワーク接続性のテスト
    6.  
      traceroute によるトラブルシューティング
    7.  
      traceroute コマンドの使用
    8.  
      ファイルシステムの metasave イメージの収集
    9.  
      イーサネットインターフェースカードの交換 (オンラインモード)
    10.  
      イーサネットインターフェースカードの交換 (オフラインモード)
    11.  
      Veritas Access ノードの交換
    12.  
      ディスクの交換
    13. レプリケーションの高速化
      1.  
        レプリケーションジョブの同期について
      2.  
        一時的なレプリケーションジョブの同期
    14.  
      パッチリリースまたはソフトウェアのアップグレードのアンインストール
  5. Veritas Access の階層としてのクラウド機能のトラブルシューティング
    1.  
      クラウド階層化のトラブルシューティングのヒント
    2.  
      クラウド階層からデータを読み書きする際の問題
    3.  
      クラウド階層化のエラーを確認するログの場所
  6. Veritas Access のインストールと設定に関する問題のトラブルシューティング
    1.  
      管理コンソール IP の検索方法
    2.  
      インストールログの表示
    3.  
      インストールの失敗または未完了
    4.  
      PCI ID をクラスタから除外する
    5.  
      ルートファイルシステムの破損から回復できない
    6.  
      storage disk list コマンドが何も返さない
  7. LTR アップグレードのトラブルシューティング
    1.  
      LTR アップグレードのトラブルシューティング用ログファイルの場所
    2.  
      LTR のアップグレード前の問題のトラブルシューティング
    3.  
      LTR のアップグレード後の問題のトラブルシューティング
  8. Veritas Access CIFS の問題のトラブルシューティング
    1.  
      ユーザーアクセスが CTDB ディレクトリ共有で拒否される
  9. Veritas Access GUI 起動問題のトラブルシューティング
    1.  
      GUI 起動問題の解決

Veritas Access ノードの交換

場合によっては、Veritas Access ノードを交換する必要があります。このセクションでは、Veritas Access ノードを交換する手順について説明します。

Veritas Access ノードを交換するには

  1. クラスタからノードを削除する前に、マスターノードは削除されないことを確認します。マスターノードを削除するには、管理コンソールを他のノードに切り替えることで、マスターノードを切り替える必要があります。
  2. ホットリロケーションをトリガしたくない場合は、マスターノードから次のチューニングパラメータを -1 に設定します。
    #vxtune node_reloc_timeout -1
    

    メモ:

    node_reloc_timeout を設定すると、storage_reloc_timeout は自動的に -1 に設定されます。

  3. 交換されるノードに cluster del コマンドを実行します。
    fss7310>cluster del fss7310_02
  4. すべてのプレックスが NODEVICE/DISABLED の状態にあることを確認します。#vxprint -p コマンドを使用して、プレックスの状態を調べることができます。
  5. 次のコマンドを実行してボリュームのプレックスを切断します。
    # vxplex -f -g <dg-name> -o rm dis <plex-name>
  6. vxdg rmdisk コマンドを使用して failed was: 状態のすべてのディスクをディスクグループから削除します。このコマンドは、マスターノードから実行する必要があります。
    #vxdg  - g <dg-name> rmdisk <disk-name>
  7. クラスタ内のすべてのノードから削除されたディスクに vxdisk rm コマンドを実行します。
    #vxdisk rm <disk-name>

    メモ:

    このコマンドは、クラスタ内のすべてのノードのすべてのディスクについて実行する必要があります。

  8. 無効になっているすべてのプレックスを削除してから、次のコマンドを使用して、クラスタで新しいノードを追加します。
    fss7310>cluster add <node-ip>
  9. 新しく追加したノードのすべてのディスクについて、マスターノードから storage disk format コマンドを実行します。
    fss7310>storage disk format <list-of-disks>
  10. 新しく追加したノードのすべてのディスクを storage pool adddisk コマンドを使用して作成された Veritas Access プールに追加します。
    fss7310> storage pool adddisk pool1 <list-of-devices>
  11. storage fs addmirror コマンドを実行してファイルシステムをミラー化します。
    fss7310> storage fs addmirror <fs-name> <pool-name>
  12. vxassist コマンドを実行して _nlm_ ボリュームも同様にミラー化します。
    #vxassist  - b  - g <dg-name> mirror _nlm_

例: Veritas Access ノードの交換

Veritas Access ノードを交換するには

  1. vxtune チューニングパラメータの値を変更してホットリロケーションを無効にします。
    # vxtune node_reloc_timeout -1
  2. 次のコマンドを実行してクラスタからノードを削除します。
    fss7310> cluster del fss7310_02
    
    Veritas Access 7.4 Delete Node Program
    
    fss7310_02
    
    Copyright (c) 2017 Veritas Technologies LLC. All rights reserved. ​Veritas and the 
    Veritas Logo are trademarks or registered trademarks of Veritas Technologies LLC 
    or its affiliates in the U.S. and other countries. Other names may be trademarks 
    of their respective owners.
    
    The Licensed Software and Documentation are deemed to be "commercial computer software"​ 
    and "commercial computer ​software documentation" as defined in FAR Sections 12.212 
    and DFARS Section 227.7202.
    
    Logs are being written to /var/tmp/installaccess-201803130635kXW ​while installaccess 
    is​ in progress.
    
    Veritas Access 7.4 Delete Node Program
    fss7310_02
    Checking communication on fss7310_01 ........................................... Done
    Checking communication on fss7310_02 ........................................... Done
    Checking communication on fss7310_03 ........................................... Done
    Checking communication on fss7310_04 ........................................... Done
    Checking VCS running state on fss7310_01 ....................................... Done
    Checking VCS running state on fss7310_02 ....................................... Done
    Checking VCS running state on fss7310_03 ....................................... Done
    Checking VCS running state on fss7310_04 ....................................... Done
    The following changes will be made on the cluster:
    Failover service group VIPgroup4 will be switched to fss7310_01
    
    Switching failover service group(s) ............................................ Done
    Waiting for service group(s) to come online on the other sub-cluster ........... Done
    All the online failover service group(s) that can be switched have been switched to​​ ​​​
    the other sub-cluster.
    The following parallel service group(s) in the sub-cluster will be offline:
    fss7310_02: CanHostConsole CanHostNLM Phantomgroup_pubeth0 ReconfigGroup cvm iSCSI_INIT​​ 
    vrts_vea_cfs_int_cfsmount1 vrts_vea_cfs_int_cfsmount2 vrts_vea_cfs_int_cfsmount3
    vrts_vea_cfs_int_cfsmount4 vrts_vea_cfs_int_cfsmount5 vrts_vea_cfs_int_cfsmount6
    Offline parallel service group(s) .............................................. Done
    Waiting for service group(s) to be taken offline on the sub-cluster ............ Done
    Stopping VCS on fss7310_02 ..................................................... Done
    Stopping Fencing on fss7310_02 ................................................. Done
    Stopping gab on fss7310_02 ..................................................... Done
    Stopping llt on fss7310_02 ..................................................... Done
    Clean up deleted nodes information on the cluster .............................. Done
    Clean up deleted nodes ......................................................... Done
    Delete node completed successfully
    installaccess log files and summary file are saved at:
    /opt/VRTS/install/logs/installaccess-201803130635kXW
  3. プレックスの状態が NODEVICE/DISABLED に設定されていることを確認します。
    [root@fss7310_01 ~]# vxclustadm nidmap
    Name       CVM Nid CM Nid     State
    fss7310_01  2        0     Joined: Master
    fss7310_03  3        2     Joined: Slave
    fss7310_04  1        3     Joined: Slave
    
    [root@fss7310_01 ~]# vxprint -p | grep -i nodevice
    pl _nlm_-02            _nlm_            DISABLED   2097152  - NODEVICE - -
    pl _nlm__dcl-02        _nlm__dcl        DISABLED   67840    - NODEVICE - -
    pl test1_tier1-P02     test1_tier1-L01  DISABLED   699392   - NODEVICE - -
    pl test1_tier1-P04     test1_tier1-L02  DISABLED   699392   - NODEVICE - -
    pl test1_tier1-P06     test1_tier1-L03  DISABLED   699392   - NODEVICE - -
    pl test1_tier1_dcl-02  test1_tier1_dcl  DISABLED   67840    - NODEVICE - -
    pl test2_tier1-P02     test2_tier1-L01  DISABLED   699392   - NODEVICE - -
    pl test2_tier1-P04     test2_tier1-L02  DISABLED   699392   - NODEVICE - -
    pl test2_tier1-P06     test2_tier1-L03  DISABLED   699392   - NODEVICE - -
    pl test2_tier1_dcl-02  test2_tier1_dcl  DISABLED   67840    - NODEVICE - -
    pl test3_tier1-P02     test3_tier1-L01  DISABLED   699392   - NODEVICE - -
    pl test3_tier1-P04     test3_tier1-L02  DISABLED   699392   - NODEVICE - -
    pl test3_tier1-P06     test3_tier1-L03  DISABLED   699392   - NODEVICE - -
    pl test3_tier1_dcl-02  test3_tier1_dcl  DISABLED   67840    - NODEVICE - -
    pl test4_tier1-P02     test4_tier1-L01  DISABLED   699392   - NODEVICE - -
    pl test4_tier1-P04     test4_tier1-L02  DISABLED   699392   - NODEVICE - -
    pl test4_tier1-P06     test4_tier1-L03  DISABLED   699392   - NODEVICE - -
    pl test4_tier1_dcl-02  test4_tier1_dcl  DISABLED   67840    - NODEVICE - -
    pl test5_tier1-P02     test5_tier1-L01  DISABLED   699392   - NODEVICE - -
    pl test5_tier1-P04     test5_tier1-L02  DISABLED   699392   - NODEVICE - -
    pl test5_tier1-P06     test5_tier1-L03  DISABLED   699392   - NODEVICE - -
    pl test5_tier1_dcl-02  test5_tier1_dcl  DISABLED   67840    - NODEVICE - -
    
    [root@fss7310_01 ~]# vxdisk list | grep "failed was:"
    - - emc0_2256 sfsdg failed was:emc0_2256
    - - emc0_2264 sfsdg failed was:emc0_2264
    - - emc0_2272 sfsdg failed was:emc0_2272
    - - emc0_2280 sfsdg failed was:emc0_2280
    - - emc0_2288 sfsdg failed was:emc0_2288
    - - emc0_2296 sfsdg failed was:emc0_2296
    - - emc0_2304 sfsdg failed was:emc0_2304
    - - emc0_2312 sfsdg failed was:emc0_2312
    - - emc0_2320 sfsdg failed was:emc0_2320
    - - emc0_2328 sfsdg failed was:emc0_2328
    - - emc0_2336 sfsdg failed was:emc0_2336
    - - emc0_2344 sfsdg failed was:emc0_2344
    - - emc0_2352 sfsdg failed was:emc0_2352
    - - emc0_2360 sfsdg failed was:emc0_2360
  4. システムに存在するボリュームの影響を受けるミラーを削除します。
    [root@fss7310_01 ~]# vxplex -f -g sfsdg -o rm dis test1_tier1-P02
    [root@fss7310_01 ~]# for i in 'vxprint -p | grep -i NODEVICE | awk '{print $2}''
    > do
    > echo "vxplex -f -g sfsdg -o rm dis $i"
    > vxplex -f -g sfsdg -o rm dis $i
    > done
    vxplex -f -g sfsdg -o rm dis _nlm_-02
    vxplex -f -g sfsdg -o rm dis _nlm__dcl-02
    vxplex -f -g sfsdg -o rm dis test1_tier1-P04
    vxplex -f -g sfsdg -o rm dis test1_tier1-P06
    vxplex -f -g sfsdg -o rm dis test1_tier1_dcl-02
    vxplex -f -g sfsdg -o rm dis test2_tier1-P02
    vxplex -f -g sfsdg -o rm dis test2_tier1-P04
    vxplex -f -g sfsdg -o rm dis test2_tier1-P06
    vxplex -f -g sfsdg -o rm dis test2_tier1_dcl-02
    vxplex -f -g sfsdg -o rm dis test3_tier1-P02
    vxplex -f -g sfsdg -o rm dis test3_tier1-P04
    vxplex -f -g sfsdg -o rm dis test3_tier1-P06
    vxplex -f -g sfsdg -o rm dis test3_tier1_dcl-02
    vxplex -f -g sfsdg -o rm dis test4_tier1-P02
    vxplex -f -g sfsdg -o rm dis test4_tier1-P04
    vxplex -f -g sfsdg -o rm dis test4_tier1-P06
    vxplex -f -g sfsdg -o rm dis test4_tier1_dcl-02
    vxplex -f -g sfsdg -o rm dis test5_tier1-P02
    vxplex -f -g sfsdg -o rm dis test5_tier1-P04
    vxplex -f -g sfsdg -o rm dis test5_tier1-P06
    vxplex -f -g sfsdg -o rm dis test5_tier1_dcl-02
    
    [root@fss7310_01 ~]# vxprint -p
    Disk group: sfsdg
    
    TY NAME                 ASSOC           KSTATE  LENGTH   PLOFFS  STATE 
    TUTIL0 PUTIL0
    pl _nlm_-01             _nlm_           ENABLED 2097152  -       ACTIVE 
    - -
    pl _nlm__dcl-01         _nlm__dcl       ENABLED 67840    -       ACTIVE 
    - -
    pl test1_tier1-P01      test1_tier1-L01 ENABLED 699392   -       ACTIVE 
    - -
    pl test1_tier1-P03      test1_tier1-L02 ENABLED 699392   -       ACTIVE 
    - -
    pl test1_tier1-P05      test1_tier1-L03 ENABLED 699392   -       ACTIVE 
    - -
    pl test1_tier1-03       test1_tier1     ENABLED 2098176  -       ACTIVE 
    - -
    pl test1_tier1_dcl-01   test1_tier1_dcl ENABLED 67840    -       ACTIVE 
    - -
    pl test2_tier1-P01      test2_tier1-L01 ENABLED 699392   -       ACTIVE 
    - -
    pl test2_tier1-P03      test2_tier1-L02 ENABLED 699392   -       ACTIVE 
    - -
    pl test2_tier1-P05      test2_tier1-L03 ENABLED 699392   -       ACTIVE 
    - -
    pl test2_tier1-03       test2_tier1     ENABLED 2098176  -       ACTIVE 
    - -
    pl test2_tier1_dcl-01   test2_tier1_dcl ENABLED 67840    -       ACTIVE 
    - -
    pl test3_tier1-P01      test3_tier1-L01 ENABLED 699392   -       ACTIVE 
    - -
    pl test3_tier1-P03      test3_tier1-L02 ENABLED 699392   -       ACTIVE 
    - -
    pl test3_tier1-P05      test3_tier1-L03 ENABLED 699392   -       ACTIVE 
    - -
    pl test3_tier1-03       test3_tier1     ENABLED 2098176  -       ACTIVE 
    - -
    pl test3_tier1_dcl-01   test3_tier1_dcl ENABLED 67840    -       ACTIVE 
    - -
    pl test4_tier1-P01      test4_tier1-L01 ENABLED 699392   -       ACTIVE 
    - -
    pl test4_tier1-P03      test4_tier1-L02 ENABLED 699392   -       ACTIVE 
    - -
    pl test4_tier1-P05      test4_tier1-L03 ENABLED 699392   -       ACTIVE 
    - -
    pl test4_tier1-03       test4_tier1     ENABLED 2098176  -       ACTIVE 
    - -
    pl test4_tier1_dcl-01   test4_tier1_dcl ENABLED 67840    -       ACTIVE 
    - -
    pl test5_tier1-P01      test5_tier1-L01 ENABLED 699392   -       ACTIVE 
    - -
    pl test5_tier1-P03      test5_tier1-L02 ENABLED 699392   -       ACTIVE 
    - -
    pl test5_tier1-P05      test5_tier1-L03 ENABLED 699392   -       ACTIVE 
    - -
    pl test5_tier1-03       test5_tier1     ENABLED 2098176  -       ACTIVE 
    - -
    pl test5_tier1_dcl-01   test5_tier1_dcl ENABLED 67840    -       ACTIVE
    - -
  5. 影響を受けるディスクを、vxdg rmdisk コマンドを使用してディスクグループから削除して、vxdisk rm コマンドを使用してクラスタ内のすべてのノードから削除します。
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2288
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2272
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2280
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2296
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2304
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2312
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2320
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2328
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2336
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2344
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2352
    [root@fss7310_01 bin]# vxdg -g sfsdg rmdisk emc0_2360
    [root@fss7310_01 bin]# for i in 'vxdisk list | grep -i error | ​awk '{print $1}''; 
    do vxdisk rm $i; done
    [root@fss7310_03 ~]# for i in 'vxdisk list | grep -i error | ​awk '{print $1}''; 
    do vxdisk rm $i; done
    [root@fss7310_04 ~]# for i in 'vxdisk list | grep -i error | ​awk '{print $1}''; 
    do vxdisk rm $i; done
  6. IP を使用してクラスタに addnode コマンドを実行します。
  7. すでに存在するプールに新しく追加したノードのディスクを追加します。
    [root@fss7310_01 scripts]# /opt/VRTSnas/clish/bin/clish -u master -c 
    "storage disk ​format emc0_2257,emc0_2265,emc0_2273,emc0_2281,emc0_2289,emc0_2297,emc0_2305,
    emc0_2313,emc0_2321,emc0_2329,emc0_2337,emc0_2345,emc0_2353,emc0_2361"
    
    You may lose all the data on the disk, do you want to continue (y/n, the default is n):y
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2257 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2265 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2273 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2281 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2289 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2297 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2305 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2313 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2321 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2329 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2337 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2345 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2353 has been formatted successfully.
    ACCESS Disk SUCCESS V-493-10-4 disk format: emc0_2361 has been formatted successfully.
    
    [root@fss7310_01 scripts]# /opt/VRTSnas/clish/bin/clish -u master -c "storage pool 
    adddisk pool1 ​emc0_2257,emc0_2265,emc0_2273,emc0_2281,emc0_2289,emc0_2297,emc0_2305,
    emc0_2313,emc0_2321,emc0_2329,emc0_2337,emc0_2345,emc0_2353,emc0_2361"
    
    ACCESS Pool SUCCESS V-493-10-2914 Successfully added disks to pool
  8. storage addmirror コマンドを使用して、ボリュームをミラー化します。
    fss7310> storage fs list
    FS    STATUS  SIZE   LAYOUT   MIRRORS COLUMNS USE% USED   NFS     CIFS    FTP     SECONDARY
                                                              SHARED  SHARED  SHARED  TIER
    ===== ======  ====   =======  ======= ======= ==== ====   ======  ======  ======  =========
    test1 online  1.00G  striped     1       3    10%  103M     no      no      no       no
    test2 online  1.00G  striped     1       3    10%  103M     no      no      no       no
    test3 online  1.00G  striped     1       3    10%  103M     no      no      no       no
    test4 online  1.00G  striped     1       3    10%  103M     no      no      no       no
    test5 online  1.00G  striped     1       3    10%  103M     no      no      no       no
    
    fss7310> storage fs addmirror test1 pool1
    100% [#] Adding mirror to filesystem
    ACCESS fs SUCCESS V-493-10-2131 Added mirror for fs test1
    fss7310> storage fs addmirror test2 pool1
    100% [#] Adding mirror to filesystem
    ACCESS fs SUCCESS V-493-10-2131 Added mirror for fs test2
    fss7310> storage fs addmirror test3 pool1
    100% [#] Adding mirror to filesystem
    ACCESS fs SUCCESS V-493-10-2131 Added mirror for fs test3
    fss7310> storage fs addmirror test4 pool1
    100% [#] Adding mirror to filesystem
    ACCESS fs SUCCESS V-493-10-2131 Added mirror for fs test4
  9. vxassist mirror コマンドを使用して _nlm_ ボリュームをミラー化します。
    [root@fss7310_01 bin]# vxassist -b -g sfsdg mirror _nlm_
    
    [root@fss7310_01 bin]# vxprint _nlm_
    Disk group: sfsdg
     
    TY NAME          ASSOC        KSTATE  LENGTH  PLOFFS  STATE  
    TUTIL0  PUTIL0
    v _nlm_          fsgen        ENABLED 2097152   -     ACTIVE 
    ATT1 -
    pl _nlm_-01      _nlm_        ENABLED 2097152   -     ACTIVE 
    - -
    sd emc0_2255-01  _nlm_-01     ENABLED 2097152   0     - 
    - -
    pl _nlm_-02      _nlm_        ENABLED 2097152   -    
    TEMPRMSD ATT -
    sd emc0_2257-01  _nlm_-02     ENABLED 2097152   0     - 
    - -
    dc _nlm__dco     _nlm_        -       -         -     - 
    - -
    v _nlm__dcl      gen          ENABLED 67840     -     ACTIVE 
    - -
    pl _nlm__dcl-01  _nlm__dcl    ENABLED 67840     -     ACTIVE 
    - -
    sd emc0_2255-02  _nlm__dcl-01 ENABLED 67840     0     - 
    - -
    sp _nlm__cpmap   _nlm_        -       -         -     - 
    - -