"Managed Service for Apache Spark" is the new name for the product formerly known as "Dataproc on Compute Engine" (cluster deployment) and "Google Cloud Serverless for Apache Spark" (serverless deployment).

Google uses AI technology to translate content into your preferred language. AI translations can contain errors.

Ranger スキーマをバックアップする、復元する

このページでは、Ranger クラスタを使用した Managed Service for Apache Spark で Ranger スキーマをバックアップして復元する方法について説明します。

始める前に

必要に応じてバケットを作成します。Ranger スキーマの保存と復元に使用する Cloud Storage バケットにアクセスできる必要があります。

バケットを作成するには:
1. コンソールで Cloud Storage の Google Cloud [バケット] ページに移動します。
  [バケット] に移動
2. [ [Create]] をクリックします。
3. [バケットの作成] ページでユーザーのバケット情報を入力します。次のステップに進むには、[続行] をクリックします。
  1. [スタートガイド] セクションで、次の操作を行います。
    - バケット名の要件を満たす、グローバルに一意の名前を入力します。
    - バケットラベルを追加するには、[ラベル] セクション（）を開き、[ラベルを追加] をクリックして、key と value を指定します。
  2. [データの保存場所の選択] セクションで、次の操作を行います。
    1. ロケーションタイプを選択してください。
    2. [Location type] プルダウンメニューから、バケットのデータが永続的に保存されるロケーションを選択します。
      - ロケーションタイプとして [デュアルリージョン] を選択した場合は、関連するチェックボックスを使用して [ターボレプリケーション] を有効にすることもできます。
    3. クロスバケットレプリケーションを設定するには、 [Storage Transfer Service 経由でクロスバケットレプリケーションを追加する] を選択し、次の手順を実施します:
      クロスバケットレプリケーションを設定する
      
      [バケット] メニューで、バケットを選択します。
      
      [レプリケーション設定] セクションで、[構成] をクリックして、レプリケーションジョブの設定を構成します。
      
      [**クロスバケットレプリケーションを構成する**] ペインが表示されます。
      
      オブジェクト名の接頭辞で複製するオブジェクトをフィルタするには、オブジェクトを追加または除外する接頭辞を入力し、 [接頭辞を追加] をクリックします。
      
      複製されたオブジェクトのストレージクラスを設定するには、 [Storage class] メニューからストレージクラスを選択します。この手順をスキップすると、複製されたオブジェクトはデフォルトで宛先バケットのストレージクラスを使用します。
      
      [完了] をクリックします。
  3. [データの保存場所の選択] セクションで、次の操作を行います。
    1. バケットのデフォルトのストレージクラスを選択するか、バケットデータのストレージクラスを自動的に管理するAutoclassを選択します。
    2. 階層名前空間を有効にするには、 [データ量が多いワークロード向けにストレージを最適化] セクションで、 [このバケットで階層的な名前空間を有効にする] を選択します。
      注: 既存のバケットで階層名前空間を有効にすることはできません。
  4. In the [オブジェクトへのアクセスを制御する方法を選択する] セクションで、バケットに公開アクセスの防止を適用するかどうかを選択し、バケットのオブジェクトに使用するアクセス制御方法を選択します。
    **注:** 組織のポリシーでこの設定が適用されている場合、[**公開アクセスの防止**] 設定を変更することはできません。
  5. [オブジェクトデータを保護する方法を選択する] セクションで、次の操作を行います。
    - [**データ保護**] で、バケットに設定するオプションを選択します。
      - 削除（復元可能）を有効にするには、 [削除（復元可能）ポリシー（データ復旧用）] チェックボックスをオンにして、削除後にオブジェクトを保持する日数を指定します。
      - [オブジェクトのバージョニング]を設定するには、 [オブジェクトのバージョニング（バージョン管理用）] チェックボックスをオンにして、オブジェクトごとのバージョンの最大数と、非現行バージョンが期限切れになるまでの日数を指定します。
      - オブジェクトとバケットの保持ポリシーを有効にするには、[保持（コンプライアンス用）] チェックボックスをオンにして、次の操作を行います。
        
        [オブジェクト保持ロック]を有効にするには、 [オブジェクト保持を有効にする]チェックボックスをオンにします。
        
        [Bucket Lock] を有効にするには、[バケット保持ポリシーを設定する] チェックボックスをオンにして、保持期間の単位と保持期間を選択します。
    - オブジェクトデータを暗号化する方法を選択するには、 [データの暗号化] セクション（）を開き、 [データの暗号化] 方法を選択します。
4. [作成] をクリックします。

Ranger スキーマをバックアップする

SSH を使用して、Ranger スキーマを持つクラスタの Managed Service for Apache Spark マスターノードに接続します。このセクションのコマンドは、マスターノードで実行されている SSH ターミナルセッションで実行します。
環境変数を設定します。
```
BUCKET_NAME=bucket name \
  MYSQL_PASSWORD=MySQL password
  SCHEMA_FILE=schema filename
```
次のように置き換えます。
- MySQL password: クラスタマスターノードで /etc/mysql/my.cnf を開いて、MySQL パスワードをコピーできます。
- bucket name: Ranger スキーマの保存に使用する Cloud Storage バケットの名前。
- schema filename: ファイル拡張子（.sql）なしでファイル名を指定します。Ranger スキーマは、マスターノードのこのファイルに保存してから、Cloud Storage の bucket name に保存します。

Hive サービスを停止します。

sudo systemctl stop hive-metastore.service
sudo systemctl stop hive-server2.service

Ranger スキーマテーブルへの変更を防止します。

mysql -u root -p${MYSQL_PASSWORD}
REVOKE ALL PRIVILEGES ON ranger.* from 'rangeradmin'@'localhost';
GRANT SELECT ON ranger.* TO 'rangeradmin'@'localhost';
FLUSH PRIVILEGES;
SHOW GRANTS FOR 'rangeradmin'@'localhost';
exit;

Ranger スキーマを .sql ファイルに保存します。

mysqldump -u root -p${MYSQL_PASSWORD} ranger > ${SCHEMA_FILE}.sql

Ranger 権限をリセットします。

mysql -u root -p${MYSQL_PASSWORD}
REVOKE SELECT ON ranger.* from 'rangeradmin'@'localhost';
GRANT ALL PRIVILEGES ON ranger.* to 'rangeradmin'@'localhost';
FLUSH PRIVILEGES;
SHOW GRANTS FOR 'rangeradmin'@'localhost';
exit;

Hive サービスと Ranger サービスを再起動します。

sudo systemctl start hive-metastore.service
  sudo systemctl start hive-server2.service
  sudo systemctl restart ranger-admin.service
  sudo systemctl restart ranger-usersync.service

Ranger スキーマを Cloud Storage にコピーします。
```
gcloud storage cp ${SCHEMA_FILE}.sql gs://${BUCKET_NAME}
```

Ranger スキーマを復元する

SSH を使用して、クラスタスキーマを復元するクラスタの Managed Service for Apache Spark マスターノードに接続します。このセクションのコマンドは、マスターノードで実行されている SSH ターミナルセッションで実行します。
環境変数を設定します。
```
BUCKET_NAME=bucket name \
  MYSQL_PASSWORD=MySQL password
  SCHEMA_FILE=schema filename
```
次のように置き換えます。
- MySQL password: クラスタマスターノードで /etc/mysql/my.cnf を開いて、MySQL パスワードをコピーできます。
- bucket name: 保存された Ranger スキーマを含む Cloud Storage バケットの名前。
- schema filename: Cloud Storage の bucket name に保存されている Ranger スキーマファイルの名前（.sql ファイル拡張子なし）。