Google Cloud StorageからOracle Databaseへのデータのロード (2024/10/01)

Google Cloud StorageからOracle Databaseへのデータのロード (2024/10/01)

https://database-heartbeat.com/2024/10/01/google-storage-to-oracle-database/




はじめに


マルチクラウド環境では、複数のクラウド・ベンダーからのリソースを使用しながら、通常は環境間でのデータの移行や、別のクラウド環境からのアクセス時に1つのクラウド環境でのデータの保持を処理します。Oracle Database DBMS_CLOUD PL/SQLパッケージを使用すると、OCI Object Storage、Azure Blob Storage、Amazon S3バケットおよびGoogle Cloud Storageバケットのデータにアクセスしたり、これらのソースからOracle Databaseにインポートしたりできます。


このブログ投稿では、Google Cloud StorageバケットからOracle Databaseへのデータへのアクセスおよびインポートに関するステップバイステップ・ガイドを提供します。



環境


  • Google Cloud Storageバケット内のData Pumpダンプ・ファイル。
  • DBMS_CLOUDパッケージがすでにプリインストールされているため、OCI上のOracle Autonomous Database。DBMS_CLOUDパッケージをインストールできる任意のOracle Databaseバージョン19.10以降を使用できます。


テスト目的で、インターネットを介してネットワーク接続を確立できます。本番環境では、Oracle Interconnect for Google Cloudまたはサード・パーティのネットワーク・サービス・プロバイダを介して、Google CloudとOCIの間にプライベートな専用接続を設定します。Oracle Database@Google Cloudの場合、Oracle DatabaseがGoogle Cloudデータセンターに存在するため、クラウド間のネットワーク接続の設定は必要ありません。



Google Cloudでの準備

ステップ1: アクセス・キーとシークレットの作成


データベースでGoogle Cloud Storageバケット内のオブジェクトを認証してアクセスできるようにするには、ユーザー・アカウントのアクセス・キーとシークレットを作成する必要があります。


「Google Cloud Storage Settings」ページで、「INTEROPERABILITY」タブをクリックします。



ユーザー・アカウントのアクセス・キー・セクションまでスクロールし、「CREATE A KEY」をクリックします。アクセス・キーとシークレットが作成されます。次のステップで使用する両方の値をコピーします。



この場合(一部の文字が置換されます):


  • アクセス・キー: GOOGA3N3xxx7MDD
  • シークレット: sVQHCkZVn8VvmG2+mHLDExxx


ステップ2: Google CloudバケットでファイルのURLを取得します


Google Cloud Storageバケット・ページから、バケット名を取得します。



この場合、次のようになります。


  • バケット名: adbbucket


バケット名をクリックして、バケット内のオブジェクト・ファイル名を取得します。



この場合、Data Pumpエクスポート・ファイルです。


  • オブジェクト名: hr.dmp


アクセスURLは次のとおりです。

https://<bucket_name>.storage.googleapis.com/<object_name>


この場合、次のようになります。


  • オブジェクトURL: https://adbbucket.storage.googleapis.com/hr.dmp



OCIでの準備

ステップ3: Oracle Databaseでの資格証明の作成


DBMS_CLOUD PL/SQLパッケージを使用して資格証明を作成し、データベースにGoogle Cloud Storageバケットへのアクセスを許可します。ユーザー名パラメータはアクセス・キーで、パスワード・パラメータはステップ1で作成したシークレットです。


BEGIN
    DBMS_CLOUD.CREATE_CREDENTIAL(
        credential_name => '<Crednedial_Name>',
        username => '<Storage_Account_Name>',
        password => '<Key>'
    );
END;
/
 
-- in this examplae
SQL> BEGIN
      DBMS_CLOUD.CREATE_CREDENTIAL(
          credential_name => 'GCP_CRED',
          username => 'GOOGA3N3xxx7MDD',
          password => 'sVQHCkZVn8VvmG2+mHLDExxx'
      );
  END;
  /
  
PL/SQL procedure successfully completed.


ステップ4: Google Cloud Storageへのアクセスのテスト


バケットへのアクセスをテストするには、DBMS_CLOUDパッケージのLIST_OBJECTSファンクションを使用してファイルをリストします。ステップ3の資格証明名とステップ2のロケーションURLを使用しますが、最後にオブジェクト名を使用しません。


SQL> select object_name from dbms_cloud.list_objects('GCP_CRED','https://adbbucket.storage.googleapis.com');
 
OBJECT_NAME
--------------------------------------------------------------------------------
hr.dmp


データのインポート

ステップ5: Google Cloud StorageからOracle Databaseへのデータのインポート


データ・ポンプ・パラメータ・ファイルを作成します。dumpfileパラメータは、ステップ2のオブジェクト名です。


# data pump parameter file: impgcp.par
directory=DATA_PUMP_DIR
credential=GCP_CRED
schemas=hr
remap_tablespace=USERS:DATA
dumpfile=https://storage.cloud.google.com/adbbucket/hr.dmp


パラメータ・ファイルを使用してData Pumpインポート・コマンドを実行します。


impdp userid=ADMIN@adbzdm_high parfile=impgcp.par
...
Job "ADMIN"."SYS_IMPORT_SCHEMA_01" successfully completed at Tue Oct 1 13:55:38 2024 elapsed 0 00:00:07



まとめ


DBMS_CLOUDパッケージを使用すると、複数のクラウド・ベンダーのデータに柔軟にアクセスでき、Oracle Databaseに簡単にインポートできるため、クラウド間のデータ移行が簡素化されます。

コメント

コメントを投稿

このブログの人気の投稿

Oracle Database 19cサポート・タイムラインの重要な更新 (2024/11/20)

イメージ
Oracle Database 19cサポート・タイムラインの重要な更新 (2024/11/20) https://mikedietrichde.com/2024/11/20/important-update-to-oracle-database-19c-support-timelines/ 長い沈黙は、私が隠れているという意味ではありません。つまり、今はとても忙しいということです。そして、より少ない旅行で、私はあなたのコメントにもブログと返信するより多くの時間を持っていることを願っています。それでも、Oracle Database 19cサポート・タイムラインの非常に重要な更新について説明します。 * 更新された内容 2024年11月19日現在、Oracle Database 19cのサポート・タイムラインが調整されています。 MOSノート: 742060.1 – 現在のデータベース・リリースのリリース・スケジュールを見ると、新しい日付が表示されます。 Premier Support、2029年12月31日まで 2030年1月1日から2032年12月31日までの拡張サポート 2033年1月1日から2034年12月31日までのアップグレード・サポート これは知ることがとても大切です。 他のリリースの更新はありますか。 MOSノートの終わりにある変更ログ: 742060.1 – 現在のデータベース・リリースのリリース・スケジュールでは、Oracle Database 21cの最新の更新も確認できます。このリリースのPremier Support期間は、2027年7月31日まで延長されました。 また、Oracle Database 23aiのパッチ適用終了日は2032年12月31日に設定されています。 Lifetime Support Policy 更新は、Oracle Technology Productsの Oracle Lifetime Support Policy (6ページ)でも確認できます。 From: Oracle Lifetime Support Policy for Oracle Technology Product s – page 6 – Nov 19, 2024 特に、次の表に示す制限事項に注意してください。 Oracle Database 1...
続きを読む

Oracle APEXのInteractive Gridで、Oracle Formsと比較して、重複行の検証を制御/通過させる方法 (2022/07/21)

イメージ
Oracle APEXのInteractive Gridで、Oracle Formsと比較して、重複行の検証を制御/通過させる方法 (2022/07/21) https://medium.com/oracledevs/how-to-control-or-pass-validation-for-duplicate-rows-in-interactive-grid-of-oracle-apex-as-compare-18f453f750bf 投稿者： Jignesh oracle Formsでは、データブロックの重複行を制御するのは非常に簡単ですが、IGの検証を制御するにはどうすればよいでしょうか。 必要な出力 ステップ1：インタラクティブグリッドのある白紙ページを作成します（私は1つの領域「IG」を作成し、インタラクティブグリッドとしてタイプを選択しました） ステップ 2: リージョンに Static ID を定義する (私の場合、リージョンは IG で、Static ID も IG です) ステップ3：複製を制御したいカラムのStatic IDを定義します ステップ4：関数とグローバル変数に移動します コード： var validity, message, ui = this.data; (function($) { function update(model) { var projKey = model.getFieldKey(“PROJECT_ID”), recObj = [], recArray = []; model.forEach(function(record, index, id) { var projid = parseInt(record[projKey], 10), // record[salKey] should be a little faster than using model.getValue in a loop meta = model.getRecordMetadata(id); if (!isNaN(projid) && !meta.deleted && !meta.agg) { recObj = {ID: id, project_id: projid}; recArray.push(recObj)...
続きを読む

Oracle APEX 24.1の一般提供の発表 (2024/06/17)

イメージ
Oracle APEX 24.1の一般提供の発表 (2024/06/17) https://blogs.oracle.com/apex/post/announcing-oracle-apex-241 投稿者： Ashish Mohindroo | Vice President, Product Management APEX Low Code Application Platform Oracle APEX 24.1は、 ダウンロード が一般的に可能になり、世界中のOCI APEX Application DevelopmentおよびAutonomous Database Cloud Serviceリージョンにロールアウトされています。この最新リリースで、GenAIを使用して最初のローコード・アプリケーションを構築する方法を学習します。リリースのお知らせのリプレイはこちらからご覧いただけます。 このリリースでは、優れたエンタープライズ・グレードのアプリケーションを簡単に構築できるイノベーションの3つの主要な柱(AI支援アプリケーション開発、Oracleの次世代データ・プラットフォームのパワー活用、高度なWebおよびモバイル・アプリケーションを構築するための強力なエンタープライズ・グレードのコンポーネント)が提供されています。 AI支援アプリ開発 このリリースでは、AIをローコード開発に直接取り込み、すべての開発者が高度なクラウドおよびモバイル・アプリケーションを簡単に構築できるようにしています。開発者は、AIをアシスタントとして使用して、時間と労力を削減してアプリを構築できるようになりました。APEX AIアシスタントを使用すると、開発者は複数のウィンドウを使用して表名と列名を検索する必要がなくなります。 APEX 24.1 では、クラウドおよびモバイル・アプリの自然言語ベースの開発を可能にするネイティブAI搭載APEX AIアシスタントを導入しました。APEX AIアシスタントを使用すると、すべての開発者は自然言語を使用してSQLを生成できるため、アプリケーションをより簡単に構築したり、ワンクリックで構文修正を実行したり、表名を覚える必要がなくなります。開発者は、自然言語プロンプトを使用して目的の機能とコンポーネントを指定し、直感的な会話型インタフェースを使用し...
続きを読む