[OCI]Oracle Cloud Infrastructure (OCI) Data Integrationデータローダータスク (2020/07/27)

Oracle Cloud Infrastructure (OCI) Data Integrationデータローダータスク (2020/07/27)

https://blogs.oracle.com/dataintegration/data-loader-task-in-oracle-cloud-infrastructure-oci-data-integration
投稿者：ADITYA DUVURI | Product Manager

今日は、Oracle Cloud Infrastructure Data Integration の データローダタスク を見てみましょう。
データローダタスクを使用すると、2つのシステム間で1対1でデータをロードする必要がある場合に、最小限の変換または変換なしでデータをロードすることができます。
このタスクは、データの準備、データの移行、またはOracle Object Storageなどのデータ・レイクへの多様なデータのロードに必要です。

データローダタスクでは、基礎となるステップの複雑さを気にすることなく、プロセス全体を数回のクリックで行うことができます。
ユーザーが行う必要があるのは、データローダタスクを作成するだけで、ソースとターゲットを指定し、変換を指定し、公開し、実行するオプションがあります。
Oracle DatabaseからAutonomous Data Warehouse (ADW)にデータがロードされる例を考えてみましょう。
ここでは、このユースケースで、Oracle DatabaseからADWにテーブルデータをロードするために実行された手順を以下に示します。

  1. データ ローダー タスクを作成する前に、ワークスペース内で必要なすべてのデータ アセットを構成します。
    ここでは、このユースケースでは、Oracle Database と ADW が構成されています。
    データ アセットの詳細については、Oracle Cloud Infrastructure Data Integration のデータ アセットを参照してください。
  2. データローダータスクを作成するには - ワークスペースにログインし、[プロジェクト]に移動し、
    [プロジェクト]を開き、[タスク]に移動し、[タスクの作成]をクリックして、[データローダ]を選択します。
  3. データローダタスクに関連する名前と説明を提供します。識別子は自動挿入され、作成時のみ変更可能です。
  4. 接続、スキーマ、およびデータ エンティティを指定して、データ ローダ タスクで該当するソースを選択します。

  5. 変換は、データ ローダ タスクではオプションです。
    「変換を構成する」の横にある「構成する」をクリックすると、インタラクティブなデータXplorerが表示され、
    ソースデータアセットからのデータサンプリングを表示し、属性またはデータ値に変換を適用することができます。
  6. 今回のユースケースでは、いずれかの変換ルールを適用しています。
    • EMPL_NAMEはProper Caseで、Upper Caseに変換されます。
      [データ]タブでEMPL_NAMEの横にある3つのドットをクリックして、[ケースの変更]変換ルールを選択し、[タイプ]で[大文字]を選択し、[適用]をクリックします。
      [データ]タブが更新され、変換されたデータを含む新しい属性（E_UPPER_NAME）が表示されます。
  7. 変換の概要は、Data Entityの横のアイコンをクリックすることで確認できます。
    すべての検証が終わったら、「OK」をクリックします。
  8. データローダタスクのメイン画面では、適用された変換回数を確認することができます。
  9. ソースと同様のデータ ローダ タスクでターゲットを選択します。

  10. 必要なソース、変換、ターゲットを設定したら、「保存して閉じる」をクリックして、データ ローダー タスクを作成します。
    作成されたタスクは、Projects/Folderの下に表示されます。
  11. Oracle Cloud Infrastructure Data Integration で データローダ や Integration などのタスクを実行するには、
    アプリケーションで公開して、対応するタスクを実行する必要があります。
    アプリケーションは、公開されたタスクとその依存関係を格納するコンテナです。
    Data Integration には、タスクをパブリッシュできるデフォルトのアプリケーションが 1 つ含まれています。
    必要に応じて、追加のアプリケーションを作成することができます。
    タスクの [アクション] (3 つの点) メニューをクリックして [発行] を選択し、アプリケーションを選択します。

  12. タスクが公開されたら、ワークスペース内のアプリケーション--→「デフォルトアプリケーション」に移動し、
    「パッチ」の下に公開されたタスクが表示されます。
    特定のパッチの「詳細を見る」をクリックすると（3つの点）メニューにタスク名が表示されます。

  13. 「アプリケーション」に移動し、タスクを実行します。
  14. タスクを実行した後、実行されたジョブは、処理されたレコードの数、期間、実行された日付などとともに、タスク実行の下で確認することができます。


上記のように、Data Loader Taskは、2つのシステム間でのデータのロードを劇的に簡素化しました。
今では、ユーザーは深いデータ統合の専門知識を必要とせずに、このようなエンドツーエンドのシナリオを実装することができます。

他のブログをご覧になりましたか？ Oracle Cloud Infrastructureデータ統合に関連するすべてのブログをチェックしてください
- https://blogs.oracle.com/dataintegration/oracle-cloud-infrastructure-data-integration。
詳細については、Oracle Cloud Infrastructure Data Integrationのチュートリアルとドキュメントをご覧ください。

コメント

コメントを投稿

このブログの人気の投稿

Oracle RACによるメンテナンスのためのドレインとアプリケーション・コンティニュイティの仕組み (2023/11/01)

イメージ
Oracle RACによるメンテナンスのためのドレインとアプリケーション・コンティニュイティの仕組み (2023/11/01) https://database-heartbeat.com/2023/11/01/draining-ac-rac/ はじめに Oracle RACは、Oracle Databaseのスケーラビリティと高可用性を提供します。1つのサーバー(RACノード)に障害が発生した場合、またはメンテナンスのためにオフラインになった場合でも、追加のノードを介してデータベースにアクセスできます。ただし、メンテナンスの開始時に、データの読取りまたは変更に関係なく、一部の作業を実行しているクライアント・セッションはどうなりますか。この作業は中断され、ドレインを実装してアプリケーション・コンティニュイティまたは透過的アプリケーション・コンティニュイティを有効にしないかぎり、エンドユーザーまたはアプリケーションによって再度実行する必要があります。 環境 2ノードのOracle RACを例に挙げて、高速アプリケーション通知(FAN)、ドレインおよびアプリケーション・コンティニュイティによってメンテナンス・イベントがエンドユーザーに透過的になる方法を理解しましょう。アプリケーションは、30個のセッションを保持するように構成された接続プールを使用しています。 通常の操作 通常の操作中は、両方のRACノードが起動し、アプリケーションを実行しています。ロード・バランシング戦略によっては、セッションの数が両方のノード間で異なるか、均等に分散される場合があります。次の図をよりよく視覚化するために、ノード2のノード1および20のセッションに10のセッションがあるとします。 セッションは、アイドル状態(接続されているが何もしていない)またはアクティブ状態(リクエストの途中)にできます。リクエストは、データの読取り(SELECT)または操作(INSERT、DELETE、UPDATE)が可能です。 ドレインによるサービスの停止 ある時点で、システムのメンテナンスが必要になります。2ノードRACがあるため、メンテナンスはローリング方式で、1つのノードを順番に(ほとんどの場合)実行できます。メンテナンスは、たとえば、オペレーティング・システム、Grid Infrastructureまたはデ
続きを読む

Oracle Cloud Infrastructure Secure Desktopsを発表: デスクトップ仮想化のためのOracleのクラウドネイティブ・サービス (2023/06/28)

イメージ
Oracle Cloud Infrastructure Secure Desktopsを発表: デスクトップ仮想化のためのOracleのクラウドネイティブ・サービス (2023/06/28) https://blogs.oracle.com/cloud-infrastructure/post/secure-desktops-cloud-native-virtualization 投稿者： Joost Pronk Van Hoogeveen Jan Hendrik Mangold | Principal Product Manager Oracleは、Oracle Cloud Infrastructure(OCI)Secure Desktopsという新しいクラウド・ネイティブ・サービスをリリースしています。このエキサイティングな開発により、顧客はOCIテナンシから簡単にすばやく仮想デスクトップ・インフラストラクチャ(VDI)をデプロイできます。 OCIの使用状況は大幅に拡大しています。組織は、OCI内でデータを安全に保つことの価値を実現しています。ゼロトラストなセキュリティ優先アーキテクチャを実装することで、OCI Compute、Storage、およびNetworkingサービスは、グローバル・アクセスのためのエンタープライズ・アプリケーションを導入するための信頼できるプラットフォームを提供します。 データ・セキュリティとVDIがどのように役立つか 業界のアナリストによると 、ラップトップは53秒ごとに盗まれています。その事実と現実を結び付けると、会社のデータは、公共の場所を経由したり、従業員の自宅に座ったりするラップトップやデスクトップへと移行します。ローカル・ディスクの暗号化、データ・アクセス権限の強制、VPNアクセスの保護によってデータを保護するためにテクノロジが使用されていますが、いずれも許容可能なセキュリティ・レベルが適用されるため、リスクは依然として高くなる可能性があります。盗難または準拠していないいくつかのマシンでは、企業データ、さらには顧客データのデータ侵害が発生する可能性があります。 VDIテクノロジは長年にわたって存在してきましたが、従業員はローカル・マシンを使用して、会社のデータ・センター内の仮想マシンで実行されているデスクトップ・アプリケー
続きを読む

新しいOracle Container Engine for Kubernetesの機能強化により、大規模なKubernetesがさらに簡単になりました (2023/03/20)

イメージ
新しいOracle Container Engine for Kubernetesの機能強化により、大規模なKubernetesがさらに簡単になりました (2023/03/20) https://blogs.oracle.com/cloud-infrastructure/post/oracle-container-engine-kubernetes-enhancements 投稿者： Mickey Boxell | Product Management Linux以降、 Kubernetes はオープンソースソフトウェアの歴史上最も急速に成長しているプロジェクトです。10年も経たないうちに、 Kubernetesは主流 になり、特に過去2年間で導入がかつてないほど大きくなりました。 Oracle Cloud Infrastructure(OCI) は、この勢いも見ています。あらゆる業界の何千ものエンタープライズ顧客が、クラウドネイティブアプリケーション開発のメリットを経験しており、その導入を迅速化し、Kubernetesの使用を拡大しています。 Oracle Container Engine for Kubernetes (OKE)で実行されている抽出、変換、ロード(ETL)ジョブ、パイプライン、ハイパフォーマンスコンピューティング(HPC)ワークロード、さらにはデータベースなどにKubernetesを使用するために、顧客はKubernetesで標準化されており、コンテナ化されたアプリケーションを実行するのみでなく拡張されています。  「私たちは、Kubernetes インフラストラクチャと OKE、GPU、HPC、およびストリーミング、OpenSearch などの最新の開発者サービスを組み合わせて使用​​して、OCI で数十億の音声 AI クエリを実行しています。私たちは、次世代のトレーニングと配信に最適なクラウドとして OCI を選択しました。 AI アプリケーション – Mercedes Benz、Toast、VIZIO、Hyundai などのグローバル ブランドに最速かつ最も正確な音声エクスペリエンスを提供するのに役立ちます.OCI を使用することで、以前のクラウドと比較してパフォーマンスが 50 ～ 60% 向上しました。 2 倍のコスト削減 – 使用量
続きを読む