WANdisco LiveData Migrator for Oracle Cloud（オラクルクラウド用ライブデータ移行ツール) (2022/01/31)

https://blogs.oracle.com/cloud-infrastructure/post/wandisco-livedata-migrator-for-oracle-cloud

投稿者： Paul Scott-Murphy | CTO at WANdisco

データレイクハウスは、データレイクのコストとスケールの優位性とデータウェアハウステクノロジーの分析機能を組み合わせたものです。これにより、大規模で変化しやすいデータセットを取り込み、保存、分析し、ビジネス価値を引き出すことができます。Oracle Cloud Infrastructure（OCI）は、どこからでも、あらゆる種類のデータを、あらゆる規模で分析できるオープンで柔軟なアプローチとして、レイクハウスの基盤を提供します。しかし、このアーキテクチャを使用するためにデータレイクをOCIに移行することは、適切なサポートがなければ困難です。

オラクルはWANdiscoと提携し、Oracle Cloud Lift Serviceの一環として、WANdisco LiveData Migratorのユニークな利点をOCIユーザーに提供することにしました。この移行ソリューションは、オンプレミスや他のクラウドにあるHadoopやSparkなどの高価でメンテナンスの多い従来のプラットフォームから、移行時にそれらのプラットフォームの運用を中断することなく移行したいと考える組織に用意されています。

WANdiscoのユニークなLiveData機能は、これまでオンプレミスや第一世代のクラウド環境に閉じ込められていたデータが、すべてのOCIですぐに利用でき、使用できるようになることを意味します。組織は、リスクや遅延なしに、OCIにおける近代化のビジネス上の利点を得ることができます。

WANdiscoによるOCI上のデータレイクハウスがデータの近代化を可能にする

データはますます多様化し、構造化および非構造化ソースにまたがり、指数関数的に増加し、より広範なソースから利用できるようになっています。このようなデータの増加に対応するには、多様なデータを大規模に利用、管理、相関、分析するための適切なインフラ、プロセス、テクノロジーが必要です。こうした課題から、大規模なデータからビジネス要件を満たすための最良のアプローチとして、レイクハウスが登場しました。

レイクハウスアーキテクチャのビジネス上の利点は、データをよりアクセスしやすく、かつ大規模に利用できるようにすることにあります。データレイクの規模とコストの優位性とデータウェアハウスのスピードとアクセス性を組み合わせることで、より良い、より速い、より正確な、より包括的なビジネスプロセスをサポートします。レイクハウスの技術的な優位性は、従来のデータアーキテクチャよりも低コストで効率的に、より多くの、より広範なデータに即座にアクセスすることにより、ユーザーが分析、機械学習、およびAIの成果を推進するために必要なものをサポートします。

データレイクハウスアーキテクチャに関するオラクル独自の機能は、オブジェクトおよびリレーショナルデータストレージのコア機能から始まります。OCIサービスには、データレイクハウスのための以下の機能が組み込まれています。

•     データ移動
•     管理されたオープンソース
•     データウェアハウス
•     データの定義と発見
•     自動化、準備、予測のためのAIサービス

その結果が、OCIの次世代クラウド技術をベースにした、一貫性のある包括的なレイクハウスアーキテクチャです。このアーキテクチャは、組織がビジネスのあらゆる側面を近代化するために、OCIを自然で魅力的なプラットフォームとする重要なイノベーションを利用しています。サーバーレスSpark with Data Flow、Autonomous Data Warehouse、OCI Object Storage、Oracle Big Data serviceなどの技術が組み合わされ、レイクハウスを支える大きな技術的優位性を提供します。

レイクハウスは、データレイク、ウェアハウス、オンプレミス・アプリケーション、システムなどの既存データを基盤に構築されます。OCIは、レイクハウスを構築するために必要なインフラとサービスを提供しますが、各組織に固有のデータ、メタデータ、プロセス、その他のワークロードは提供しません。お客様は、独自のデータ、分析要件、データ生成、インジェストの仕組みを持ち込み、OCIが持つ重要なレイクハウス対応機能を補完します。

企業が独自のデータをOCIに持ち込むことで利益を得るのと同じように、オンプレミスのデータセット、アプリケーション、ワークフロー、メタデータへの既存の投資を放棄しても、利益を得ることはできません。WANdiscoの移行ソリューションは、既存のデータへの投資を、再構築やビジネスのダウンタイムなしにOracleレイクハウスで利用可能にするという大きな課題において、組織の簡素化、自動化、リスクの低減を支援することができます。

WANdisco LiveData Migrator

LiveData Migratorは、既存のオンプレミスデータレイク、Spark、Hadoop環境からOCIへの大規模なデータおよびメタデータの移動を自動化します。データおよびメタデータの移行を、必要なデータセットを選択するのと同じくらいシンプルにすることで、組織は既存のすべてのデータインフラを中断することなく運用し続けることができます。同時に、WANdisco LiveData Migratorを導入することで、OCIで利用する必要のあるデータとメタデータを選択し、その基盤としてレイクハウスを確立することができます。

WANdiscoの技術は、変化するデータセットの移行を大規模に自動化し、マルチペタバイトのデータレイク移行を容易に拡張できるよう設計、証明されています。OCIを採用する企業は、WANdiscoの技術を通じて以下の主要な革新的技術を利用することができます。

•     ライブデータ移行では、移行元データセットのスキャンを繰り返しスケジュールすることなく、アクティブに変化するデータを移行することができます。移行はソースに変更を加えることなく開始され、完了します。また、ソースのダウンタイムや使用率の低下に合わせてデータ移行を制限する必要はありません。OCIへの移行のために、移行元システムの計画や修正にコストをかける必要はありません。
•     選択的なデータ移行により、不要なデータの移行に伴うオーバーヘッドを回避することができます。一時ファイル、ステージングロケーション、中間表現などを回避し、レイクハウスに配信されるデータは、利用したいものだけであることを確認できます。
•     選択的なメタデータの移行により、データを記述する情報がOCI Data Catalogで利用可能になるため、構造化または半構造化データにすぐにアクセスして簡単に処理することができます。
•     データの一貫性は、データがソースに存在するのと同じ形式でレイクハウスに到着することを保証する包括的な機能を提供します。WANdisco LiveData Migratorは、OCIから得られる分析結果が完全に正確で包括的であるという確信を与えてくれます。
•     幅広い互換性により、オンプレミス、他のクラウド、HadoopやSparkのようなプラットフォーム上に構築されたものなど、様々なソースデータレイクを移行することができます。

WANdiscoは、オンプレミスや他のクラウドで運用しているソース環境を中断することなく既存および新規のデータを移行することで、Oracleレイクハウスのすべての機能と利点を適用するために必要なコストと労力を大幅に削減します。既存のデータやワークロードの移行を進めている間も、OCIの共有データ、分析、ガバナンス、セキュリティ、スケーラビリティを利用することができます。

Live Data Migratorの操作

Oracle Cloudへのデータおよびメタデータの移行は、以下の手順で行います。

1.     サービスの再起動やアプリケーションの変更を行わずに、移行元のHadoop環境のエッジノードにLiveData Migratorをインストールします。
2.     ターゲットのOCI Object StorageとOCI Data Catalogを指定します。
3.     移行したいコンテンツを選択して、データおよびメタデータの移行を開始します。

その他、あらゆる規模の移行に対して管理・運用を容易にするLiveData Migratorの機能は、すべてフルに利用できます。アプリケーションの動作を変更したり、サービスを停止させることなく、移行元プラットフォームの運用を継続しながら、必要に応じて移行結果を監視・検証することができます。

次のステップ

OCIへの移行は、単にデータやワークロードを移動させるだけではありません。移行を成功させるには、ターゲットとなるレイクハウスアーキテクチャを最も効果的に使用して、組織がデータから利益を得る方法を近代化する方法を理解することも必要です。ExperianやIngersoll Randなどの組織が、OCIとレイクハウス・アーキテクチャの採用によってビジネス目標を拡大し、それを実現した優れた事例を、Oracle Liveの録画「The Future of the Data Lakehouse」で参照することができます。

WANdiscoのお客様は、大規模なデータ移行に関連する従来のリスクを簡素化し排除するLiveData Migratorを使用して、エクサバイト級のデータのクラウド移行を自動化しています。Hadoop、Spark、オブジェクトストレージのデータやメタデータをOCIにいかに早く導入したいとしても、その作業をサポートするWANdiscoの技術があれば、Oracle Cloud Infrastructureのレイクハウスアーキテクチャの恩恵を受けるまでの時間を短縮することができます。

詳細については、LiveData Migrator for Oracleをご覧ください。