[OCI]Big Data Service：何が新しくなったのか 2020年10月更新 (2020/10/26)

 Big Data Service：何が新しくなったのか 2020年10月更新 (2020/10/26)

https://blogs.oracle.com/datawarehousing/big-data-service-whats-new-october-2020-update
投稿者：Alexey Filanovskiy | Product Manager

オラクルが最も革新的なクラウドプラットフォームの一つを持っていると言っても過言ではありません。
Big Data Service（BDS）は、そこで見かけるPaaSサービスの1つです。
これは、Oracle CloudにClouderaベースのHadoopクラスタを簡単にデプロイして管理する方法を提供します。
サービスには以下のような多くの機能が搭載されています。

  • クラスタ作成（完全に安全で可用性が高い）、ユーザーは完全に管理されたHadoopクラスタを数分で立ち上げることが可能
  • クラスタコンピュートを成長させ、ワークロードの増加に追いつくためにワーカーノードを追加
  • データ量が増え続けている場合のみストレージを増設し、処理は変わらない

今回のブログ記事では、ここ数ヶ月の間にOracle Big Data Serviceに追加したものを紹介したいと思います。

柔軟性がある


サービスを開始したとき、多くのお客様が喜んで使い始めてくれました。
クラスタの作成、新しいノードの追加、ブロックストレージの追加がとても簡単にできることを喜んでいましたが、
初日からの主な懸念事項の1つは、サービスが十分に柔軟ではないということでした。
言い換えれば、自分が使う分だけお金を払いたいということです。例えば、
日中は5つのワーカーノードをそれぞれ16コアでクラスタ化したい。
しかし、なぜ夜間や週末にこれにお金を払わなければならないのでしょうか？払ってはいけません。
シェイプ変更機能を使わなければなりません。これはここに文書化されていますので、私は文書を書き直すつもりはありません。

サービスコンソールに行って、シェイプ変更を選択してください。


次に、望ましいノードグループの新しいシェイプを選択する必要があります。


少し待ってください(クラスタはローリングリスタートを実行します)。

もう一つのユースケースは、「低コストで始めて、大きく成長する」というものです。
実際、これはクラウドには独自の利点があり、柔軟性/市場投入までの時間が鍵の一つである。
想像してみてください。テストや検証が必要なアイデアがあるとします。開発に大規模なクラスタが必要ですか？
まずは非常に基本的で安価なものから始めて、アイデアが証明できたら、ノードを増やしたり、形を変えたりする（増やす）ことができる。

Notebookへのアクセス


Hadoopはデータを保存して処理する技術です。
しかし、その上でコードを開発するには何らかのインターフェースが必要ですよね？
Oracleは最近、新しい機能を発表しました - Oracle Notebook
Oracle Notebookは、ユーザーに可能にします。

  • Jupiter NotebooksとApache Zeppelinから既存のノートブックをインポート
  • Spark、PySpark、Python、R、JDBC、Graph (PGX)などの異なるインタプリタを実行するための単一のインターフェイスとして環境を使用
  • ビッグデータ・クラスタのスケーラビリティとパフォーマンスを活用
  • データサイエンティスト、開発者、ビジネスユーザーとのコラボレーション、チーム間でノートPCを共有
  • Notebookに特定のタグを作成し、関連文書の検索を容易にする
  • Zeppelinではデフォルトでは利用できない多くのチャート・タイプを可能にする高度なビジュアライゼーション・エンジンを使用して、データを探索
  • Cloud SQLとOracle SQLを使用して、JDBCインタプリタを使用してデータを探ります。

どこからでもアクセスできる


セキュリティへの配慮から、FastConnect や VPN を使用してクラスタ UI (Notebook, Cloudera Manager, Hue など) にアクセスすることをお勧めしますが、
時にはエンドポイントをパブリックインターネット上に公開したい場合もあります (開発者の利便性のため)。
ここではOCIロードバランサーの使用をお勧めします。詳しいステップバイステップガイドはこちらにあります。

クイックスタート


すべてのセキュリティルールやネットワーク設定を設定するのは、
OCI の無料クレジットにサインアップしたばかりの新しいユーザーにとっては難しいことかもしれません。
良いニュースは、ここでは分でスタックをスピンアップするTerraformスクリプトであることです。

楽しんでプレイしてください

コメント

コメントを投稿

このブログの人気の投稿

Oracle Database 19cサポート・タイムラインの重要な更新 (2024/11/20)

イメージ
Oracle Database 19cサポート・タイムラインの重要な更新 (2024/11/20) https://mikedietrichde.com/2024/11/20/important-update-to-oracle-database-19c-support-timelines/ 長い沈黙は、私が隠れているという意味ではありません。つまり、今はとても忙しいということです。そして、より少ない旅行で、私はあなたのコメントにもブログと返信するより多くの時間を持っていることを願っています。それでも、Oracle Database 19cサポート・タイムラインの非常に重要な更新について説明します。 * 更新された内容 2024年11月19日現在、Oracle Database 19cのサポート・タイムラインが調整されています。 MOSノート: 742060.1 – 現在のデータベース・リリースのリリース・スケジュールを見ると、新しい日付が表示されます。 Premier Support、2029年12月31日まで 2030年1月1日から2032年12月31日までの拡張サポート 2033年1月1日から2034年12月31日までのアップグレード・サポート これは知ることがとても大切です。 他のリリースの更新はありますか。 MOSノートの終わりにある変更ログ: 742060.1 – 現在のデータベース・リリースのリリース・スケジュールでは、Oracle Database 21cの最新の更新も確認できます。このリリースのPremier Support期間は、2027年7月31日まで延長されました。 また、Oracle Database 23aiのパッチ適用終了日は2032年12月31日に設定されています。 Lifetime Support Policy 更新は、Oracle Technology Productsの Oracle Lifetime Support Policy (6ページ)でも確認できます。 From: Oracle Lifetime Support Policy for Oracle Technology Product s – page 6 – Nov 19, 2024 特に、次の表に示す制限事項に注意してください。 Oracle Database 1...
続きを読む

Oracle APEXのInteractive Gridで、Oracle Formsと比較して、重複行の検証を制御/通過させる方法 (2022/07/21)

イメージ
Oracle APEXのInteractive Gridで、Oracle Formsと比較して、重複行の検証を制御/通過させる方法 (2022/07/21) https://medium.com/oracledevs/how-to-control-or-pass-validation-for-duplicate-rows-in-interactive-grid-of-oracle-apex-as-compare-18f453f750bf 投稿者： Jignesh oracle Formsでは、データブロックの重複行を制御するのは非常に簡単ですが、IGの検証を制御するにはどうすればよいでしょうか。 必要な出力 ステップ1：インタラクティブグリッドのある白紙ページを作成します（私は1つの領域「IG」を作成し、インタラクティブグリッドとしてタイプを選択しました） ステップ 2: リージョンに Static ID を定義する (私の場合、リージョンは IG で、Static ID も IG です) ステップ3：複製を制御したいカラムのStatic IDを定義します ステップ4：関数とグローバル変数に移動します コード： var validity, message, ui = this.data; (function($) { function update(model) { var projKey = model.getFieldKey(“PROJECT_ID”), recObj = [], recArray = []; model.forEach(function(record, index, id) { var projid = parseInt(record[projKey], 10), // record[salKey] should be a little faster than using model.getValue in a loop meta = model.getRecordMetadata(id); if (!isNaN(projid) && !meta.deleted && !meta.agg) { recObj = {ID: id, project_id: projid}; recArray.push(recObj)...
続きを読む

Oracle APEX 24.1の一般提供の発表 (2024/06/17)

イメージ
Oracle APEX 24.1の一般提供の発表 (2024/06/17) https://blogs.oracle.com/apex/post/announcing-oracle-apex-241 投稿者： Ashish Mohindroo | Vice President, Product Management APEX Low Code Application Platform Oracle APEX 24.1は、 ダウンロード が一般的に可能になり、世界中のOCI APEX Application DevelopmentおよびAutonomous Database Cloud Serviceリージョンにロールアウトされています。この最新リリースで、GenAIを使用して最初のローコード・アプリケーションを構築する方法を学習します。リリースのお知らせのリプレイはこちらからご覧いただけます。 このリリースでは、優れたエンタープライズ・グレードのアプリケーションを簡単に構築できるイノベーションの3つの主要な柱(AI支援アプリケーション開発、Oracleの次世代データ・プラットフォームのパワー活用、高度なWebおよびモバイル・アプリケーションを構築するための強力なエンタープライズ・グレードのコンポーネント)が提供されています。 AI支援アプリ開発 このリリースでは、AIをローコード開発に直接取り込み、すべての開発者が高度なクラウドおよびモバイル・アプリケーションを簡単に構築できるようにしています。開発者は、AIをアシスタントとして使用して、時間と労力を削減してアプリを構築できるようになりました。APEX AIアシスタントを使用すると、開発者は複数のウィンドウを使用して表名と列名を検索する必要がなくなります。 APEX 24.1 では、クラウドおよびモバイル・アプリの自然言語ベースの開発を可能にするネイティブAI搭載APEX AIアシスタントを導入しました。APEX AIアシスタントを使用すると、すべての開発者は自然言語を使用してSQLを生成できるため、アプリケーションをより簡単に構築したり、ワンクリックで構文修正を実行したり、表名を覚える必要がなくなります。開発者は、自然言語プロンプトを使用して目的の機能とコンポーネントを指定し、直感的な会話型インタフェースを使用し...
続きを読む