Enterprise Manager: ComcastによるMySQL InnoDBクラスタのモニタリングの拡張方法 (2024/04/22)

https://blogs.oracle.com/observability/post/enterprise-manager-how-comcast-enhanced-monitoring-for-mysql-innodb-clusters

投稿者： Desiree Abrokwa | Product Manager, Enterprise and Cloud Manageability

ゲスト著者:Charles Ju、エンジニア5、テクノロジ・オペレーション、Comcast、Nirup Sama、エンジニア3、ソフトウェア開発およびエンジニアリング、Comcast

Comcastは、世界中の何億人ものお客様にコネクティビティ、エンターテイメント、スポーツ、ニュース、エクスペリエンスを提供する、世界有数のメディアおよびテクノロジー企業です。ComcastのDBAチームは、堅牢で可用性の高いOracle Enterprise Manager(EM)インフラストラクチャを導入し、大規模なOracle Database DBaaS操作のプロビジョニング、パッチ適用、監視、サポートを行っています。Enterprise EditionのMySQLデータベースを監視するために、EMを使用して、個別のMySQL Enterprise Monitor (MEM)インフラストラクチャを設定するのではなく、信頼性の高いインフラストラクチャを活用することを決定しました。

このブログでは、メトリック拡張を使用して、InnoDBクラスタ・メンバー・ノードがオフラインまたはイジェクトされたときに監視およびアラートを発するソリューションを共有しています。

一般的なMySQL InnoDBクラスタは、3つ以上の個別のMySQL Serverノードで構成されます。MySQL InnoDBクラスタは、MySQL Group Replicationテクノロジを使用して、クラスタ・メンバー・ノード間の仮想同期レプリケーションと、組込みの競合検出または処理、およびすべてのクラスタ・ノード間での一貫性の保証を提供します。また、自動メンバーシップ管理、フォルト・トレランス、自動フェイルオーバーなどの機能も提供します。

図1: MySQL InnoDBクラスタ・アーキテクチャ

ネットワークの問題などの様々な理由により、MySQL InnoDBクラスタ・メンバー・ノードが特定の時間枠内に他のメンバー・ノードと通信できない場合があります。これにより、InnoDBクラスタ・メンバー・ノードがイジェクトされる場合があります。当社のDBAチームは、EMがこのような問題を検出し、DBAチームにアラートを送信して、対応する修正アクションをできるだけ早く実行できるようにすることを希望しています。MySQLのEMでは、現在この監視機能が提供されていないため、このようなInnoDBクラスタの問題を取得するための独自のメトリック拡張を開発しました。

ComcastがMySQL InnoDBクラスタのメトリック拡張を作成した方法

最初に、InnoDBクラスタ・メンバー・ノードのステータスを検出するカスタム・スクリプトを作成しました。カスタム・スクリプトのロジックを次に説明します。

次の疑似コードは、InnoDBクラスタ・メンバー・ノードのステータスを検出するために使用されます。メンバー・ノードのステータスがOFFLINEの場合、MySQL InnoDBクラスタからイジェクトされたことを意味します。

ClusterMemberState=Get-InnoDBCluster-Member-State 

if [ -z "$ClusterMemberState" ]
then
    if [[ -s /tmp/temp_master_status ]];then
        echo "ONLINE"
    else
        echo "OFFLINE"
    fi
else
    echo "$ClusterMemberState"
fi

次に、EMを使用して、カスタム・スクリプトを使用してメトリック拡張を定義しました。メトリック拡張定義の最初のページで、MySQL Databaseターゲット・タイプであるOSコマンド・アダプタを選択し、15分ごとに収集スケジュールを設定します。