こんにちは、技術開発室の滝澤です。 今回はクラウドと可用性についてのポエムを書いてみたいと思います。
まとめを最初に書くと次のようになります。
- 原則としては、ゾーン冗長構成にすることで可用性は向上する。
- クラウド事業者側のソフトウェアのバグやヒューマンエラーなどが原因の障害ではゾーン冗長構成でも回避できない場合がある。
- マルチリージョン構成やマルチクラウド構成は本当にそのレベルの可用性が必要かどうかを検討する。
技術の最近のブログ記事
|
|
||||
|---|---|---|---|---|---|
こんにちは、滝澤です。
今回は"The ETTO Principle"（効率-徹底性トレードオフ原則）について紹介します。ここでは「ETTO原則」と呼ぶことにしましょう。 ETTO原則はレジリエンス・エンジニアリングで著名なエリック・ホルナゲル氏（Erik Hollnagel）が提唱したもので、効率性（Efficiency）と徹底性（Thoroughness）はトレードオフの関係にあるというものです。 これは、元々は安全に関する分野での話ではあるのですが、IT分野においても無縁というわけではありません。そのあたりの話を紹介します。
本記事を3行でまとめると次のようになります。
- ETTO原則により効率性と徹底性はトレードオフの関係にある。
- ITシステムの運用の例として作業手順書作成の例を示し、効率性と徹底性のバランスを考える必要があることを示した。
- システム障害と根本原因分析について紹介し、根本原因分析を徹底的に行うのが難しいということを示した。
|
|
|
||||
|---|---|---|---|---|---|
|
|
|
||||
|---|---|---|---|---|---|
こんにちは、滝澤です。
前回の記事『WireGuardによるマルチクラウド構成VPNの事例紹介』に引き続き、社内事例を紹介します。
弊社ハートビーツではMSP（Managed Service Provider）サービスの可用性向上のために、社内基盤をマルチクラウド構成で運用しています。 複数のクラウド拠点のネットワーク間をWireGuardというVPNトンネルのソフトウェアで接続しています。 さらに、リレーショナルデータベース管理システムにはMySQLを利用しており、MySQLのレプリケーション機能の一つであるGroup Replicationを使って拠点内および拠点間における冗長化を行っています。
今回はこのMySQL Group Replicationの利用事例を紹介します。
行っていることをまとめると次のようになります。
- マルチクラウド構成（Azure, AWS, GCP）において、MySQLサーバーの冗長化としてMySQL Group Replicationを利用している。
- マルチプライマリーモード（multi-primary mode）で運用しており、アプリケーションからは同じ拠点内のMySQLサーバーをActive/Passive構成として利用している。
- MySQL用の監視プラグインに対して、MySQL Group Replicationのステータス監視の機能を開発して追加した。
|
|
|
||||
|---|---|---|---|---|---|
こんにちは、滝澤です。前回の記事『OctoDNSとGitLab CI/CDを利用した複数DNSプロバイダー構成の運用』に引き続き、社内事例を紹介します。
弊社ハートビーツではMSP（Managed Service Provider）サービスの可用性向上のために、社内基盤をマルチクラウド構成で運用しています。 複数のクラウド拠点のネットワークおよび事務所のネットワークとの間をWireGuardというVPNトンネルのソフトウェアで接続しています。 今回はこのWireGuardの利用事例を紹介します。
行っていることをまとめると次のようになります。
- マルチクラウド構成（Azure, AWS, GCP）の各拠点と事務所のネットワーク間をWireGuardによるVPNで接続している。クラウド拠点間のレイテンシーはVPNルーター間で2〜4ミリ秒、分散システムのノード間で2〜6ミリ秒である。
- ピア（対向ノード）毎にWireGuardのインターフェースを作成し、ルーティング制御にはルーティングデーモンのbirdを用いてBGPで行っている。
- VPN自動構成ツールを開発して、仮想マシン（インスタンス）起動時にVPNルーター間の接続に必要な鍵生成と鍵交換と設定ファイルの生成を行い、自動でVPN接続するようにしている。
株式会社ハートビーツの技術情報やイベント情報などをお届けする公式ブログです。
