Distributed Systems

現代のイベント駆動型マイクロサービス（Event-Driven Architecture）では、サービス間を疎結合に保ちつつ状態変更を通知するために、OrderCreated や PaymentProcessed などのイベントが日常的に発行されます。 しかし、イベント発行の完全な信頼性を確保するには大きな課題があります：「データベースの更新」と「イベント発行」の双方を、確実に「両方成功」か「両方失敗」にするにはどうすればよいか？ マイクロサービスがローカルDB（PostgreSQLやMySQL）を更新した直後にメッセージブローカー（KafkaやRabbitMQ）へネットワーク経由で送信しようとすると、ネットワーク障害やタイムアウトによってデータ不整合が発生します。 この問題を根本的に解決するのが Transactional Outbox パターン です。 根本的な課題：二重書き込み問題 (Dual-Write Problem) 二重書き込みを単純に行うと、以下のリスクが生じます： ローカルデータベースへビジネスデータを保存 メッセージブローカーへイベントを発行 DBコミットが成功した後にKafkaへの送信がネットワークエラーで失敗した場合、DBにはデータが存在するのに後続サービスへイベントが届きません。結果：データの不一致。 Transactional Outbox パターンとは？ リレーショナルデータベースの ローカルACIDトランザクション を活用する設計パターンです。 イベントを直接ネットワーク経由で送信するのではなく、ビジネスデータの保存と全く同じトランザクション内で、専用の Outbox テーブル にイベントデータを書き込みます。 ACIDの保証により、両方がコミットされるか、両方がロールバックされるかのいずれかになります。 その後、独立したバックグラウンドプロセス（Message Relay）がOutboxテーブルから読み出し、メッセージブローカーへ発行します。 メッセージリレー戦略：Polling Publisher vs CDC (Debezium) 1. Polling Publisher（ポーリング方式） 定期的なスケジューラで未処理レコード（SELECT * FROM outbox_events WHERE processed = FALSE）を取得し、Kafkaに送信後に更新。

Web 開発の初期の頃、ソフトウェア アプリケーションの構築は簡単でした。コードを記述し、それを単一の実行可能ファイルまたは展開可能なアーカイブにパッケージ化し、サーバー上で実行するだけでした。 モノリシック アーキテクチャとして知られるこのアプローチは、何十年にもわたって業界に役に立ちました。 しかし、アプリケーションが数百人の開発者と数百万人の同時ユーザーを抱える大規模なエンタープライズ プラットフォームに成長するにつれて、モノリスには限界が見え始めました。デプロイメントは遅くなり、リスクが高く、データベースがボトルネックになり、コードベースが複雑すぎて単一の開発者が理解できないようになりました。 これらのスケーリングのボトルネックを解決するために、業界は マイクロサービス アーキテクチャ に移行しました。開発者は、単一の巨大なアプリケーションを構築するのではなく、HTTP/REST、gRPC、メッセージ ブローカーなどの軽量プロトコルを介して通信する、小規模で独立した疎結合サービスのコレクションにシステムを分割します。 この記事では、マイクロサービスが最新のアプリケーションにもたらす主な利点、マイクロサービスによってもたらされる深刻な課題、そしてこのアーキテクチャが次のプロジェクトに適しているかどうかを判断する方法を分析します。 1. モノリシック アーキテクチャとマイクロサービス アーキテクチャ 詳細に入る前に、これら 2 つの設計パラダイムの基本的な違いを視覚化しましょう。 モノリスでは、すべてのモジュール (ユーザー管理、製品カタログ、注文処理など) が同じ実行スペースを共有し、単一の共有データベースに書き込みます。 マイクロサービス セットアップでは、各サービスが独自のプロセスで実行され、独自のプライベート データベースを管理し、クリーンな API を公開します。 API ゲートウェイ はクライアントの単一のエントリ ポイントとして機能し、リクエストを適切なバックエンド サービスにルーティングします。 2. マイクロサービスの利点 マイクロサービス アーキテクチャを採用すると、大規模な最新のシステムに推奨される選択肢となる、いくつかの魅力的な利点が得られます。 A. 独立した展開可能性とリリース速度 モノリスでは、チェックアウト システムに小さな変更をデプロイするには、アプリケーション全体を再構築して再デプロイする必要があります。 1 つのチームの機能が壊れると、リリース全体がブロックされます。 マイクロサービスでは、各サービスに独自の独立した CI/CD パイプラインがあります。配送サービス チームは、在庫チームや支払いチームと調整することなく、1 日に 10 回アップデートを展開できるため、機能の配信速度が大幅に向上します。