Apache Kafka MOC

定義

Apache Kafka MOCは、producerとconsumerを時間的に分離して処理を平準化する仕組みである。対象、前提、入力、結果を区別する。

仕組みと具体例

at-least-once配送では重複するためconsumerを冪等にし処理済みIDを管理する。通常時に加え、境界値、失敗、並行実行、依存条件の変化も追跡する。

実践と検証

順序単位、retry、dead-letter、backpressure、schema進化を設計する。期待結果を観測可能に記述し、最小例から異常系へ広げる。

トレードオフ

精度・性能・単純さ・運用costの間にはtradeoffがある。適用範囲を広げる前に解決するriskと仮定を確認し、例外には理由と代替策を記録する。