注目★★★★★Cloudflare
Cloudflare、ハードウェア追加なしでスキャン処理量を10倍に拡大
30秒で把握
- 1Cloudflareがスキャン処理を毎秒10件→120件超に10倍拡大・ハードウェア追加なし
- 2Kafkaバッチ消費・高速/低速レーン分割・Postgres一括UPSERTで達成
- 3全顧客のスキャン頻度2倍・無料プランも自動スキャン有効化
要約
CloudflareはSecurity Insightsシステムのスキャンスループットをハードウェア追加なしで10倍以上に拡大し、毎秒120件超の処理を実現した。従来は毎秒10件程度で週1〜2回しかスキャンできず、無料プランの多くのアカウントはオプトインが必要だったため未スキャンのままだった。改善策として、Kafkaコンシューマのバッチ処理・高速/低速レーンへの分割、PostgresクエリのUPSERT一括化、APIのバッチ書き込み最適化を実施した。
あなたへの影響
自社でKafkaを用いたイベント駆動アーキテクチャを運用しているチームにとって、バッチ消費・レーン分割・クエリ一括化はスループット改善の参考事例として読む価値がある。
推奨：即時対応は不要だが、スキャンやバッチ処理の遅延に悩んでいるチームは実装パターンを確認しておくと良い。