最新の報道、解説、関連するテクノロジーストーリーを確認できます。
Joshua Oluikpeが、各セッション内でメッセージを厳密な順序で処理しつつ、独立したセッションを並行して処理できるKafkaの実践的な設計を解説する。この設計は、コンシステントハッシュ、セッションごとのGoワーカー、同一パス内での再試行、障害後のメッセージ損失を防ぐ隣接コミットポイントの管理に基づいている。
Cloudflareは、consistent hashingのデータ構造の表現を縮小し、リクエスト分散の精度に目立った影響を与えることなくハッシュの数を減らすことで、Pingora Backend Routerサービスのメモリ消費量を世界全体で100テラバイト以上削減しました。この取り組みは、統計分析とデータ構造設計によって、大規模インフラストラクチャで大幅な節約を実現できることを示しています。