Asayomu Tech
注目★★★★★Lobsters

Marginalia Search、Docker から systemd へ移行・クロール時間を半減

30秒で把握

  • 1Marginalia Search が Docker から systemd に移行・NUMA 対応と複数 IP 管理を簡潔化
  • 2アンランク済みクエリで約 5ms 実行・従来比 10 分の 1 以下・クエリ負荷半減
  • 3大規模ドメイン (Substack など) を専用パーティション化・フル クロール期間 4 ヶ月から 2 ヶ月に短縮

要約

Marginalia Search は運用基盤を Docker から systemd に移行し、NUMA 対応や複数パブリック IP の管理を簡潔にした。同時に新たなアンランク済みクエリエンドポイントを追加し、クエリ実行時間を従来比 10 分の 1 以下の約 5ms に短縮した。クローラーの速度ボトルネックであった Substack など大規模ドメインを専用パーティションに分離し、フル クロール期間を 4 ヶ月から半減させた。

あなたへの影響

Docker の抽象化レイヤーを外し systemd の低レベル制御で複雑な要件 (NUMA・複数 IP・長寿プロセス) を実現した事例。

推奨:自社システムが同様の制約を抱える場合、コンテナ化の限界と裸の systemd ユニット管理の選択肢を検討する価値がある。

詳細を読む → 元記事へ※ 本文は元記事をご確認ください (asayomu は要約のみ提供)

関連する記事

※ 外部記事の権利は原著作者に帰属します。著作権削除要請は copyright@asayomu.jp までご連絡ください(受領確認 24h・実処理 72h 以内)。