# Manifold [[Meta]] のリモート・耐久・高可用な blob ストレージサービス。[[Logarithm]] はログとセカンダリインデックスを物理メモリ・ローカル SSD・Manifold の3層に tiering し、Manifold を最終的な disaggregated ストレージ層として使う。Manifold の disaggregated ストレージは read-write quorum を用いて強い一貫性・耐久性・可用性の保証を提供する。Logarithm はこれにより、ingestion 層で計算を複製する代わりに分散状態管理を disaggregated ストレージ層へ push down し、ingestion・query 層の耐障害性をシンプルにしている。ingestion ノードはローカル SSD 上のシリアライズ済みオブジェクトを 20 分エポックで Manifold にストリーミングし、[[Scribe]] のオフセットも Manifold にチェックポイントする。障害を起こした ingestion ノードの置き換え時は、新ノードが Manifold から直前エポックのデータをダウンロードして復旧する。(Source: [[@2024__EngineeringAtMeta__Logarithm - A logging engine for AI training workflows and services]]) [[Zoomer]] も大規模なプロファイリングのトレースデータを保存する基盤として Manifold を使う。Logarithm では低温ログの耐久ストレージ層、Zoomer では巨大トレースの保存層という異なる上位用途に現れるが、どちらも Meta の高スループットな観測データを計算層から分離して保持する構成である。(Source: [[@2025__EngineeringAtMeta__Zoomer - Powering AI Performance at Meta's Scale Through Intelligent Debugging and Optimization]]) ## 関連 - ソース: [[@2024__EngineeringAtMeta__Logarithm - A logging engine for AI training workflows and services]] - 開発元: [[Meta]] - 利用先: [[Logarithm]] - 関連エンティティ: [[Scribe]] / [[LogDevice]]