LogDevice分布式日志存儲系統

LogDevice 是 Facebook 開源的一個可擴展，具備容錯性的分布式日志系統。

LogDevice 是專為日志設計的分布式數據存儲系統。一般的文件系統會將數據儲存為文件，LogDevice 會將數據存儲為日志，這些日志可被視為記錄式的，追加式的和可修剪的文件。

• 記錄式的（record-oriented）意味著數據作為不可分割的記錄寫入日志，而不是單個字節。日志實質上是問題的最小單元，用戶也一定是讀取整行日志。日志的存儲原則是按照日志序列號（LSN）來存放，且編號不保證是連續的，可能存在間隙。作者不會事先知道成功寫入后將為其日志分配什么 LSN ，這樣日志系統就可以優先高寫入需求，對寫入失敗容錯。

• 日志是追加式的（append-only），不支持修改現有記錄。

• 日志在被刪除之前預計會存在相對較長一段時間：幾天、幾月甚至幾年。日志的主要空間回收機制是修剪（trimming），根據基于時間或基于空間的保留策略，刪除最舊的記錄，或響應修剪日志的請求。

LogDevice 從頭開始設計，可提供大規模、高可靠性和高效率的多種日志類型。它還具備高度可調性，允許對每個用例進行優化，以便在從耐久性到效率性，一致性到可用性中進行恰當的權衡取舍。

?LogDevice 支持的一些 workload 示例：

• 預寫式日志

• 在分布式數據庫中記錄日志

• 事件日志

• 流處理

• ML 訓練流程

• 復制狀態機

• 延期工作項目進度