Data Lakehouse

解決 Data Lake 的小檔案痛點：解析 DuckLake 1.0 以 SQL Catalog 重構元數據管理

DuckLake 1.0 採取了一種『回歸資料庫』的激進策略來修正湖倉一體的缺陷，其將元數據從文件系統抽離至 SQL Catalog 的做法在邏輯上極具效率且能有效壓制小檔案問題。然而，此設計將系統的可用性與性能高度綁定在 SQL 資料庫的擴展能力上，若 Catalog 成為單一性能瓶頸，其優勢將被抵消，因此在極大規模集群下的穩定性仍需觀察。