主要观点：创新数据系统表明分离存储和计算是好主意，市场推动使用开放格式，但改变数据集有问题，Iceberg 和 Delta Lake 出现但有问题，DuckLake 提出新的湖屋格式来解决这些问题。
关键信息：

• 创新数据系统：BigQuery 和 Snowflake 分离存储和计算，市场推动使用开放格式。
• Iceberg 和 Delta Lake：为改变数据设计，但在 blob 存储中找最新版本表棘手，且只知单个表。
• DuckLake：将所有元数据结构移入 SQL 数据库，利用数据库管理元数据，提高效率和可靠性。
• ducklake DuckDB 扩展：实现 DuckLake 格式，支持多种功能，可独立运行或使用第三方数据库，目前为实验性。
  重要细节：
• DuckLake 设计原则：简单、增量，利用外部存储系统，选择任意支持 ACID 和主键约束的 SQL 数据库作为目录服务器。
• 提高可扩展性：将数据架构分为存储、计算和元数据管理三部分，可无限扩展。
• 提升速度：统一元数据减少文件 IO，降低事务提交时间，减少小文件写入，支持更多并发事务和快照。
• 功能丰富：支持任意 SQL、数据更改、多模式多表、多表事务、复杂类型等。
• 安装和使用：安装 DuckDB 后输入INSTALL ducklake;，通过ATTACH命令初始化 DuckLake，可进行各种操作如创建表、插入数据、删除数据、时间旅行等。