扩展模型和多租户数据系统 - ASDS 第 6 章 - 杰克·范莱特利

主要观点:探讨大规模多租户数据系统中的扩展问题,包括与单租户数据系统的比较、各层的扩展方式(如代理层、计算层、存储层)、零扩展和冷启动等,强调多租户模式在经济和可扩展性方面的优势。
关键信息

  • 多租户指在共享资源池中放置多个租户的工作负载,资源池越大越好。
  • 有多种资源共享模型,如多租户进程(共享进程、V8 隔离)、装箱单租户进程(容器、虚拟化)。
  • 不同系统在计算层选择不同的扩展模型,SQL 系统倾向于装箱单租户进程,非 SQL 的 DynamoDB 采用共享进程模型。
  • 计算层扩展依赖于实时匹配计算资源和工作负载,包括添加或删除租户的 pod 等,零扩展会引入冷启动问题。
  • 代理层倾向于使用共享进程模型,根据总负载扩展。
  • 存储层除 ClickHouse Cloud 外都有存储层,采用共享进程模型,数据可复制存储,存储层扩展与数据和分层有关。
  • 多租户共享进程系统的租户扩展是设置适当的速率限制和基于使用量计费。
    重要细节
  • 不同系统在各层的扩展方式不同,如 Neon、CockroachDB 和 ClickHouse Cloud 在计算层的选择,以及各系统存储层的特点。
  • 计算层扩展中的调度逻辑包括匹配 pod 到租户负载、主机到总负载等方面,以及预暖池和空 pod 等的作用。
  • 存储层零扩展在不同系统中的情况,以及共享进程模型在存储层的优势和注意事项。
  • 多租户系统与单租户系统在扩展方面的对比,突出多租户系统的优势。
阅读 37
0 条评论