Under the hood, off the hot path: how D1 scales to millions of databases
D1 escala a millones de bases de datos separando las consultas de la ruta de control centralizada: las consultas se enrutan desde el borde mediante metadatos en Workers KV, mientras que Postgres gestiona los metadatos transaccionales. La arquitectura usa heartbeats para corregir estados inconsistentes, colas y agregaciones previas para limitar la contención en Postgres, y ClickHouse para analítica y ciertos controles de uso. Cloudflare informa que D1 superó los 5,5 millones de bases de datos y explica los compromisos de consistencia, caché y ubicación que permiten mantener ágiles las consultas.
A deep dive into how D1 architected its control plane to scale and manage millions of databases, while keeping data plane query operations at the edge. We share guiding principles on how to build on the Developer Platform effectively.