Almacenamiento de conjuntos de datos
datashard
DisponibleUn formato de tabla para conjuntos de datos y blobs que no necesita una base de datos.
Almacenamiento para conjuntos de datos, grabaciones y archivos grandes que conserva su historial: los registros se añaden, se toman instantáneas y un conjunto de datos puede leerse tal como estaba en cualquier momento anterior. Ocupa el lugar de volcados CSV y JSON sueltos, carpetas gestionadas a mano y bases de datos creadas solo para contener archivos.
Para quién es. Proyectos de Python que conservan grabaciones, conjuntos de datos o datos analíticos y necesitan un almacenamiento versionado y legible.
- Estado
- Disponible
- Forma parte de
- Código abierto
- Licencia
- Código abierto, Apache 2.0
- Etiquetas
- PythonInstantáneasViaje en el tiempoFormato abiertoDisco o almacenamiento de objetos
Qué hace
-
Solo anexado, con instantáneas
Los registros se anexan y se crean instantáneas, por lo que un conjunto de datos puede leerse tal como estaba en un momento dado.
-
Disco o S3
El mismo formato de tabla funciona en disco local o en almacenamiento de objetos, por lo que moverse entre ellos es un cambio de configuración.
-
Parquet por debajo
Los datos se almacenan como Parquet, por lo que cualquier herramienta que lea Parquet puede leerlos.
Para documentación, un piloto o una integración, contacte con nosotros.