Almacenamiento de conjuntos de datos
datashard
DisponibleUn formato de tabla para conjuntos de datos y blobs que no necesita una base de datos.
Almacenamiento para conjuntos de datos, grabaciones y archivos de gran tamaño que conserva su historial. Los registros se anexan, se toman instantáneas y se puede leer un conjunto de datos tal y como se encontraba en cualquier momento anterior. Sustituye a volcados dispersos en CSV y JSON, carpetas gestionadas manualmente y bases de datos creadas únicamente para alojar archivos.
Para quién es. Proyectos de Python que conservan grabaciones, conjuntos de datos o datos analíticos y necesitan un almacenamiento versionado y legible.
- Estado
- Disponible
- Forma parte de
- Código abierto
- Licencia
- Código abierto, Apache 2.0
- Etiquetas
- PythonInstantáneasViaje en el tiempoFormato abiertoDisco o almacenamiento de objetos
Qué hace
-
Solo adición, con instantáneas
Dado que los registros se anexan y se guardan mediante instantáneas, usted puede leer un conjunto de datos tal y como se encontraba en un momento determinado.
-
Disco o S3
El formato de tabla funciona en disco local y en almacenamiento de objetos, y alternar entre ambos solo requiere un cambio de configuración.
-
Basado en Parquet
Los datos se almacenan en formato Parquet, por lo que cualquier herramienta compatible con Parquet puede abrirlos.
Para documentación, un piloto o una integración, contacte con nosotros.