Ingesta y flujos de trabajo
Escribe las cargas de datos como flujos de trabajo y guarda los resultados como instantáneas inmutables. Cada actualización deja una versión.
Una frase que has oído
¿Podemos volver a sacar el informe del mes pasado con los datos de entonces?
Por qué ocurre
Los datos circulan con exportaciones manuales y hojas de cálculo, en archivos llamados «final» y «final 2». Cuando los datos cambian, nadie puede reproducir cómo eran, y cuando aparece una columna aguas arriba, aguas abajo desaparece una fila sin avisar.
Cómo lo hace Shuzi
Por desordenada que sea la fuente,
aterriza siempre igual.
Bases de datos, API y archivos cargados se extraen, transforman y fusionan mediante flujos de trabajo y se guardan como instantáneas inmutables y versionadas. Cada actualización es una versión nueva, y una mala puede revertirse.
Fuentes
- PostgreSQL
- SQL Server
- REST API
- CSV · XLSX
Flujo de trabajo
- 01Extraer
- 02Transformar
- 03Fusionar por clave
Instantáneas
- v13parquet inmutable
- v12parquet
- v11parquet
snapshot v13 · parquet · immutable
- 01
Cargas por flujos de trabajo
Orquesta visualmente extracciones y transformaciones. Los datos de distintas fuentes se sincronizan primero en instantáneas gestionadas y luego se analizan juntos.
- 02
Versiones inmutables
Una instantánea publicada nunca se edita. Se puede rastrear y revertir, y una versión referenciada jamás se borra por error.
- 03
Lectura y escritura separadas
Solo el planificador escribe; las consultas leen de una réplica de solo lectura. La API nunca modifica datos a tus espaldas.
En detalle
Muchas fuentes
Bases de datos, carga de archivos y extracción por API, con saltos SSH para las bases de producción.
Reglas de clave primaria
Las columnas de clave primaria no pueden ser nulas, así que un lote con nombres de columna que no encajan no puede fusionarse en silencio en una sola fila.
Fusión incremental
Fusión incremental por clave primaria, actualizaciones programables y avance y causas de fallo a la vista.
Referencias de versión
Se registran las referencias de modelos, consultas y exportaciones, de modo que la limpieza nunca borra una versión en uso.
Lleva tus datosdel enredo a la claridad.
Pruébalo primero con datos de ejemplo y luego trae los tuyos.