Linaje de datos: de la cifra a su origen, sin reconstruir nada.
El linaje de datos es el registro del recorrido de una cifra: de qué origen y qué versión salió, qué reglas se le aplicaron y en qué orden, en qué modelo se calculó, qué depende de ella y quién la consumió. Se registra en el momento en que ocurre cada paso; no se reconstruye después. En Lorian Analytics cada eslabón queda registrado cuando ocurre, en todos los planes.
Se registra cuando ocurre · Cada ejecución es una versión · El original nunca se modifica
Ventas consolidadas
modelo Gold · 2 fuentes Silver
Filas
1.284.376
+2.412 vs. v17
Duración
42 s
motor DuckDB
Tasa de cruce
98,4%
Excelente
Versión
v18
hoy 07:05 · agenda
Esquema · de dónde viene cada columna
+ estadísticas por columna: distribución, percentiles, histograma
Historial · cada ejecución es una versión
comparar dos versiones lado a lado · Δ filas, duración, tasa de cruce
Cinco eslabones, del archivo original a la lectura desde Power BI.
Una cifra se puede defender cuando cada eslabón responde con evidencia. Estos son los cinco que la plataforma escribe hoy, sin que nadie tenga que documentar nada.
- Bronze
01
Origen y versión
Cada carga —un archivo, una tabla de SQL Server, Databricks o Snowflake, un archivo de carpeta de red— entra como una versión numerada de su dataset. El original nunca se modifica y las versiones se listan con quién y cuándo.
- Silver
02
Reglas aplicadas
Diecisiete tipos de evento por archivo: análisis, columna renombrada, tipo cambiado, transformación configurada y ejecutada, receta aplicada, ofuscación, versión nueva. Cada ejecución de receta guarda la configuración exacta que corrió.
- Gold
03
Modelo y fuente de cada columna
Un modelo fija sus fuentes por versión. Su ficha muestra la composición de fuentes como diagrama —qué tablas se cruzaron y cómo— y el esquema con la fuente de origen de cada columna.
- Impacto
04
Qué depende de esto
Antes de borrar un dataset, la plataforma lista los modelos que lo usan y bloquea la eliminación. Cuando una fuente tiene versión nueva, el modelo lo avisa: linaje leído hacia adelante.
- Consumo
05
Quién leyó qué versión
Cada lectura por token queda registrada: cuándo, qué herramienta, qué versión, en qué formato, cuántos bytes. La cifra que salió a Power BI tiene número de versión.
Linaje, trazabilidad, auditoría e impacto.
Se usan como sinónimos y no lo son. Distinguirlas evita comprar un «linaje» que resulta ser un diagrama dibujado a mano, o un registro de auditoría que no dice por dónde pasó el dato.
El linaje se lee en dos direcciones. Hacia atrás responde de dónde viene y sirve para explicar y auditar. Hacia adelante responde a dónde va y sirve para no romper nada: es el análisis de impacto.
- Linaje
- Por dónde pasó el dato: origen, versiones, reglas, modelo, consumo. Es el mapa del recorrido.
- Trazabilidad
- La capacidad general de seguir ese rastro. El linaje es la forma concreta que toma la trazabilidad.
- Registro de auditoría
- Quién hizo qué y cuándo. Complementa al linaje: uno explica el recorrido del dato; el otro, las acciones de las personas.
- Análisis de impacto
- El linaje leído hacia adelante: a dónde va el dato y qué se rompe si cambia.
Linaje real o linaje de folleto.
-
01
¿Se registra solo?
Sí. Si alguien tuviera que documentarlo, sería documentación con otro nombre.
-
02
¿Llega al nivel del dato?
Sí: a la versión de la carga, a la columna del modelo y a la lectura por token.
-
03
¿Incluye las reglas?
Sí: el rastro de cada archivo y la configuración congelada de cada ejecución de receta.
-
04
¿Funciona hacia adelante?
Sí: qué modelos dependen de un dataset, antes de borrarlo o cambiarlo.
-
05
¿Sobrevive al tiempo?
Sí: cada modelo fija sus fuentes por versión y la API sirve la versión que se pida mientras su archivo siga retenido.
Con su estado, no con una promesa.
-
Grafo de linaje por dataset en el catálogo
En construcciónLa vista «Ver linaje» del catálogo está marcada como próxima en la aplicación. Hoy el recorrido se consulta desde cada modelo Gold y desde el rastro de cada archivo.
-
Linaje por columna a través de cada transformación
En construcciónEl esquema de un modelo dice de qué fuente Silver viene cada columna. No reconstruye cada transformación intermedia: para eso está el rastro de reglas del archivo.
Lo que se pregunta sobre linaje de datos
- Auditoría y trazabilidad De la cifra publicada al archivo original, y el rastro de cada acción. Ver
- Versionado La cadena de versiones de cada dataset y de cada modelo. Ver
- Capa Gold Composición de fuentes y esquema con la fuente de cada columna. Ver
- API y tokens La lectura registrada con su número de versión. Ver
Que cada cifra
pueda explicar de dónde salió.
El linaje se registra desde la primera carga, en todos los planes.