Fuentes - Descuentos
Objetivo
Documentar las fuentes de información consumidas por el proceso job_discounts, así como los insumos requeridos para su ejecución describiendo su origen, propósito y participación dentro del flujo de procesamiento.
Alcance
Dentro del Alcance
- Identificación de las fuentes de datos utilizadas por el proceso.
- Descripción del tipo y tecnología asociada a cada fuente.
- Tablas migradas utilizadas como referencia.
- Parámetros de entrada requeridos.
- Identificación de salidas generadas por el proceso.
Fuera del Alcance
- Transformaciones aplicadas a los datos.
- Reglas de negocio.
- Validaciones técnicas o funcionales.
Contenido principal
Descripcion general
El proceso job_discounts obtiene información desde sistemas fuente alojados en SQL Server mediante conexiones JDBC y utiliza tablas previamente almacenadas en Delta Lake para realizar la comparación incremental de registros.
La información procesada es consolidada y persistida nuevamente en la capa Bronze, manteniendo actualizada la entidad GRUPO_COMERCIAL.
Fuentes de datos
La siguiente tabla presenta las fuentes de datos consumidas, detallando el tipo de objeto, la tecnología empleada para su acceso y el propósito de cada una dentro del proceso.
| Fuente | Tipo | Tecnología | Descripción |
|---|---|---|---|
SIDEFF.DBO.GRUPO_COMERCIAL | Tabla origen | SQL Server (JDBC) | Fuente principal de información utilizada por el proceso. |
GRUPO_COMERCIAL | Tabla migrada | Delta Lake | Tabla existente utilizada como referencia para la comparación incremental. |
Entradas y salidas
En esta sección se presentan los elementos de entrada y salida del proceso, identificando los datos y parámetros consumidos, así como los objetos generados como resultado de la ejecución.
Entradas
| Entrada | Descripción |
|---|---|
SIDEFF.DBO.GRUPO_COMERCIAL | Información obtenida desde SQL Server mediante JDBC. |
GRUPO_COMERCIAL | Tabla Delta utilizada como referencia para identificar cambios. |
| Parámetros de ejecución | Configuración utilizada durante la ejecución del pipeline (StartDate, EndDate, catalog, schemas). |
Salidas
| Salida | Descripción |
|---|---|
cat_pruebas_alpura.sch_bronze_layer.sql_GRUPO_COMERCIAL | Tabla Delta actualizada con la información procesada. |
Parametros identificados
| Parametro | Descripción |
|---|---|
| StartDate | Fecha inicial utilizada durante la ejecución del proceso. |
| EndDate | Fecha final utilizada durante la ejecución del proceso. |
| catalog | Catálogo utilizado para la construcción. |
| schemas | Esquemas empleados durante la ejecución. |
Este documento tiene como finalidad proporcionar trazabilidad sobre el origen y destino de la información utilizada por el proceso.
Artefactos relacionados
| Artefacto | Descripción |
|---|---|
| Diseño Funcional - Descuentos | Documenta la arquitectura funcional, componentes y dependencias del proceso. |
| Diseño Técnico - Descuentos | Documenta la arquitectura técnica, componentes y dependencias del proceso. |
| Operación - Descuentos | Describe los controles operativos y actividades de soporte del proceso. |
| Pipelines - Descuentos | Describe la secuencia de ejecución y procesamiento de datos. |
| Reglas de Negocio - Descuentos | Describe las reglas apliacadas durante la conformación de la dimensión. |
| Tablas - Descuentos | Documenta las tablas origen, intermedias y destino involucradas. |
| Validaciones - Descuentos | Documenta controles y validaciones asociados al proceso. |
Próximos pasos
No se identifican próximos pasos específicos dentro del alcance de este documento.