Skip to main content

Operación - DS Canal SIDEFF

Objetivo​

Documentar la información operativa del proceso DS Canal SIDEFF, incluyendo consideraciones de ejecución, trazabilidad, Runbook L1, acciones básicas y escalamiento para la construcción y/o actualización de la dimensión cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.

Alcance​

Dentro del alcance​

  • Consideraciones operativas del proceso NB_Silver_DS_Canal_SIDEFF.
  • Validación de parámetros antes de ejecutar.
  • Validación de permisos de lectura y escritura.
  • Validación de existencia del catálogo y esquema destino.
  • Gobierno y trazabilidad identificados.
  • Runbook L1 del proceso.
  • Detección de fallos, acciones básicas y escalamiento.

Fuera del alcance​

  • Diseño funcional del proceso.
  • Arquitectura técnica detallada.
  • Fuentes de datos detalladas.
  • Reglas de negocio.
  • Flujo paso a paso del pipeline.
  • Validaciones de negocio no identificadas.
  • Tablas migradas consumidas, ya que no se identifican en el DBC.

Contenido principal​

Descripción general​

Este documento concentra la información operativa del proceso DS Canal SIDEFF, documentado como proceso de dimensión para la construcción y/o actualización de cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.

La operación del proceso requiere validar los widgets de ejecución, la disponibilidad de la fuente cat_master_alpura.sch_bronze_layer.snw_dim_canales, los permisos sobre fuentes y outputs, así como la existencia del catálogo y esquema destino antes de ejecutar la persistencia mediante saveAsTable.

Consideraciones Operativas​

  • Validar valores de widgets antes de ejecutar:
    • w_StartDate
    • w_EndDate
    • w_catalog
    • w_schema origin
    • w_schema destiny
  • Validar permisos de escritura antes de ejecutar saveAsTable.
  • Validar existencia del catálogo y esquema destino antes de ejecutar saveAsTable.
  • Validar permisos sobre fuentes y outputs.
  • No se identifica workflow asociado en el DBC.
  • No se identifica frecuencia de ejecución en el DBC.

Gobierno y Trazabilidad​

  • La trazabilidad se basa en el DBC exportado.
  • Se debe validar owner técnico.
  • Se deben validar permisos sobre fuentes y outputs.
  • No se debe documentar ni exponer lógica no presente en el DBC.

Runboook L1​

CampoValor
Nombre del procesoNB_Silver_DS_Canal_SIDEFF
Qué haceConstruir y/o actualizar la dimensión DS Canal (SIDEFF) en Databricks, tomando como base únicamente la lógica definida en el DBC y persistiendo el resultado en cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
Workflow asociadoNo especificado en el DBC.
FrecuenciaNo especificada en el DBC.
Cómo ejecutarlo manualEjecutar el notebook manualmente en Databricks, capturando widgets cuando aplique y validando que las fuentes estén disponibles.
Cómo detectar falloRevisar estado del job/notebook, errores de SQL/PySpark, permisos de lectura/escritura, conteo de registros y discrepancias en llaves.
Acciones básicasValidar parámetros, disponibilidad de fuentes, permisos sobre catálogo/esquema, existencia de tablas destino y reintentar la ejecución controladamente.
EscalamientoEscalar a Data Engineering / Arquitectura de Datos si falla la lectura fuente, el join de homologación, la escritura Delta o la validación de negocio.

Soporte y Escalamiento​

El Runbook L1 establece como un punto de escalamiento a Data Engineering y Arquitecto de Datos

EL escalamiento aplica si se presentan fallos en:

  • Lectura fuente.
  • Join de homologación.
  • Escritura Delta.
  • Validación de negocio.

Artefactos relacionados​

ArtefactoDescripción
Diseño Funcional - DS_Canal_SIDEFFDescribe el objetivo funcional, alcance y descripción general del proceso
Diseño Técnico - DS_Canal_SIDEFFDocumenta arquitectura, modelo de datos, dependencias y consideraciones técnicas.
Fuentes - DS_Canal_SIDEFFDocumenta la fuente de datos utilizada por el proceso.
Pipelines - DS_Canal_SIDEFFDescribe la secuencia de ejecución del proceso.
Reglas de Negocio - DS_Canal_SIDEFFContiene las reglas identificadas para el procesamiento.
Tablas - DS_Canal_SIDEFFDocumenta dimensión principal, objetos relacionados y llaves identificadas.
Validaciones - DS_Canal_SIDEFFDescribe revisiones operativas y criterios de validación identificados.

Próximos pasos​

  • Confirmar workflow asociado al proceso.
  • Confirmar frecuencia de ejecución.
  • Validar owner técnico.
  • Validar permisos sobre cat_master_alpura.sch_bronze_layer.snw_dim_canales.
  • Validar permisos de escritura sobre cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
  • Confirmar si existen validaciones de negocio adicionales.