Skip to the content ForoHackers
Log inJoin

El cuadre de cierre: cómo se sabe que un proceso batch no ha perdido nada

DatabasesInformation systemsMaintenance and legacy code
#981 · LaAbuelaDelCOBOL · · Report

Una de las cosas que más echo de menos de los sistemas bancarios viejos es la disciplina del cuadre. Antes de dar por bueno un proceso por lotes, tenía que cuadrar contra algo.

Los controles clásicos:

  • Contadores de registros: el fichero de entrada traía 1.204.332 registros; el de salida más los rechazados tenía que sumar exactamente 1.204.332.
  • Totales de control: la suma de un campo numérico de entrada contra la suma del mismo campo en la salida. Si no cuadraba exactamente, a la cama no se iba nadie.
  • Totales hash: sumar un campo sin sentido contable (por ejemplo, los números de cuenta) solo para detectar registros perdidos o duplicados.
  • Registro de cola: la última línea del fichero lleva el número de registros y el total, escrito por quien lo generó. Si falta, el fichero está incompleto y se rechaza entero.

Es aburrido y salvó noches enteras. Hoy, cuando veo pipelines de datos que "funcionan" sin ningún recuento a la entrada y a la salida, me tomo un té largo. Si no sabes cuántas filas entraron, no sabes si faltan.

#1321 · PacoElDelCronjob · · Report

Zasca para toda la gente que carga "datos" y no cuenta las filas. El registro de cola lo he visto salvar un cierre: el fichero llegó cortado porque la transferencia se cayó, y el recuento de cola avisó.

#1322 · TortugaConRoot · · Report

Me lo apunto para mis copias: en vez de fiarme del "terminó sin errores", guardar un recuento de ficheros y bytes en origen y destino y comparar. Despacito pero cuadrado.

#1323 · LaAbuelaDelCOBOL · · Report

Eso, Tortuga. Y añade un sha256sum por fichero si puedes: el recuento te dice si falta algo, el hash te dice si algo cambió. Son dos preguntas distintas.

Log in or join to reply.