Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Pausar fallas de regla de calidad hasta confirmar/rechazar por operador #124

Open
huemulDeveloper opened this issue Jul 24, 2020 · 0 comments

Comments

@huemulDeveloper
Copy link
Contributor

agregar opción en métodos de DQ (tanto de clase huemul_DQ como en DQ de DataFrameHuemul) para indicar forma de continuar en caso de fallar, y que la regla esté configurada con ERRROR:

1- Fallar: comportamiento actual, si falla la regla el proceso se cae y no continúa
2. decisión humana: indicar en el modelo de control de procesos la forma de proceder (fallar, continuar a pesar del error)
* se debe generar una nueva tabla en el modelo de control que permita registrar estas decisiones, y relacionar con la tabla de reglas de calidad, para saber que la regla falló, pero que el proceso tomó un comportamiento distinto)

La idea es que, al incluir reglas de calidad que validen el tamaño de un archivo, o la cantidad de filas procesadas, estas reglas puedan tener la opción de ser excepcionadas y que el proceso continúe. En ocasiones las reglas por cantidad de filas son un problema para las áreas de producción y desarrollo. Por cambios en el comportamiento de los sistemas (por ejemplo llegan muchos más registros que los esperados estacionalidad o por un evento específico), muchas veces estas reglas no son implementadas porque detienen el flujo productivo, la idea es dar opciones al administrador de producción para decidir que hacer, y luego estas reglas sean ajustadas dependiendo de la nueva realidad.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

1 participant