Subtareas:
Consideraciones de API de parseadores
Tres posibles respuestas:
- IN_PROGRESS: se acepto la solicitud, y la misma sera procesada
- ERROR: se proceso la solicitud, pero hubo un error (guardar el error entero en una columna)
- DONE: se retorna el archivo entero
Tareas del dag
- Recorrer lista de archivos posibles
- Enviar peticion al parseador
- Si es ERROR retornar fallar
- Si es IN_PROGRESS: retornar suceso
- Si es DONE: continuar
- bajar archivo
- Preparar tabla (si no existe crearla, si existe pero ya tiene datos del mes eliminar datos del mes)
- Subir a fuente de datos (a data_sources)
Subtareas:
Consideraciones de API de parseadores
Tres posibles respuestas:
Tareas del dag