Files
bot_dnit/app/main.py

73 lines
2.2 KiB
Python

import logging
import os
from datetime import datetime
from config import LOG_DIR
from extractor import descomprimir_todo
from parser import recorrer_y_parsear
from filtro import (
filtrar_juridicas,
filtrar_no_existentes,
filtrar_fisicas,
clasificar_passwords_fisicas,
)
from exportador import exportar_csv
from db import get_connection, fetch_rucs_existentes, fetch_passwords_fisicas
os.makedirs(LOG_DIR, exist_ok=True)
LOG_FILE = os.path.join(LOG_DIR, f"bot_{datetime.now():%Y%m%d_%H%M%S}.log")
logging.basicConfig(
level=logging.INFO,
format="%(asctime)s [%(levelname)s] %(message)s",
handlers=[
logging.FileHandler(LOG_FILE, encoding="utf-8"),
logging.StreamHandler(),
],
)
logger = logging.getLogger(__name__)
def main():
logger.info("Iniciando bot RUC DNIT")
logger.info("Paso 1: descomprimiendo zips nuevos")
carpetas_nuevas = descomprimir_todo()
logger.info("Carpetas descomprimidas en esta corrida: %d", len(carpetas_nuevas))
logger.info("Paso 2: recorriendo carpetas y parseando .txt")
registros = recorrer_y_parsear()
logger.info("Paso 3: filtrando personas jurídicas por prefijo de RUC")
juridicas = filtrar_juridicas(registros)
logger.info("Paso 4: comparando contra la tabla personas")
conn = get_connection()
try:
rucs_existentes = fetch_rucs_existentes(conn)
finally:
conn.close()
faltantes = filtrar_no_existentes(juridicas, rucs_existentes)
logger.info("Paso 5: exportando CSV de RUC faltantes")
rutas = exportar_csv([r[:5] for r in faltantes])
logger.info("Paso 6: comparando password de personas físicas contra el dv del DNIT")
fisicas = filtrar_fisicas(registros)
conn = get_connection()
try:
passwords_existentes = fetch_passwords_fisicas(conn)
finally:
conn.close()
a_generar, _no_encontrados = clasificar_passwords_fisicas(fisicas, passwords_existentes)
logger.info("Paso 7: exportando CSV de personas físicas a insertar/actualizar password")
rutas_passwords = exportar_csv(a_generar, prefijo_nombre="fisicas_password")
logger.info("Bot finalizado. Archivos generados: %s", rutas + rutas_passwords)
if __name__ == "__main__":
main()