#!/usr/bin/env python3 """Ejecuta ficheros SQL de impl2/sql sobre la base DuckDB de trabajo (/w/tmp/i2.duckdb). Uso (dentro del contenedor): python3 /w/py/sql.py sql/01_x.sql [sql/02_y.sql ...] Cada sentencia acaba en ';' al final de una línea. Las SELECT / DESCRIBE / SUMMARIZE / WITH se imprimen (hasta 200 filas). Una línea '-- @ título' antes de una consulta la rotula en la salida. """ import sys import time import duckdb DB = "/w/tmp/i2.duckdb" def sentencias(texto: str): actual, titulo = [], None for linea in texto.splitlines(): s = linea.strip() if s.startswith("-- @"): titulo = s[4:].strip() continue if s.startswith("--") and not actual: continue actual.append(linea) if s.endswith(";"): q = "\n".join(actual).strip() actual = [] if q.rstrip(";").strip(): yield titulo, q titulo = None if "\n".join(actual).strip(): yield titulo, "\n".join(actual) def imprimir(cur, titulo, maxf=200): filas = cur.fetchmany(maxf + 1) cols = [d[0] for d in cur.description] print(f"\n## {titulo or ''}") print(" | ".join(cols)) for f in filas[:maxf]: print(" | ".join("" if v is None else str(v) for v in f)) if len(filas) > maxf: print(f"... (más de {maxf} filas)") sys.stdout.flush() def main(): con = duckdb.connect(DB) for stmt in ("SET memory_limit='7GB'", "SET threads=6", "SET temp_directory='/w/tmp/duckdb_tmp'", "SET preserve_insertion_order=false"): con.execute(stmt) t_total = time.time() for fichero in sys.argv[1:]: print(f"\n# ===== {fichero}") with open(fichero, encoding="utf-8") as fh: texto = fh.read() for titulo, q in sentencias(texto): t0 = time.time() cur = con.execute(q) dt_ = time.time() - t0 cabeza = q.lstrip().split(None, 1)[0].upper() if cabeza in ("SELECT", "WITH", "DESCRIBE", "SUMMARIZE", "FROM", "PRAGMA", "SHOW") and cur.description: imprimir(cur, titulo) primera = " ".join(q.split())[:110] print(f" [{dt_:7.1f} s] {primera}") sys.stdout.flush() print(f"\n# total {time.time() - t_total:.1f} s") con.close() if __name__ == "__main__": main()