Cada indicador de cumplimiento, cada descriptor y cada lectura
de la misma necesidad que hemos medido, con la verdad contra la que se midió, cuántos casos, su
precisión o su AUC con el intervalo cuando lo hay, la huella del pre-registro y el veredicto. También lo que no
pasa: un resultado nulo se publica igual que uno bueno, y lo que no pasa no llega a las fichas.
Es parte de la metodología; cómo se calcula cada indicador de los
órganos, en la metodología de los indicadores por órgano.
Registro público de precisión
Cómo se midepre-registro sellado, segunda implementación, el nulo se publica, dos lecturas ciegas y jueces
Pre-registro sellado antes de medir. Las definiciones y la regla que decide si algo pasa se escriben
antes de mirar ningún resultado, y se guarda su huella md5 con la hora. La huella de cada entrada es la de ese texto:
si después se cambia una coma, la huella ya no coincide. Lo que se decide después de ver datos se rotula como
posterior y no decide el veredicto.
Segunda implementación. Otro código, escrito aparte desde las mismas definiciones y sin ver el
primero, tiene que dar lo mismo; si hay una diferencia, se mide y se explica.
El resultado nulo se publica. Si no se cumple la regla, la entrada dice «no pasa» con su cifra y
no se mueve la portería. Si una regla de parada detiene la medida a mitad, dice «parado».
Dos lecturas ciegas. Cuando hay que leer texto (si una licitación es para la misma necesidad que
una serie de menores), lo leen por separado dos modelos de lenguaje distintos con las mismas instrucciones selladas,
y solo cuenta lo que dicen los dos.
Jueces. Una muestra nueva, elegida al azar, la juzgan a ciegas otros dos modelos distintos de los
lectores; la precisión de esas entradas es la de esos jueces. Son modelos, no personas, y la entrada lo dice. Donde hay
una verdad que no es un modelo (un cambio de ley, la ficha de origen, el número de ofertas publicado), se usa esa.
El registro
81 entradas, medidas del 13/10/2026 al
22/10/2026. Cada huella se volvió a calcular sobre su
fichero sellado al preparar esta página (el 22/10/2026).
Solo las entradas con veredicto «pasa»: 25 de 81. Ver todas
Registro de precisión: una fila por indicador o lectura medidos, con su detalle debajo
Indicador o lectura
n
Métrica
Veredicto
Publicación
Detalle
El importe de los menores frente al cambio de umbral de 2018em1-migracion-2018 · Respuesta al umbral · años 2017-2018 · medido el 20/10/2026
8
Recuento 6 fuentes con la migración (se pedían 3); la banda vieja cae entre el 90 % y el 100 %
El cambio legal del umbral, como experimento natural: densidad de la banda bajo el límite viejo antes del cambio y en los dos trimestres siguientes, en cada fuente por separado. n = 8 fuentes con la banda medida antes y después
Métrica
Recuento 6 fuentes con la migración (se pedían 3); la banda vieja cae entre el 90 % y el 100 %
Pre-registro (md5)
03c3f76e06a1b9ad69cb10c972d820c1
Qué mide
Si la acumulación de contratos menores justo bajo el límite se muda al límite nuevo cuando la ley lo baja (de 18.000 a 15.000 € en servicios y suministros, en marzo de 2018).
Regla sellada
Al menos 3 fuentes en las que la banda vieja era un pico (el doble de densidad que la de debajo) y pierde la mitad en dos trimestres
Segunda implementación
Coincide: las mismas 6 fuentes y los mismos recuentos.
Nota
La Comunidad de Madrid y el REGCON muestran el cambio pero quedan fuera por la regla del pico (1,92 y 1,87 veces; se pedía el doble).
Informe de origen
em1/EM1.md (carpeta de trabajo de las mediciones)
Ajuste del importe al límite del menor (test de Carril)em1-carril-2019-2025 · Respuesta al umbral · años 2019-2025 · medido el 20/10/2026
1.220.362
Cociente ρ = 1,442 (IC 95 % 1,059-1,746): las compras únicas se acumulan bajo el límite más que el total
Curva de densidad ajustada fuera de la ventana del límite; cociente entre el exceso de las compras únicas y el de todos los menores, con IC por remuestreo de órganos. n = 1.220.362 contratos de servicios y suministros de 5.000 a 15.000 € sin IVA
Métrica
Cociente ρ = 1,442 (IC 95 % 1,059-1,746): las compras únicas se acumulan bajo el límite más que el total
Pre-registro (md5)
03c3f76e06a1b9ad69cb10c972d820c1
Qué mide
Si el exceso de contratos justo bajo 15.000 € se concentra en las compras repetidas a la misma empresa o en las compras únicas del órgano a una empresa, es decir, si es ajuste del importe al límite.
Regla sellada
Resultado explícito del test con la regla sellada antes de medir
Segunda implementación
Coincide: 28 de 28 veredictos iguales, recuentos idénticos y cocientes a 4·10⁻⁶.
Nota
Resultado: ajuste del importe al límite, firme, en el principal y en todos los cortes con muestra.
Informe de origen
em1/EM1.md (carpeta de trabajo de las mediciones)
Ajuste del valor estimado bajo 100.000 € (recurso especial)em1b-carril-100000 · Respuesta al umbral · años 2024-2026 · medido el 21/10/2026
27.651
Cociente ρ = 1,07 (IC 95 % 0,73-1,55); un 76 % más de licitaciones de las esperables en 97.000-100.000 €
Pasa
No publicado
Verdad y n
Curva de densidad ajustada fuera de la ventana; cociente entre el exceso de las licitaciones únicas y el del total, con IC por remuestreo de órganos. n = 27.651 licitaciones en el rango del test
Métrica
Cociente ρ = 1,07 (IC 95 % 0,73-1,55); un 76 % más de licitaciones de las esperables en 97.000-100.000 €
Pre-registro (md5)
e856b8283757ebad827b2d1788acd43d
Qué mide
Si el exceso de licitaciones justo bajo 100.000 € (el límite del recurso especial) se concentra en las licitaciones únicas del órgano en su división CPV, es decir, si es ajuste del valor estimado.
Regla sellada
Resultado explícito del test con la regla sellada antes de medir
Segunda implementación
Coincide: el mismo veredicto (9 de 9 en el estudio).
Nota
Resultado: ajuste del importe, firme (en cuatro de seis variantes de sensibilidad; en las seis, ajuste).
Informe de origen
em1b/EM1B.md (carpeta de trabajo de las mediciones)
Ajuste del valor estimado bajo 221.000 € (armonizada, fuera de la AGE)em1b-carril-221000 · Respuesta al umbral · años 2024-2025 · medido el 21/10/2026
12.438
Cociente ρ = 1,07 (IC 95 % 0,55-2,02); un 48 % más de licitaciones de las esperables en 216.000-221.000 €
Pasa
No publicado
Verdad y n
Curva de densidad ajustada fuera de la ventana; cociente entre el exceso de las licitaciones únicas y el del total, con IC por remuestreo de órganos. n = 12.438 licitaciones en el rango del test
Métrica
Cociente ρ = 1,07 (IC 95 % 0,55-2,02); un 48 % más de licitaciones de las esperables en 216.000-221.000 €
Pre-registro (md5)
e856b8283757ebad827b2d1788acd43d
Qué mide
Si el exceso de licitaciones justo bajo el umbral armonizado de 2024-2025 fuera de la AGE se concentra en las licitaciones únicas del órgano en su división CPV.
Regla sellada
Resultado explícito del test con la regla sellada antes de medir
Segunda implementación
Coincide en el veredicto; la cifra de compras únicas difiere un 0,25 %, explicado.
Nota
Resultado: ajuste del importe, en el límite. Sin acumulación medible bajo el procedimiento simplificado fuera de la AGE; en la AGE y en obras, muestra insuficiente.
Informe de origen
em1b/EM1B.md (carpeta de trabajo de las mediciones)
Series del mismo objeto con licitación al año siguiente (nota agregada)em2-series-agregado · Misma necesidad · años 2019-2024 · medido el 20/10/2026
5.411
Lift 11,9 % de las series frente al 2,5 % del control: lift 4,84 (IC 95 % 4,44-5,28); dentro del mismo órgano y año, 1,81y 1 más en el detalle
Licitación posterior del mismo órgano con objeto parecido (regla de palabras), comparada con un control de cadenas bajo el umbral. n = 5.411 series de 2019 a 2024
Métrica
Lift 11,9 % de las series frente al 2,5 % del control: lift 4,84 (IC 95 % 4,44-5,28); dentro del mismo órgano y año, 1,81
Lift Con la regla sellada primero: 19,6 % frente a 6,3 %, lift 3,12 (IC 95 % 2,94-3,32)
Pre-registro (md5)
addb6d3d0faeb7d1fd5e6b99788df1b3
Qué mide
Cuántas series recurrentes de menores de la PLACSP tienen al año siguiente una licitación del mismo órgano con objeto parecido, frente a las cadenas del mismo objeto que no pasan del umbral.
Regla sellada
Lift ≥ 2 agrupado y en cada año de 2019 a 2024
Segunda implementación
Coincide al dato: 0 diferencias en 308.801 series y cadenas de 12 fuentes.
Nota
Se publica solo el conjunto. La regla refinada (la del 11,9 %) se selló antes de calcularla (md5 03b12d5dc6c1dd017588f799822801c6).
Informe de origen
em2/EM2.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, PLACSP 2023 → 2024em2b-2023 · Misma necesidad · años 2023-2024 · medido el 20/10/2026
60
Precisión 58 de 60 la misma necesidad (96,7 %, IC 95 % 88,6-99,1 %), 2 dudosas y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 60 parejas juzgadas
Métrica
Precisión 58 de 60 la misma necesidad (96,7 %, IC 95 % 88,6-99,1 %), 2 dudosas y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,87
Lift 7,4 % de las series frente al 1,7 % del control: lift 4,24 (IC 95 % 3,03-5,93)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
ba93df7c0aaa43a317f3acbdbd21d189
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 % de 60; ≥ 40 % de las series de la regla de palabras
Nota
Cobertura: 72 de las 139 series de la regla de palabras (51,8 %). Los jueces son modelos, no personas.
Informe de origen
em2b/EM2B.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, PLACSP 2022 → 2023em2b-2022 · Misma necesidad · años 2022-2023 · medido el 21/10/2026
60
Precisión 59 de 60 la misma necesidad (98,3 %), 1 dudosa y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 60 parejas juzgadas
Métrica
Precisión 59 de 60 la misma necesidad (98,3 %), 1 dudosa y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,929
Lift 6,30 (IC 95 % 4,33-9,18)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
87a65460d1554a019dbe238db619349b
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; lift ≥ 2
Nota
Cobertura: 69 de 122 series (56,6 %). Acuerdo entre jueces: κ 0,976. Publicada en la ficha de cada órgano, con su rótulo de validación por año.
Informe de origen
em2b_amplia/ESTADO.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, PLACSP 2020 → 2021em2b-2020 · Misma necesidad · años 2020-2021 · medido el 21/10/2026
60
Precisión 59 de 60 la misma necesidad (98,3 %), 1 dudosa y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 60 parejas juzgadas
Métrica
Precisión 59 de 60 la misma necesidad (98,3 %), 1 dudosa y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,974
Lift 6,12 (IC 95 % 3,79-9,89)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
87a65460d1554a019dbe238db619349b
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; lift ≥ 2
Nota
Cobertura: 41 de 80 series (51,2 %). Acuerdo entre jueces: κ 0,976. Publicada en la ficha de cada órgano, con su rótulo de validación por año.
Informe de origen
em2b_amplia/ESTADO.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, PLACSP 2024 → 2025em2b-2024 · Misma necesidad · años 2024-2025 · medido el 21/10/2026
60
Precisión 57 de 60 la misma necesidad (95,0 %), 3 dudosas y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 60 parejas juzgadas
Métrica
Precisión 57 de 60 la misma necesidad (95,0 %), 3 dudosas y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,947
Lift 6,20 (IC 95 % 4,20-9,17)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
87a65460d1554a019dbe238db619349b
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; lift ≥ 2
Nota
Cobertura: 85 de 151 series (56,3 %). Acuerdo entre jueces: κ 0,931. Publicada en la ficha de cada órgano, con su rótulo de validación por año, al cerrarse 2025 en los datos.
Informe de origen
em2b_amplia/ESTADO.md (carpeta de trabajo de las mediciones)
«Licitaciones parecidas» como dato: cotejo con la fuente (ronda 2)e1b-parecidas-ronda-2 · Competencia · años 2023-2025 · medido el 20/10/2026
60
Precisión 59 de 60 correctas en todo (98,3 %); en el ATOM, 1.616 de 1.617 (99,94 %); 0 errores de órgano
Las fichas vivas de la PLACSP y su sindicación ATOM original. n = 60 licitaciones parecidas cotejadas en la ficha (más 1.617 en el ATOM)
Métrica
Precisión 59 de 60 correctas en todo (98,3 %); en el ATOM, 1.616 de 1.617 (99,94 %); 0 errores de órgano
Pre-registro (md5)
a7d4634261cd8fa88cc9b1944c15fb13
Qué mide
Lo mismo que la ronda 1, con la celda por órgano publicado y todos los CPV en el mismo grupo.
Regla sellada
≥ 95 % correctas en la ficha, ≥ 98 % en el ATOM y 0 errores de órgano
Nota
El único error de la ficha es de legibilidad de la fuente (sin fecha de resultado legible); el del ATOM, una licitación con dos resultados contradictorios en origen. Se enseña en la ficha de cada licitación en plazo (/en-plazo), como dato del pasado y nunca como previsión.
Informe de origen
e1b/E1B_RESULTADO_2.md (carpeta de trabajo de las mediciones)
Indicadores de menores en las demás fuentes: segunda implementaciónp9-segunda-implementacion · Datos de los indicadores · años 2019-2025 · medido el 20/10/2026
2.726
Concordancia 2.726 de 2.726 celdas iguales (0 distintas)
Una segunda implementación independiente de los globales por fuente y año. n = 2.726 celdas por fuente y año
Métrica
Concordancia 2.726 de 2.726 celdas iguales (0 distintas)
Pre-registro (md5)
35d5a88aaee9137df0ea59f2ffe7d3e4
Qué mide
Si los indicadores de menores calculados en 19 fuentes además de la PLACSP salen iguales con un código escrito aparte (sin ventanas, umbrales desde cero).
Regla sellada
0 diferencias
Nota
También da al dato las tablas de la PLACSP de producción (0 diferencias en 31.408 órgano-años de descriptores).
Informe de origen
p9/P9.md (carpeta de trabajo de las mediciones)
Publicación de documentos del expediente: recálculo y cotejop4b-documentos · Datos de los indicadores · años 2019-2025 · medido el 19/10/2026
20
Concordancia Documentos generales: 120 de 120 con las reglas de nombre (114 de 120 con el tipo del satélite); recálculo: 3.163.956 celdas, 0 distintas
Un recálculo independiente y las fichas de 20 licitaciones de la PLACSP de 2023-2025, por estratos. n = 20 licitaciones cotejadas (220 comparaciones)
Métrica
Concordancia Documentos generales: 120 de 120 con las reglas de nombre (114 de 120 con el tipo del satélite); recálculo: 3.163.956 celdas, 0 distintas
Pre-registro (md5)
PendienteSin pre-registro sellado
Qué mide
Si los porcentajes de documentos publicados por órgano y año (pliegos, memoria, aprobación, actas, informes) salen iguales con otro código y si cada documento está en la ficha de la PLACSP.
Regla sellada
pendiente: no consta un umbral sellado antes de medir
Nota
Sin pre-registro sellado: el veredicto es el de las comprobaciones del informe, no el de una regla escrita antes.
Informe de origen
p4b/P4B.md (carpeta de trabajo de las mediciones)
Tres o más contratos del mismo proveedor en la banda del 90-100 %x2-rf-limite-agg · Banderas comunes de otros monitores · años 2019-2025 · medido el 21/10/2026
51.413
AUC Frente a la «misma necesidad» (E-M2b: series y cadenas de control de 2020 y de 2022 a 2024): AUC 0,539 (IC 95 % 0,514-0,575); precisión 0,185 frente a una base de 0,020, lift 9,04; 502 de 51.413 señaladas; celda: funcionay 3 más en el detalle
Pasa
No publicado
Verdad y n
Tres etiquetas: (1) series y cadenas de menores que el órgano licitó al año siguiente como la misma necesidad (dos lecturas a ciegas confirmadas por jueces); (2) días con varios contratos que describen una misma prestación (dos lecturas); (3) entidades con hallazgo en informes de fiscalización frente a fiscalizadas sin él. Las tres son parciales y sesgadas. n = 51.413 unidades de E-M2b (series y cadenas de control); además 2.045 días de L-1 y 243 entidades-año de P6
Métrica
AUC Frente a la «misma necesidad» (E-M2b: series y cadenas de control de 2020 y de 2022 a 2024): AUC 0,539 (IC 95 % 0,514-0,575); precisión 0,185 frente a una base de 0,020, lift 9,04; 502 de 51.413 señaladas; celda: funciona
AUC Frente a «una misma prestación repartida» (L-1: días de 2023): AUC 0,506 (IC 95 % 0,474-0,538); precisión 0,313 frente a una base de 0,301, lift 1,04; 418 de 2.045 señaladas; celda: nulo
AUC Frente a los informes de fiscalización (P6: entidades-año): AUC 0,516 (IC 95 % 0,473-0,559); precisión 0,667 frente a una base de 0,609, lift 1,09; 33 de 243 señaladas; celda: nulo
Lift Dentro de las series de E-M2b (sin la ventaja de construcción): lift 2,20 (IC 95 % 1,21-2,97); 484 de 4.266 señaladas; celda: funciona
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
b39d1dabcf038dc5d364e16ae7e02a6e
Qué mide
Si la técnica RF-LIMITE-AGG habitual en los monitores públicos de contratación, reimplementada con sus umbrales sobre los menores de la PLACSP, separa tres etiquetas propias.
Regla sellada
AUC ≥ 0,65 con el límite inferior del IC > 0,55, o precisión ≥ 2 × la base con 100 unidades señaladas o más, en la etiqueta principal
Segunda implementación
Coincide al contrato (pyarrow y Python, sin DuckDB) y en las métricas.
Nota
Funciona frente a la «misma necesidad» también dentro de las series (sin la ventaja de construcción); no separa los informes de fiscalización. El veredicto por técnica sale de una regla de resumen escrita después de medir; las celdas y su regla son las del pre-registro. Es nuestra reimplementación a partir de su catálogo, no su código: una AUC nula dice que esta definición no separa la etiqueta.
Informe de origen
redflags_comunes/REDFLAGS.md (carpeta de trabajo de las mediciones)
Publicación en el DOUE de los contratos armonizados: cota bajaes1-cota-doue · Publicación europea · años 2023-2025 · medido el 21/10/2026
73.327
Precisión Por NIF del adjudicatario, importe y fecha: 12 de 12 (100 %; IC 95 % 76-100 %)y 3 más en el detalle
Pasa
No publicado
Verdad y n
El aviso en ted.europa.eu, cotejado a mano en 12 parejas por estrategia de cruce. n = 73.327 licitaciones-lote de 2023-2025 con procedimiento con publicidad (36.738 licitaciones)
Métrica
Precisión Por NIF del adjudicatario, importe y fecha: 12 de 12 (100 %; IC 95 % 76-100 %)
Precisión Por expediente y órgano: 12 de 12 (100 %; IC 95 % 76-100 %), a nivel de procedimiento
Recuento Las otras tres estrategias no cuentan: 8 de 12, 1 de 12 y 2 de 12; sus unidades pasan a «dudosas»
Recuento Al menos el 83,6 % (IC 95 % 83,3-83,8 %) aparece en el DOUE: 79,5 % en 2023, 84,9 % en 2024 y 86,0 % en 2025
Pre-registro (md5)
5667e5020b8841f65a455e75cccae9e3
Qué mide
Si el cruce de las adjudicaciones de la PLACSP con los avisos de adjudicación del DOUE (TED) encuentra el aviso de los contratos que el órgano declara sujetos a regulación armonizada y que superan el umbral europeo, con procedimiento que exige aviso (2023-2025, perfiles alojados en la PLACSP).
Regla sellada
Una estrategia cuenta para la cota si acierta 12 de 12 (≥ 95 %); segunda implementación a ≤ 0,5 puntos por año
Segunda implementación
Coincide: 79.503 de 79.504 unidades iguales en estrategia y aviso; 0,004 puntos de diferencia en la tasa.
Nota
Es una cota baja: el resto no está localizado, que no es lo mismo que no publicado. Los IC tratan los lotes como independientes, así que son algo estrechos. Las fechas de los avisos de 2020-2023 de nuestro TED traían el día y el mes intercambiados; se corrigieron antes del cotejo, sin cambiar ninguna regla. Nada por órgano ni por empresa.
Informe de origen
es1/ES1.md (carpeta de trabajo de las mediciones)
Adjudicación a una sociedad en concurso de acreedores no concluido (H1)em6v2-h1 · Hechos registrales (BORME) · años 2015-2025 · medido el 22/10/2026
33
Precisión En concurso, sin liquidación: 17 de 17 confirmadas (100 %; IC 95 % 81,6-100 %)y 2 más en el detalle
Cotejo manual de cada caso contra el PDF del BORME (98 PDF en disco y 1 pedido a boe.es) y contra el registro guardado de la fuente de la adjudicación; muestra al azar estratificada (semilla 20261022), una adjudicación por sociedad. n = 33 adjudicaciones cotejadas (17 en concurso sin liquidación y 16 en liquidación)
Métrica
Precisión En concurso, sin liquidación: 17 de 17 confirmadas (100 %; IC 95 % 81,6-100 %)
Precisión En liquidación concursal: 16 de 16 confirmadas (100 %; IC 95 % 80,6-100 %)
Recuento Al menos 1.758 adjudicaciones de 2015-2025 (19,2 M€) en 388 órganos
Pre-registro (md5)
e44e19f51c39e77ee4630fbcf95cb78f
Qué mide
Si la sociedad adjudicataria tenía, según el BORME, el concurso declarado (o la liquidación o la reapertura abiertas) y sin conclusión, convenio aprobado o cumplido ni extinción a la fecha de adjudicación (LCSP art. 71.1.c).
Regla sellada
≥ 16 de 17 en concurso sin liquidación y ≥ 15 de 16 en liquidación, y ≥ 45 de 50 en total; segunda implementación con ≤ 0,5 % de diferencias
Segunda implementación
Coincide: 0 diferencias en 46.098 filas comparadas (3.163 con algún hecho). con pandas y sin DuckDB.
Nota
Es un mínimo: solo cuenta las sociedades casadas con el BORME y con todos sus actos leídos con el calificador (30,2 % de las adjudicaciones con algún acto concursal, de disolución o de extinción; 19,4 % del importe). 42.935 adjudicaciones quedan sin evaluar hasta leer el resto del BORME. No dice que el órgano lo supiera. Por órgano y año; nunca la empresa. Las fechas de los actos son las de publicación en el BORME, no las de la resolución judicial: un concurso declarado antes de la adjudicación y publicado después no cuenta, coherente con un mínimo.
Informe de origen
em6v2/EM6V2.md (carpeta de trabajo de las mediciones)
Adjudicación a una sociedad en liquidación concursal (H3)em6v2-h3 · Hechos registrales (BORME) · años 2015-2025 · medido el 22/10/2026
16
Precisión 16 de 16 confirmadas (100 %; IC 95 % 80,6-100 %)y 1 más en el detalle
Cotejo manual de cada caso contra el PDF del BORME (98 PDF en disco y 1 pedido a boe.es) y contra el registro guardado de la fuente de la adjudicación; muestra al azar estratificada (semilla 20261022), una adjudicación por sociedad. n = 16 adjudicaciones cotejadas
Métrica
Precisión 16 de 16 confirmadas (100 %; IC 95 % 80,6-100 %)
Recuento Al menos 591 adjudicaciones de 2015-2025 (8,4 M€) en 166 órganos; 582 son también H1
Pre-registro (md5)
e44e19f51c39e77ee4630fbcf95cb78f
Qué mide
Si la sociedad adjudicataria tenía, según el BORME, abierta la fase de liquidación del concurso y sin conclusión ni extinción a la fecha de adjudicación (LCSP art. 71.1.c).
Regla sellada
≥ 15 de 16 en liquidación y ≥ 45 de 50 en total; segunda implementación con ≤ 0,5 % de diferencias
Segunda implementación
Coincide: 0 diferencias en 46.098 filas comparadas (3.163 con algún hecho). con pandas y sin DuckDB.
Nota
Es un mínimo: solo cuenta las sociedades casadas con el BORME y con todos sus actos leídos con el calificador (30,2 % de las adjudicaciones con algún acto concursal, de disolución o de extinción; 19,4 % del importe). 42.935 adjudicaciones quedan sin evaluar hasta leer el resto del BORME. No dice que el órgano lo supiera. Por órgano y año; nunca la empresa. Las fechas de los actos son las de publicación en el BORME, no las de la resolución judicial: un concurso declarado antes de la adjudicación y publicado después no cuenta, coherente con un mínimo.
Informe de origen
em6v2/EM6V2.md (carpeta de trabajo de las mediciones)
Oferta única por órgano, fuera del embudo de su mercadoou1-oferta-unica-organo · Competencia medida · años 2018-2025 · medido el 22/10/2026
8.063
Precisión 30 de 30 lotes (100 %; IC 95 % 88,6-100 %) con «1 oferta» confirmados en el ATOM original (13 también en la ficha pública; 17 fichas sin el dato legible; ninguna dice otro número ni trae el campo vacío)y 1 más en el detalle
Pasa
No publicado
Verdad y n
Tres pruebas: (1) cotejo de 30 lotes con oferta única contra la entrada ATOM/CODICE original y la ficha pública de origen; (2) estabilidad fuera de muestra: órganos fuera del embudo en 2018-2021 frente a 2022-2025; (3) segunda implementación independiente. n = 8.063 órganos-año con 30 lotes o más (199 con el hecho), de 1.045.990 lotes evaluables
Métrica
Precisión 30 de 30 lotes (100 %; IC 95 % 88,6-100 %) con «1 oferta» confirmados en el ATOM original (13 también en la ficha pública; 17 fichas sin el dato legible; ninguna dice otro número ni trae el campo vacío)
Cociente estabilidad: de 68 órganos fuera del embudo en 2018-2021, el 25 % sigue fuera en 2022-2025, frente al 1,5 % de los que estaban dentro (OR 22,0, IC 95 % 11,5-42,1; 2.281 órganos con 30 lotes en los dos bloques)
Pre-registro (md5)
1aa9908166f026c07cc38ef0cafa08ab
Qué mide
Si la proporción de lotes que un órgano adjudicó con una sola oferta en un año está por encima de lo esperable dada su mezcla de mercados (división CPV × tipo de contrato × año), por encima del límite del 99,8 % de un funnel plot corregido por sobredispersión (Spiegelhalter), con 30 lotes o más. Solo lotes no menores de la PLACSP (incluida la agregación de plataformas autonómicas), procedimientos abiertos, restringidos y negociados con publicidad.
Regla sellada
cotejo ≥ 28/30; estabilidad con el límite inferior del IC 95 % del OR > 2; segunda implementación con diferencias ≤ 0,5 %
Segunda implementación
Coincide: 0 diferencias en 65.555 órganos-año y 25.188 órganos-bloque (n, k, tasa esperada, z_D y hecho), y en el CSV publicable; pandas 3.0.6 sin DuckDB.
Nota
Es un hecho, no un predictor: dice que el órgano recibió una sola oferta más a menudo de lo que su mercado haría esperar, no por qué. No separa los informes de fiscalización con hallazgo ni los cárteles sancionados (entrada ou1-oferta-unica-etiquetas). Solo PLACSP: las fuentes autonómicas propias no traen el dato o lo traen no comparable. La prueba de estabilidad mide que el órgano persiste fuera del embudo (un órgano de un mercado de nicho lo estará siempre): el hecho es estable, no validado contra una etiqueta. Universo: todas las filas vigentes de la PLACSP; 219.738 de esos lotes son copias de una fuente autonómica que la web cuenta en su lugar (sobre todo Cataluña y el País Vasco), así que antes de publicar por órgano las cifras se recalculan sobre lo que cuenta la web.
Informe de origen
oferta_unica/OU1.md (carpeta de trabajo de las mediciones)
Sancionadas del mismo cártel conectadas por cargos o domicilio en el BORMErs1-sancionadas-red-societaria · Hechos registrales (BORME) · años 2012-2025 · medido el 22/10/2026
72.360
Cociente 16 de 360 pares de sancionadas conectados (4,4 %) frente a 65 de 72.000 controles (0,09 %); OR de Mantel-Haenszel 50,0; IC 95 % por bootstrap de expedientes 7,0-383 (Robins-Breslow-Greenland 28,4-87,8); pares conectados en 5 expedientesy 2 más en el detalle
Pasa
No publicado
Verdad y n
Sancionadas de 9 expedientes con fallo (D4c + P8) casadas con el BORME; 200 pares de control por par sancionado, emparejados por decil de lotes en los mercados del expediente. n = 72.360 360 pares de sancionadas (9 expedientes) y 72.000 pares de control
Métrica
Cociente 16 de 360 pares de sancionadas conectados (4,4 %) frente a 65 de 72.000 controles (0,09 %); OR de Mantel-Haenszel 50,0; IC 95 % por bootstrap de expedientes 7,0-383 (Robins-Breslow-Greenland 28,4-87,8); pares conectados en 5 expedientes
Cociente dejar un mercado fuera: OR mínimo 37,8 (sin cpv 72); dejar fuera el expediente S/DC/0627/18 (10 de los 16 pares): OR 19,0
Cociente exploratorio posterior: solo «vínculo personal» (1-2 personas, sin socio común): 6 pares frente a 47 controles, OR 26,1, en 3 expedientes; los otros 10 son estructura de grupo (≥ 3 personas compartidas o socio único común)
Pre-registro (md5)
0a40aeb3c123bc36daf783030fc177e0
Qué mide
Si dos empresas sancionadas por la CNMC en el mismo expediente comparten, durante la ventana del cártel, un administrador, consejero, apoderado o socio único (misma persona = mismo nombre completo impreso en el BORME, que no esté en más de 20 sociedades) o un domicilio (usado por menos de 10 sociedades), más a menudo que pares de adjudicatarias del mismo mercado (cpv2 del expediente) y del mismo decil de tamaño.
Regla sellada
OR ≥ 2 con el límite inferior más bajo de los dos IC > 2, ≥ 3 expedientes con algún par conectado y ningún pliegue de dejar-un-mercado-fuera < 1,5
Segunda implementación
Coincide: 0 diferencias en el flag «conectado» de 144.720 pares (positivos y controles, dos emparejados); pandas 3.0.6 + pyarrow 25.0.1 sin DuckDB, tramos con bucles de Python y clave BORME de la impl2 de E-M3.
Nota
Pasa la regla sellada, explicado sobre todo por estructura de grupo: 10 de 16 pares con ≥ 3 personas compartidas o socio único común (filiales del mismo grupo sancionadas juntas, no vínculos ocultos) y 10 de 16 de un expediente (S/DC/0627/18). El 4,4 % es poco en absoluto. El primario debió ser el vínculo personal sin estructura (1-2 personas, sin socio común), que salió exploratorio: 6 pares, OR 26,1. Solo domicilio: 0 pares. No es un indicador para encontrar cárteles en un mercado: los sancionados son entre empresas independientes que se coordinan sin compartir consejos. Homónimos: el 3,2 % de las personas enlazantes con nombre conocido tienen un nombre común. Casado empresa↔BORME: celda E-M5 «v1-v2 no homónimas», precisión central 83,72 % por empresas (CP95 inf. 83,57 %), 66,49 % por importe, «no certificada»; un par exige dos casados (≈ 0,70 central si los errores son independientes).
Informe de origen
redes_societarias/RS1.md (carpeta de trabajo de las mediciones)
Lotes adjudicados a sociedades hermanas en la misma licitaciónrs1-lotes-hermanos-hecho · Hechos registrales (BORME) · años 2012-2025 · medido el 22/10/2026
343.049
Precisión 20 de 20 pares confirmados en el texto del BORME (100 %; IC 95 % 83,9-100 %); 1 de ellos con posible revocación tardía u homonimia; la mayoría son filiales o marcas de un mismo grupo
Pasa
No publicado
Verdad y n
Cotejo de 20 pares de hermanas contra el texto del PDF del BORME (misma persona = mismo nombre completo en listas de cargos de las dos sociedades; el acto existe), elegidos por md5 entre los que tienen el PDF en disco; segunda implementación. n = 343.049 celdas órgano × cpv2 × año (3.191 con el hecho; 25.398 de 1.914.038 lotes evaluables)
Métrica
Precisión 20 de 20 pares confirmados en el texto del BORME (100 %; IC 95 % 83,9-100 %); 1 de ellos con posible revocación tardía u homonimia; la mayoría son filiales o marcas de un mismo grupo
Pre-registro (md5)
0a40aeb3c123bc36daf783030fc177e0
Qué mide
Por órgano × cpv2 × año: K de N lotes de licitaciones en las que dos sociedades que comparten en ese año administrador, apoderado, socio único o domicilio en el BORME ganaron lotes distintos (o el mismo lote por separado, no como socias de una unión temporal). Es un hecho registral: no distingue un grupo empresarial legítimo de otra cosa.
Regla sellada
cotejo ≥ 18/20; segunda implementación ≤ 0,5 %
Segunda implementación
Coincide: 0 diferencias en N, K y hecho en las 343.049 celdas órgano × cpv2 × año; pandas 3.0.6 sin DuckDB.
Nota
Es un hecho, no un predictor: la mayoría son grupos empresariales que se presentan con varias sociedades, y un grupo empresarial es legítimo. Cobertura: cerca del 55 % de las adjudicatarias-año tienen cargo o domicilio leído (85-89 % de las casadas en la celda). Es un mínimo: no ve cargos nombrados antes de 2009 sin acto posterior ni el vínculo directo matriz → filial. La muestra del cotejo sale de los PDF en disco (sesgo declarado). Casado empresa↔BORME: celda E-M5 «v1-v2 no homónimas», precisión central 83,72 % por empresas (CP95 inf. 83,57 %), 66,49 % por importe, «no certificada»; un par exige dos casados (≈ 0,70 central si los errores son independientes).
Informe de origen
redes_societarias/RS1.md (carpeta de trabajo de las mediciones)
Adjudicaciones que cambiaron después de publicarse, por órgano, fuera del embudo de su mercadovc1-cambios-tras-publicar-organo · Transparencia medida · años 2018-2025 · medido el 22/10/2026
8.268
Precisión 30 de 30 cambios confirmados en las dos versiones guardadas y en el fichero del scraper (100 %; IC 95 % 88,6-100 %); 16 fichas legibles, ninguna contradice. A mano, fondo claro en 9/10 anulaciones, 6/10 cambios de adjudicatario y 1/10 cambios de importe (los demás, correcciones de forma o dudosos)y 1 más en el detalle
Pasa
No publicado
Verdad y n
(1) cotejo de 30 cambios contra las dos versiones guardadas, el fichero del scraper y la ficha pública; (2) estabilidad fuera de muestra 2018-2021 → 2022-2025; (3) segunda implementación independiente. n = 8.268 órganos-año con 30 lotes o más (294 con el hecho), de 1.086.857 lotes adjudicados (10.663 con cambio de fondo)
Métrica
Precisión 30 de 30 cambios confirmados en las dos versiones guardadas y en el fichero del scraper (100 %; IC 95 % 88,6-100 %); 16 fichas legibles, ninguna contradice. A mano, fondo claro en 9/10 anulaciones, 6/10 cambios de adjudicatario y 1/10 cambios de importe (los demás, correcciones de forma o dudosos)
Cociente estabilidad: de 65 órganos con el hecho en 2018-2021, el 28 % lo tiene en 2022-2025, frente al 4,4 % de los demás (OR 8,3, IC 95 % 4,6-14,8; 2.287 órganos con 30 lotes en los dos bloques); sin cambios de importe, OR 13,5 (IC 95 % 7,0-25,8)
Pre-registro (md5)
86fe710351abe43c1d73c123d4aecee1
Qué mide
Si la proporción de lotes que un órgano adjudicó en un año y que después cambiaron de fondo en la PLACSP (anulación tras adjudicar —desierto, desistimiento, renuncia, anulada—, cambio de adjudicatario o cambio de importe, comparando la primera versión adjudicada con la última; sin correcciones de forma) está por encima de lo esperable en su mezcla de mercados (división CPV × tipo × año), por encima del 99,8 % de un funnel plot de Spiegelhalter, con 30 lotes o más y 3 cambios o más. Solo PLACSP (incluida la agregación), no menores, procedimientos abiertos, restringidos y negociados con publicidad. No juzga el motivo.
Regla sellada
cotejo ≥ 28/30; estabilidad con el límite inferior del IC 95 % del OR > 2 y ≥ 30 con el hecho en 2018-2021; segunda implementación con diferencias ≤ 0,5 %
Segunda implementación
Coincide: los mismos 1.086.857 lotes en las dos implementaciones; 0 diferencias en n y hecho en 64.646 órganos-año, 1 en k; subtipo distinto en 941 lotes (0,087 %; casi todos acuerdos marco con varios adjudicatarios cuya suma de importes difiere en el último bit de coma flotante), fondo distinto en 1; pandas 3.0.6 sin DuckDB.
Nota
Es un hecho, no un predictor: dice que lo publicado cambió más a menudo de lo esperable, no por qué; readjudicar o declarar desierto es legal. En público solo se publicarán las anulaciones tras adjudicar y los cambios de adjudicatario; el cambio de importe, que es sobre todo corrección de forma (anualidad, total, presupuesto), irá solo como recuento con su aviso y fuera de la posición en el embudo. Reservas: τ² = 0 con la regla sellada (winsorizar con sucesos raros), 294 órganos-año fuera (3,6 %); sin winsorizar, 114 y siguen estables. Solo PLACSP: las demás fuentes guardan versiones desde el 28-sep-2026. El motivo publicado es el código del feed, sin texto. La prueba de estabilidad mide que el órgano persiste fuera del embudo (un órgano de un mercado de nicho lo estará siempre): el hecho es estable, no validado contra una etiqueta. Universo: todas las filas vigentes de la PLACSP; 227.257 de esos lotes son copias de una fuente autonómica que la web cuenta en su lugar (sobre todo Cataluña y el País Vasco), así que antes de publicar por órgano las cifras se recalculan sobre lo que cuenta la web.
Informe de origen
versiones/VC1.md (carpeta de trabajo de las mediciones)
Modelo supervisado de proceso y contexto frente a los cárteles sancionadosml1-modelo-global-carteles · Competencia medida · años 2012-2025 · medido el 22/10/2026
244.395
AUC validación temporal (entrena < 2019, prueba ≥ 2019; 1.333 lotes de cártel de 3 expedientes): AUC estratificada 0,833 (IC 95 % 0,666-0,997, el más ancho de expediente y órgano)y 2 más en el detalle
Pasa
No publicado
Verdad y n
Lotes de cártel v2 (V2 + V3; D4c + P8) casados con la PLACSP: 2.590 lotes de 7 expedientes con ≥ 20 lotes, frente a 241.805 controles del mismo expediente × división × año (sin lotes de empresas sancionadas). PU-learning: los controles pueden contener cárteles no sancionados. n = 244.395 lotes (2.590 de cártel, 241.805 controles) en 95 estratos expediente × división × año
Métrica
AUC validación temporal (entrena < 2019, prueba ≥ 2019; 1.333 lotes de cártel de 3 expedientes): AUC estratificada 0,833 (IC 95 % 0,666-0,997, el más ancho de expediente y órgano)
AUC dejar un expediente fuera: mediana de las 7 AUC 0,787; conjunta 0,708 (IC 95 % 0,631-0,851)
AUC dentro del mismo órgano (dejar un expediente fuera): AUC 0,612; un modelo con solo tipo de órgano, tamaño del órgano, importe, tipo de contrato y procedimiento recoge el 93 % (temporal) y el 96 % (por expediente) de la separación
Pre-registro (md5)
44feab5f251b15c4d7792b12b8504f28
Qué mide
Si un gradient boosting con 31 variables de proceso del lote y de contexto del órgano y del mercado en el año anterior (y la edad de la adjudicataria) ordena los lotes de 7 expedientes de cártel de la CNMC por encima de los lotes no etiquetados de la misma división CPV y año. Solo PLACSP, lotes no menores.
Regla sellada
límite inferior de la AUC temporal > 0,65, mediana de dejar-un-expediente-fuera > 0,60 y segunda implementación con |ΔAUC| ≤ 0,02 (pre-registro); lectura sellada: si un modelo de solo órgano y tamaño recoge ≥ 90 % de la señal, «ve el órgano, no el proceso» y no se publica como patrón
Segunda implementación
LightGBM 4.7.0 frente a sklearn 1.9.1 HistGradientBoosting con los mismos hiperparámetros sellados: |ΔAUC| 0.015 en la validación temporal y 0.0006 en dejar-un-expediente-fuera (umbral 0,02).
Nota
Pasa como cifra formal, pero NO es un detector de proceso: separa sobre todo quién compra (tipo de órgano: permutar esa variable quita 0,15 de AUC) y quién gana (empresas veteranas y grandes, que es como se construye la etiqueta V2). No se publica como patrón ni como señal. Calibración débil (Brier 0,0159 frente a 0,0168 de la prevalencia).
Informe de origen
ml1/ML1.md (carpeta de trabajo de las mediciones)
Adjudicatarias con un cargo que comparte los dos apellidos con un concejal del ayuntamiento que adjudicafam1-apellidos-ayuntamiento-hecho · Hechos registrales (BORME) · años 2019-2023 · medido el 22/10/2026
124.481
Recuento 1.026 adjudicatarias con coincidencia de apellidos; 176 con el nombre completo, que en el cotejo son el propio concejal en el consejo de una sociedad municipal, pública o mixtay 1 más en el detalle
Pasa
No publicado
Verdad y n
Segunda implementación y cotejo manual de 20 coincidencias (10 con el nombre completo y 10 solo de apellidos) contra el BORME y el fichero electoral del Ministerio del Interior. n = 124.481 adjudicatarias-municipio-año evaluables en 4.149 municipios (12.335 municipios-año)
Métrica
Recuento 1.026 adjudicatarias con coincidencia de apellidos; 176 con el nombre completo, que en el cotejo son el propio concejal en el consejo de una sociedad municipal, pública o mixta
Concordancia cotejo: 20 de 20 bien leídas (11 contra el PDF del BORME y 9 contra la línea leída), con el electo confirmado en las 20
Pre-registro (md5)
299af459f8bd589ad9157e8e3c0f5e1e
Qué mide
Por municipio y año del mandato 2019-2023: adjudicatarias del ayuntamiento (menores incluidos) con algún administrador, apoderado o socio único de los mismos dos apellidos (en el mismo orden o cruzados) que un concejal electo en 2019 en ese municipio. Coincidencia de apellidos: no implica parentesco ni irregularidad.
Regla sellada
segunda implementación con diferencias ≤ 0,5 % y cotejo ≥ 18 de 20
Segunda implementación
Coincide: pandas + pyarrow sin DuckDB, con la lectura de nombres, el fichero electoral y el modelo nulo reescritos; 0 diferencias en el enlace de los 114.972 pares de sociedades sancionadas y de control, en N y K de las 215.985 celdas de lotes y en O y E de los 12.335 municipios-año (1.026 de 1.026 coincidencias, las mismas).
Nota
Es un hecho, no un predictor, y no se publicará por municipio. Solo el mandato 2019-2023: los ficheros de 2023 no fueron accesibles. No ve las alcaldías como tales ni a los concejales que entraron después, ni a los entes municipales con NIF propio. Cobertura: el 22 % de las personas con cargo en las sociedades casadas tiene el nombre leído en el BORME (2020-2025, descarga en curso), así que lo observado es un mínimo; el esperado usa las mismas personas. Casado empresa↔BORME: celda E-M5 «v1-v2 no homónimas», precisión central 83,72 % por empresas, «no certificada».
Informe de origen
familias/FAM1.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, Comunidad de Madrid 2021 → 2022em2b-madrid-cam-2021 · Misma necesidad · años 2021-2022 · medido el 22/10/2026
54
Precisión 54 de 54 la misma necesidad (100,0 %, IC 95 % 93,4-100,0 %), 0 dudosas y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 54 parejas juzgadas
Métrica
Precisión 54 de 54 la misma necesidad (100,0 %, IC 95 % 93,4-100,0 %), 0 dudosas y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,818
Lift 15,7 (IC 95 % 9,0-27,2)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
15864c1ba3001a30af91c872c4cc75be
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; IC inferior del lift > 1
Segunda implementación
em2b_amplia/b2/salidas/70_segunda.txt (0 diferencias en las cifras publicables)
Nota
Cobertura: 36 de 57 series de la regla de palabras (63,2 %). Acuerdo entre jueces: κ 0,843. Universo sin copias entre plataformas. Publicada en la ficha de cada órgano, en el bloque de la Comunidad de Madrid, con su rótulo de validación.
Informe de origen
em2b_amplia/INFORME_BLOQUE2.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, Comunidad de Madrid 2022 → 2023em2b-madrid-cam-2022 · Misma necesidad · años 2022-2023 · medido el 22/10/2026
46
Precisión 42 de 46 la misma necesidad (91,3 %, IC 95 % 79,7-96,6 %), 4 dudosas y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 46 parejas juzgadas
Métrica
Precisión 42 de 46 la misma necesidad (91,3 %, IC 95 % 79,7-96,6 %), 4 dudosas y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,838
Lift 5,2 (IC 95 % 3,1-8,5)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
15864c1ba3001a30af91c872c4cc75be
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; IC inferior del lift > 1
Segunda implementación
em2b_amplia/b2/salidas/70_segunda.txt (0 diferencias en las cifras publicables)
Nota
Cobertura: 36 de 54 series de la regla de palabras (66,7 %). Acuerdo entre jueces: κ 0,714. Universo sin copias entre plataformas. Publicada en la ficha de cada órgano, en el bloque de la Comunidad de Madrid, con su rótulo de validación.
Informe de origen
em2b_amplia/INFORME_BLOQUE2.md (carpeta de trabajo de las mediciones)
Lectura de la misma necesidad, Comunidad de Madrid 2024 → 2025em2b-madrid-cam-2024 · Misma necesidad · años 2024-2025 · medido el 22/10/2026
57
Precisión 44 de 57 la misma necesidad (77,2 %, IC 95 % 64,8-86,2 %), 13 dudosas y 0 otra prestacióny 2 más en el detalle
Dos jueces automáticos a ciegas, distintos de los lectores, sobre parejas nuevas elegidas al azar (una por serie). n = 57 parejas juzgadas
Métrica
Precisión 44 de 57 la misma necesidad (77,2 %, IC 95 % 64,8-86,2 %), 13 dudosas y 0 otra prestación
κ Acuerdo entre las dos lecturas: κ 0,715
Lift 3,2 (IC 95 % 2,1-4,9)
Lectura y jueces automáticos (modelos de lenguaje)
Pre-registro (md5)
15864c1ba3001a30af91c872c4cc75be
Qué mide
Si la licitación del año siguiente es para la misma necesidad que la serie de menores, leída dos veces a ciegas por dos modelos de lenguaje distintos con las mismas instrucciones selladas («misma» solo si lo dicen los dos).
Regla sellada
«Otra prestación» ≤ 10 % y «la misma necesidad» ≥ 60 %; cobertura ≥ 40 % de las series de la regla de palabras; IC inferior del lift > 1
Segunda implementación
em2b_amplia/b2/salidas/70_segunda.txt (0 diferencias en las cifras publicables)
Nota
Sin una pareja ajena a su serie (un error de identificadores le dio la pareja de una cadena de comparación de 2022); con ella, 45 de 58. Cobertura: 39 de 83 series de la regla de palabras (47,0 %). Acuerdo entre jueces: κ 0,647; las dudosas son casi todas compras sueltas de reactivos frente al suministro global del hospital. Universo sin copias entre plataformas. Publicada en la ficha de cada órgano, en el bloque de la Comunidad de Madrid, con su rótulo de validación.
Informe de origen
em2b_amplia/INFORME_BLOQUE2.md (carpeta de trabajo de las mediciones)
Qué dice cada columnaverdad y n, métrica (precisión, AUC, lift, κ, cociente), pre-registro, veredicto y publicación
Verdad y n
Contra qué se comparó (la etiqueta que no es nuestra) y cuántos casos entraron en la medida.
Métrica
Precisión: de los casos que el indicador o la lectura da por buenos, cuántos lo
son según la verdad. AUC: la probabilidad de que un caso con la etiqueta quede por delante de uno sin
ella (0,5 es el azar, 1 es perfecto). Lift: cuántas veces es más frecuente la etiqueta en lo señalado
que en un grupo de comparación. κ (kappa de Cohen): acuerdo entre dos lecturas o dos jueces, descontado
el que daría el azar. Cociente: cuántas veces es más frecuente algo en un grupo que en su comparación;
1 es la igualdad. Recoge la razón de odds (OR, entre casos y controles), observado entre esperado (O/E, frente a
lo que daría el azar o un modelo) y la razón de proporciones (RR, como el test de Carril, donde más de 1 dice que
el exceso bajo el límite está en las compras únicas). Concordancia y recuento: casos iguales a la
fuente o que cumplen la regla. El intervalo es del 95 % cuando el informe lo da.
Pre-registro (md5)
La huella del texto con las definiciones y la regla, sellado antes de medir.
«Pendiente» si no consta ese sello. En una predicción sellada, debajo va también la huella del sobre con la
predicción.
Veredicto
Pasa: cumple la regla sellada. No pasa: no la cumple (y se
dice en qué). No confirmada: la regla escrita no se cumple, aunque una medida posterior apunte en el
mismo sentido; hace falta sellarla y probarla con datos nuevos. Parado: una regla de parada sellada
detuvo la medida antes de acabar. Sellada, pendiente: una predicción escrita y sellada antes de que
exista su verdad (por ejemplo, antes de que se resuelva un expediente); se abre cuando llega y su resultado se publica
sea cual sea.
Publicación
Publicado: está en la web («Dónde está» lleva a su explicación).
En revisión, sin publicar: el cambio está preparado y revisándose, y todavía no se ve en la web.
No publicado: no está en la web, por su veredicto o porque falta decidirlo.
Lo que no dice
Ninguna entrada es un juicio sobre un órgano: se mide si un indicador o una lectura describe bien lo que
dice describir, nunca a quién. La precisión de las lecturas es la de jueces automáticos, no la de personas. Un veredicto
«pasa» vale para los años y la fuente medidos: cada año o fuente nueva necesita su propia medida. Y el registro crece:
cada medida nueva entra aquí con su resultado, salga como salga.