semillero-INVIMA/benchmarks/RESUMEN_ARTICULO.md

10 lines
1.6 KiB
Markdown

# Resumen para articulo
El sistema de benchmarking definido para la plataforma INVIMA evalua siete consultas representativas sobre PostgreSQL, con 5 repeticiones de calentamiento y 100 repeticiones medidas por consulta, ademas de pruebas concurrentes con 1, 5, 10, 25, 50 usuarios virtuales. Los resultados crudos se almacenan en CSV y JSON para preservar trazabilidad.
Estado actual: se encontraron 700 operaciones secuenciales medidas en los CSV de linea base. El protocolo completo espera 700 operaciones secuenciales medidas, por lo que cualquier interpretacion debe distinguir la validacion corta de la ejecucion completa. Para el grupo estructurada, la validacion disponible contiene 500 operaciones, con latencia promedio de 187,7917 ms, p95 de 387,7051 ms y 0 fallos. Para el grupo busqueda_textual, la validacion disponible contiene 200 operaciones, con latencia promedio de 57,3505 ms, p95 de 63,0636 ms y 0 fallos.
Cuando se ejecute el protocolo completo, esta seccion debe reportar numero total de operaciones, latencia promedio por grupo de consulta, percentil 95, throughput, tasa de fallos y comportamiento bajo concurrencia. Si se aplican las optimizaciones reversibles, se debe comparar la linea base contra la medicion optimizada y reportar mejora absoluta y porcentual. No se declara cumplimiento de criterios con una corrida incompleta.
EA, MSE, precision y exhaustividad no calculables por ausencia de un conjunto de referencia validado. El archivo `benchmarks/ground_truth.example.json` define la estructura sugerida para incorporar una referencia manual en una etapa posterior.