Trabajo de graduación · UMG · Maestría en Análisis Forense Informático

Auditoría

Cada cifra impresa en el documento, al lado del número que sale de recalcularla.

137 de 137 comprobaciones coinciden

La auditoría recorre las Tablas 4 a 8, el IQCED, los siete KPIs, los cinco criterios de éxito, los quince ítems del cuestionario, el alfa de Cronbach, la composición del panel, la cadena de hashes y la correspondencia entre cada hipótesis específica y los escenarios que la validan.

El procedimiento es deliberadamente simple. Un archivo — scripts/valores_tesis.json — guarda los valores tal como están impresos en la tesis. Otro — scripts/auditar_capitulo4.py — los recalcula desde cero leyendo los CSV del laboratorio y compara. Si algo no cuadra, el script termina con código de salida 1.

Cualquiera puede repetirlo con python scripts/auditar_capitulo4.py. No hace falta para leer esta página: el resultado ya está abajo.

Las comprobaciones, una por una

Variable Independiente (Tabla 4, p.56) · 5 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Puntaje promedio pretest4.00004.0000coincide
Puntaje promedio postest30.000030.0000coincide
Escenarios nivel Bajo en pretest1010coincide
Escenarios nivel Alto en postest1010coincide
vi_totales == suma(vi_long)00coincide
KPIs promedio pretest (Tabla 5, p.57) · 6 comprobaciones
ConceptoDice el documentoRecalculadoEstado
KPI100coincide
KPI200coincide
KPI300coincide
KPI4NoneNonecoincide
KPI5NoneNonecoincide
KPI600coincide
KPIs promedio postest (Tabla 5, p.57) · 6 comprobaciones
ConceptoDice el documentoRecalculadoEstado
KPI1100.0000100.0000coincide
KPI2100.0000100.0000coincide
KPI398.890098.8890coincide
KPI4100.0000100.0000coincide
KPI5100.0000100.0000coincide
KPI6100.0000100.0000coincide
KPI7 (p.58) · 3 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Media postest (ms)485484.9000coincide
Mediana postest (ms)438437.5000coincide
Escenarios por debajo del umbral de 1000 ms1010coincide
KPI3 en SC-09 (p.58, redaccion corregida) · 2 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Valor de KPI3 en SC-0988.890088.8900coincide
Escenarios restantes con KPI3 = 10099coincide
Hipotesis especificas (pp.27-28, Cap. V p.73) · 4 comprobaciones
ConceptoDice el documentoRecalculadoEstado
HE1: KPI1+KPI2 en SC-01,SC-02,SC-03,SC-04100.0000100.0000coincide
HE2: KPI3+KPI4 en SC-05,SC-06,SC-07100.0000100.0000coincide
HE3: KPI5+KPI6 en SC-08,SC-09,SC-10100.0000100.0000coincide
Escenarios cuya HE coincide con metadata_escenarios.csv00coincide
IQCED (p.58) · 7 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Media pretest00coincide
Media postest99.810099.8150coincide
Diferencia media99.810099.8150coincide
Desviacion de las diferencias0.59000.5850coincide
SC-09 postest98.150098.1500coincide
IQCED == media(KPI1..KPI6), N/A->0 (desvio max)00.00166667coincide
Escenarios con IQCED postest > 951010coincide
Contraste de hipotesis (Tabla 7, p.63) · 5 comprobaciones
ConceptoDice el documentoRecalculadoEstado
N pares1010coincide
Estadistico W00coincide
Valor p0.0019530.001953coincide
r rank-biserial1.00001.0000coincide
Cohen's d (aprox)170170.6200coincide
Normalidad (p.63) · 1 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Rechazo por baja variabilidad (9/10 difs. identicas)11coincide
Criterios de exito (Tabla 8, p.64) · 4 comprobaciones
ConceptoDice el documentoRecalculadoEstado
(a) Escenarios implementados1010coincide
(b) IQCED postest > pretest1010coincide
(c) Escenarios con >=4 KPIs que mejoran1010coincide
(d) Nivel postest >= Medio1010coincide
Trazabilidad (p.45) · 4 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Filas de KPI en kpis_long.csv140140coincide
Filas de KPI con hash SHA-256140140coincide
Filas de KPI con archivo de evidencia140140coincide
Archivos en manifest_evidencias.csv8080coincide
Cuestionario experto (Tabla 6, p.62) · 76 comprobaciones
ConceptoDice el documentoRecalculadoEstado
n expertos1212coincide
A1 media3.67003.6667coincide
A1 frecuencia de 488coincide
A1 frecuencia de 344coincide
A1 frecuencia de 200coincide
A1 frecuencia de 100coincide
A2 media3.75003.7500coincide
A2 frecuencia de 499coincide
A2 frecuencia de 333coincide
A2 frecuencia de 200coincide
A2 frecuencia de 100coincide
A3 media3.58003.5833coincide
A3 frecuencia de 477coincide
A3 frecuencia de 355coincide
A3 frecuencia de 200coincide
A3 frecuencia de 100coincide
A4 media3.75003.7500coincide
A4 frecuencia de 499coincide
A4 frecuencia de 333coincide
A4 frecuencia de 200coincide
A4 frecuencia de 100coincide
A5 media3.75003.7500coincide
A5 frecuencia de 499coincide
A5 frecuencia de 333coincide
A5 frecuencia de 200coincide
A5 frecuencia de 100coincide
B1 media3.83003.8333coincide
B1 frecuencia de 41010coincide
B1 frecuencia de 322coincide
B1 frecuencia de 200coincide
B1 frecuencia de 100coincide
B2 media3.58003.5833coincide
B2 frecuencia de 477coincide
B2 frecuencia de 355coincide
B2 frecuencia de 200coincide
B2 frecuencia de 100coincide
B3 media3.67003.6667coincide
B3 frecuencia de 488coincide
B3 frecuencia de 344coincide
B3 frecuencia de 200coincide
B3 frecuencia de 100coincide
B4 media3.42003.4167coincide
B4 frecuencia de 466coincide
B4 frecuencia de 355coincide
B4 frecuencia de 211coincide
B4 frecuencia de 100coincide
B5 media3.50003.5000coincide
B5 frecuencia de 466coincide
B5 frecuencia de 366coincide
B5 frecuencia de 200coincide
B5 frecuencia de 100coincide
C1 media3.58003.5833coincide
C1 frecuencia de 477coincide
C1 frecuencia de 355coincide
C1 frecuencia de 200coincide
C1 frecuencia de 100coincide
C2 media3.58003.5833coincide
C2 frecuencia de 477coincide
C2 frecuencia de 355coincide
C2 frecuencia de 200coincide
C2 frecuencia de 100coincide
C3 media3.58003.5833coincide
C3 frecuencia de 477coincide
C3 frecuencia de 355coincide
C3 frecuencia de 200coincide
C3 frecuencia de 100coincide
C4 media3.67003.6667coincide
C4 frecuencia de 488coincide
C4 frecuencia de 344coincide
C4 frecuencia de 200coincide
C4 frecuencia de 100coincide
C5 media3.75003.7500coincide
C5 frecuencia de 499coincide
C5 frecuencia de 333coincide
C5 frecuencia de 200coincide
C5 frecuencia de 100coincide
Cuestionario experto (p.69) · 2 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Media global3.64003.6444coincide
Desviacion global0.49000.4915coincide
Cuestionario experto (Figs. 12-14) · 6 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Dimension A media3.70003.7000coincide
Dimension A desviacion0.46000.4621coincide
Dimension B media3.60003.6000coincide
Dimension B desviacion0.53000.5272coincide
Dimension C media3.63003.6333coincide
Dimension C desviacion0.49000.4860coincide
Confiabilidad (seccion 3.5, p.43) · 1 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Alfa de Cronbach >= 0.70 (cumple=1)11coincide
Panel experto (p.58) · 5 comprobaciones
ConceptoDice el documentoRecalculadoEstado
Expertos en QA / Automation55coincide
Expertos en Desarrollo33coincide
Expertos en Ciberseguridad22coincide
Expertos en Analista11coincide
Expertos en Negocio11coincide

Corregido en la versión final

Observaciones que una revisión anterior levantó y que el documento final ya atiende. Se dejan registradas porque muestran qué cambió y por qué.

TXT-01 · Cap. IV p.58 · corregida en la version final

La version anterior decia que SC-09 'registro un valor de 98.89% en lugar de 100%', contradiciendo a su propia Figura 9 que mostraba 89. La final precisa: 'el indicador registro 88.89% en lugar de 100%; los nueve escenarios restantes alcanzaron 100%'. La auditoria verifica ahora esa redaccion.

MET-03 · Cap. I p.15 · declarada en la version final

La version final agrega la limitacion de que el modelo fue implementado y evaluado por la misma persona investigadora, sin segunda persona evaluadora independiente, lo que impide estimar concordancia entre observadores. Declararlo es lo correcto metodologicamente.

EST-02 · Cap. IV p.63 · atribuida correctamente en la version final

La version final explica que Shapiro-Wilk rechazo la normalidad 'debido a la baja variabilidad de las diferencias', que es la atribucion correcta: con 9 de 10 diferencias identicas el rechazo viene de la ausencia de varianza, no de asimetria. Antes el motivo quedaba sin declarar.

Observaciones abiertas sobre el documento

Ninguna de estas es un error de cálculo: los números cuadran. Son cuestiones de atribución, de precisión en la redacción o de algo que el documento promete y no llega a reportar. Se publican junto con los resultados en lugar de omitirse.

EST-01

p = 0.001953 es exactamente el minimo alcanzable para n=10 bilateral (2/2^10 = 0.001953125). Sale identico con delta=100 o delta=0.1: solo indica que los 10 pares mejoraron, no la magnitud. Lo mismo r = 1.00. Conviene declararlo en el texto antes de que lo senale el jurado.

MET-01

Alfa de Cronbach global = 0.906 sobre 15 items (A=0.833, B=0.751, C=0.771). La seccion 3.5 lo compromete pero el documento no lo reporta: este es el valor que falta citar.

TXT-02

HE2 se define por KPI3 y KPI4 (p.28) y el Cap. V p.73 la valida con SC-05, SC-06, SC-07, donde el KPI3 vale [100.0]: no discrimina. El unico escenario donde el KPI3 se mueve es SC-09 (88.89%), asignado a la hipotesis 3 tanto en metadata como en el Cap. V — pero las CONCLUSIONES (p.LXXVII) sostienen HE2 citando precisamente SC-09.

TXT-03

Pretest con denominador 0 (es 0/0, no medicion empirica): KPI2, KPI3, KPI6. Con denominador real y numerador 0: KPI1. La p.57 llama 'valor empirico nulo' a KPI1, KPI2, KPI3 y KPI6; en realidad la imputacion a cero aplica a 5 de 6 KPIs (incluidos KPI4 y KPI5).

DOC-01

8 de 10 nombres de escenario difieren entre kpis_long.csv e indice_global.csv (SC-03, SC-04, SC-05, SC-06, SC-07, SC-08, SC-09, SC-10). Los escenario_id coinciden, asi que ningun valor numerico esta afectado, pero inconsistencias_detectadas.md afirma 'No se detectaron inconsistencias'. Fuente canonica: metadata_escenarios.csv.

MET-02

La VI es identica en los 10 escenarios en pretest (todos 4/30): varianza cero. No son 10 mediciones independientes de la VI, por lo que el 'analisis de asociacion' VI-VD de la p.67 descansa sobre dos niveles, no sobre 10 unidades.