Un conjunto operativo y detallado de procedimientos derivados de un plan de evaluación que especifica cómo se recolectarán los datos, por quién, con qué instrumentos, los procedimientos de muestreo y consentimiento, la gestión y aseguramiento de la calidad de los datos, los protocolos de codificación y análisis, y las convenciones de reporte.

Principio

Estandarizar procedimientos para garantizar consistencia, fiabilidad, cumplimiento ético y reproducibilidad de las actividades evaluativas, de modo que los resultados sean defendibles y comparables entre evaluadores y centros.

Demostración

Un protocolo para observaciones en aula que incluye requisitos de formación de observadores, el instrumento de observación con definiciones de ítems, calendario de muestreo, comprobaciones de fiabilidad interevaluador, protocolos para grabación y almacenamiento de video, procedimientos para resolver discrepancias e instrucciones de análisis paso a paso.

Aplicación incorrecta

Un protocolo vago sobre la formación de evaluadores o el manejo de datos, omitir pruebas piloto de los instrumentos o permitir aplicaciones inconsistentes de los pasos, lo que produce datos sesgados o no comparables.

Consecuencia

Un protocolo bien especificado genera datos replicables y de alta calidad con características de error conocidas, facilita la formación y supervisión de recolectores de datos y respalda conclusiones y recomendaciones creíbles.

Inversión

La ausencia o el incumplimiento del protocolo produce métodos ad hoc, calidad de datos inconsistente, validez socavada y resultados que las partes interesadas no pueden utilizar de manera confiable.

Límite

Operativiza elementos del plan de evaluación en pasos ejecutables; no es en sí mismo el plan estratégico ni un instrumento independiente (por ejemplo, hace referencia a los instrumentos, formularios de consentimiento y scripts de análisis en lugar de reemplazarlos).

Tensión semántica

Existe tensión entre la necesidad del protocolo de un detalle procedimental y el deseo de las partes de flexibilidad en contextos dinámicos; equilibrar la fidelidad al protocolo con las adaptaciones necesarias es un desafío común.

Síntesis

El Protocolo de Evaluación del Programa traduce el diseño de la evaluación en procedimientos explícitos y comprobados para que la recolección y el análisis de datos se realicen de forma consistente, ética y con parámetros de calidad conocidos.