Piloto de IA en un colegio: indicadores de éxito

Un piloto de IA en un colegio tiene éxito cuando responde a una pregunta de decisión, no cuando acumula accesos. Antes de activarlo, el centro debe definir el problema, una línea base, un indicador principal, límites de uso, responsables y reglas para continuar, corregir o detener. Sin esos elementos, el informe final solo podrá contar impresiones.

La pregunta correcta no es «¿gustó la IA?», sino «¿mejoró esta tarea educativa o de trabajo sin crear un coste, una desigualdad o un riesgo inaceptables?».

Empezar por una decisión concreta

Un piloto no debería probar «la IA en el centro». Debe probar una hipótesis acotada. Por ejemplo:

• MIA reduce el tiempo necesario para preparar una primera versión de actividades sin empeorar su calidad curricular.
• Un asistente ayuda a ofrecer feedback más rápido, manteniendo la revisión del docente.
• Una herramienta facilita adaptaciones de lectura que el profesorado considera utilizables y accesibles.

Cada hipótesis debe terminar en una decisión real: ampliar a otros departamentos, repetir con cambios, mantener solo un caso de uso o abandonar. Si el resultado no puede cambiar ninguna decisión, no merece recogida de datos.

El contexto general de fases está en cómo implantar IA en un colegio. Este artículo se centra en lo que debe ocurrir dentro del piloto para que sus conclusiones sean defendibles.

La ficha de diseño antes de abrir accesos

Dirección puede exigir una ficha de una página con estos campos:

1. Problema actual. Qué tarea consume tiempo o qué necesidad pedagógica no está bien cubierta.
2. Uso de IA. Función exacta, usuarios y resultado esperado.
3. Alcance. Departamentos, grupos, tipos de tarea y exclusiones.
4. Línea base. Cómo se realiza hoy la tarea y qué dato previo existe.
5. Indicador principal. Una medida vinculada a la hipótesis.
6. Indicadores de equilibrio. Calidad, seguridad, equidad, carga adicional y coste.
7. Responsables. Dirección del piloto, soporte, recogida de datos y decisión final.
8. Fechas. Inicio, puntos de revisión y cierre definidos por el centro.
9. Criterios de parada. Qué incidencia obliga a pausar y quién puede hacerlo.
10. Regla de decisión. Qué evidencia permitirá ampliar, ajustar o cerrar.

Conviene revisar antes el plan digital de centro con IA, para que el piloto responda a una prioridad institucional y no a la disponibilidad momentánea de una herramienta.

Indicadores de éxito: cinco bloques

No hay una cifra universal que determine el éxito. El centro debe fijar metas basadas en su línea base, recursos y objetivo. Una batería equilibrada combina cinco tipos de indicador.

1. Resultado principal

Mide el cambio que justificó el piloto. Debe tener unidad y fuente claras.

Si el objetivo es ahorrar tiempo docente, registra minutos dedicados a una tarea comparable antes y durante el piloto. Si es mejorar feedback, mide el tiempo de entrega y aplica una rúbrica breve de utilidad. Si es generar materiales, valora alineación curricular, claridad, accesibilidad y cantidad de correcciones necesarias antes de llevarlos al aula.

No midas solo rapidez. Un borrador generado en segundos que requiere una revisión larga puede no mejorar el proceso.

2. Calidad pedagógica

La revisión puede usar una rúbrica común con escala definida por el centro. Algunos criterios posibles:

• coherencia con el objetivo de aprendizaje;
• adecuación a etapa y materia;
• exactitud del contenido;
• nivel de reto y posibilidad de respuesta propia;
• accesibilidad y alternativas;
• control efectivo del docente sobre la versión final.

Selecciona pocos criterios relacionados con la hipótesis. Un piloto de planificación docente con MIA no necesita medir todas las dimensiones del aprendizaje del alumnado si este no es el uso probado.

3. Adopción y carga real

Registra cuántas personas elegibles completan el caso de uso, con qué frecuencia y en qué punto abandonan. Añade tiempo de formación, soporte y corrección. Estos datos explican la viabilidad, pero no demuestran impacto pedagógico.

Separa «tener cuenta», «entrar» y «completar la tarea prevista». Solo la tercera medida indica que el flujo se utilizó como se diseñó.

4. Equidad, seguridad e incidencias

Comprueba si todas las personas del alcance pueden participar con condiciones equivalentes. Registra barreras de dispositivo, conexión, accesibilidad, idioma o apoyo. Define una alternativa antes de empezar.

El registro de incidencias debe distinguir al menos: salida incorrecta, contenido inadecuado, dato compartido indebidamente, acceso no autorizado, sesgo detectado, funcionamiento distinto del aprobado y dependencia excesiva de la herramienta. El objetivo no es presumir de cero incidencias, sino detectarlas, responder y aprender.

5. Coste y sostenibilidad

Calcula licencias, formación, soporte, integraciones y tiempo interno. Relaciona el coste con el número de tareas completadas o usuarios activos, según el objetivo. Añade preguntas de continuidad: quién mantendrá el acompañamiento, qué ocurre si cambia el proveedor y cómo se exportan los materiales.

Para ampliar esta batería a un cuadro anual, el centro puede apoyarse en los indicadores para el primer año de IA.

Cómo crear una línea base útil

La línea base debe medir la misma tarea que se probará. No compares la preparación de una actividad simple sin IA con una situación de aprendizaje completa generada con ayuda. Define una unidad comparable y recoge el dato con el mismo procedimiento.

Tres opciones razonables:

• antes y después: las mismas personas realizan tareas equivalentes en dos momentos;
• comparación simultánea: grupos o docentes comparables trabajan con y sin la herramienta;
• muestras revisadas a ciegas: una persona evalúa productos sin saber qué proceso se utilizó, cuando sea posible.

Ningún método elimina todos los sesgos. Documenta cambios de calendario, experiencia previa, materias o apoyo recibido. El informe debe indicar límites, no esconderlos. Un piloto ayuda a decidir en ese centro y contexto; no ofrece una garantía general sobre resultados.

Un cuadro de seguimiento que dirección pueda leer

Usa una fila por indicador y seis columnas:

Indicador	Línea base	Meta del centro	Dato actual	Fuente	Responsable
Tiempo por tarea	Dato previo	Umbral acordado	Resultado	Registro breve	Coordinación
Calidad del material	Rúbrica inicial	Umbral acordado	Resultado	Muestra revisada	Equipo pedagógico
Tareas completadas	No aplica	Alcance previsto	Resultado	Panel o registro	Responsable del piloto
Incidencias	Situación previa	Criterio acordado	Resultado	Registro	Coordinación digital
Coste total	Presupuesto	Límite aprobado	Resultado	Administración	Dirección

Evita metas copiadas de otro centro o de un proveedor. Una meta debe responder a la línea base y al valor que justifica el esfuerzo local.

Reglas para ampliar, ajustar o detener

Antes del inicio, escribe tres salidas:

• Ampliar: el indicador principal mejora según el umbral acordado, la calidad se mantiene y no aparecen barreras o riesgos sin resolver.
• Ajustar y repetir: existe una señal útil, pero la formación, el flujo, el alcance o la configuración impiden una conclusión clara.
• Detener: no mejora el problema, añade una carga desproporcionada, incumple condiciones acordadas o aparece un daño que no puede mitigarse de forma aceptable.

No conviertas la decisión en una votación de satisfacción. La experiencia de usuarios importa, pero debe leerse junto al trabajo producido y a las incidencias.

Lo legal no empieza después del piloto

Es requisito cumplir el RGPD desde el primer tratamiento de datos personales. Si es probable un alto riesgo, la evaluación de impacto del artículo 35 debe hacerse antes. La guía de la AEPD para centros educativos orienta sobre aplicaciones, minimización, permisos y consulta al DPD. El AI Act se aplica según el sistema, el papel del centro y el calendario de cada obligación; reducir el número de participantes no cambia la naturaleza del uso.

Es recomendación usar ficha, línea base, rúbrica y reglas de decisión. No son formularios impuestos por esas normas, sino medios para evaluar con responsabilidad.

Si el centro todavía está eligiendo solución, conviene pasar antes por la guía para evaluar plataformas de IA educativa. Con MIA, un primer piloto puede centrarse en un caso docente bien delimitado, como preparar y revisar materiales curriculares. Así se mide una mejora concreta sin prometer resultados que el diseño no puede demostrar.