Apps EscolaresMuchas pruebas piloto en los centros terminan igual. Unos cuantos docentes entusiastas prueban un producto durante un trimestre, dicen que les gustó y el centro lo compra por buena voluntad o se olvida de él. Ninguno de los dos resultados es una decisión. Una buena prueba piloto responde a una sola pregunta: ¿debemos pagar esto para todos, sí o no?
Escribe la decisión antes de empezar
Antes de que nadie inicie sesión, escribe un párrafo que responda a tres cosas:
- ¿Qué problema intentamos resolver? Sé concreto. “Mejorar en matemáticas” no es la descripción de un problema. “Los alumnos de 1.º de ESO (year 7) que llegan por debajo del nivel esperado no se ponen al día antes de final de curso” sí lo es.
- ¿Qué veríamos si el producto funcionara? Elige una o dos medidas que puedas recoger de verdad.
- ¿Qué resultado significa que lo compramos y qué resultado significa que no?
Ponte de acuerdo en esto con quienes firman el presupuesto. Si ahora no os ponéis de acuerdo sobre qué es el éxito, tampoco lo haréis al final.
Elige medidas que puedas recoger
Las buenas medidas para una prueba piloto ya se recogen o son baratas de recoger. Algunos ejemplos:
| Problema | Medida |
|---|---|
| Deberes sin entregar | Tasa de entrega por clase, del LMS o de la app de deberes |
| Familias que no leen los mensajes | Tasa de lectura por mensaje, de los informes de entrega de la app para familias |
| Corrección lenta | Minutos por tanda de cuadernos que indican los docentes, antes y durante la prueba |
| Poca implicación en la práctica | Minutos de práctica por alumno a la semana, según la app |
| Lagunas en competencias básicas | Resultados en una evaluación breve al principio y al final |
Los datos de uso son útiles, pero no equivalen al impacto. Un producto en el que los alumnos entran cada día puede no cambiar nada en el aprendizaje. Usa los datos de uso para comprobar si la prueba se hizo de verdad, y usa una medida de resultados para juzgarla.
Elige bien las clases piloto
Si solo haces la prueba con tus docentes más entusiastas, aprenderás cómo funciona el producto con tus docentes más entusiastas. Mezcla el grupo:
- Incluye al menos a un docente escéptico con la tecnología.
- Incluye clases con distintos niveles de rendimiento.
- Si puedes, mantén una clase similar que no use el producto, para tener algo con lo que comparar.
Una clase de comparación no tiene que ser un ensayo formal. Dos clases paralelas de 2.º de ESO (year 8) que dan la misma unidad, una con el producto y otra sin él, ya te dicen mucho más que una sola clase.
Hazla durar lo suficiente
Una prueba piloto de dos semanas mide la novedad. La mayoría de los productos necesitan al menos de seis a ocho semanas para que pase la novedad y se asienten las rutinas. Para cualquier producto que dice cambiar los resultados de aprendizaje, es mejor un trimestre completo.
Fija dos puntos de control:
- Semana 2. ¿Está todo el mundo dado de alta? ¿Hay problemas técnicos? Resuelve ahora los inicios de sesión, la sincronización de listas y los problemas con los dispositivos, o tapará los resultados.
- Mitad de la prueba. ¿Los docentes lo usan como estaba previsto? Si el uso se ha desplomado, averigua por qué antes del final.
Haz a los docentes las preguntas adecuadas
“¿Te gustó?” da respuestas educadas. Haz preguntas que revelen el coste y el comportamiento:
- ¿Cuántos minutos a la semana te llevó prepararlo?
- ¿Qué dejaste de hacer para tener tiempo para ello?
- ¿Lo seguirías usando si saliera del presupuesto de tu departamento?
- ¿Qué haría que dejaras de usarlo?
Pregunta también a los alumnos. Las encuestas anónimas breves, de dos o tres preguntas, funcionan mejor.
Consigue antes las condiciones comerciales por escrito
Antes de empezar la prueba, pide al proveedor el precio que pagarías por implantarlo en todo el centro, al menos para los tres primeros años. Un producto estupendo con el descuento de la prueba piloto puede no valer la pena a precio completo. Confirma también que los datos de la prueba se borrarán si no compras.
Toma la decisión
Al final, vuelve al párrafo que escribiste al principio. Compara los resultados con lo que dijiste que sería el éxito. Hay tres resultados honestos:
- Comprar. La medida ha mejorado, los docentes lo seguirán usando y el coste está justificado.
- No comprar. La medida no ha cambiado, o los docentes no lo usarán sin mucho apoyo.
- Ampliar. Solo si un problema concreto, como la sincronización de listas, impidió que la prueba fuera justa. Fija una nueva fecha de fin y cúmplela.
Escribe un resumen de una página con lo que probaste, lo que ocurrió y lo que decidiste. El año que viene, cuando otro proveedor te presente un producto similar, te alegrarás de haberlo hecho.