Evaluación basada en /Proyectos

El estado del arte de los "exámenes" online.

Evaluación basada en /Proyectos

Desde que creamos /Proyectos anunciamos que calificaríamos a nuestros estudiantes por sus capacidades de creación de software.

El estado del arte

La forma de evaluar más popularizada en medios digitales es la selección múltiple y no está mal porque así un examen escala para que el software que sabe las respuestas te pueda dar una nota inmediatamente y aplica a cualquier materia de la que se haga un curso, sumado a que este modelo también es popular en medios físicos donde marcamos en una hoja nuestras respuestas y luego una maquina que lee el contraste de la marca de tu lápiz hace que otra vez este modelo escale. El estudiante promedio la conoce y sabe cómo lidiar con ella.

Resumen de Soluciones

• Fácil de escalar
• Fácil de programar
• Fácil de medir
• Fácil de entender / intuitivo

Suena al triple B de la educación pero le encuentro algunos problemas:

Problemas

• En algunos casos hacer un curso de 2 horas de contenidos muy prácticos que enseñan algo súper específico no te da el contexto suficiente para hacer un grupo de preguntas objetivas que evalúen el conocimiento.

• Quizá por efecto del punto anterior un profesor se ve forzado a elaborar preguntas con respuestas subjetivas o de opinión, lo cual en un examen de certezas es un grave atentado.

• El sistema de la frecuencia para volver a tomarlo.

• El estudiante probando otras respuestas para forzar éxito y "hackear" el sistema

• Si lo anterior pasa, el valor del éxito del examen es nulo.

Entonces ¿Cómo hacer un sistema confiable?, spoiler: este post no tiene la respuesta, solo una alternativa al estado del arte para mi caso de uso en especial.

Inspiración

Cuando he sido quien contrata a ingenieros de software mi método predilecto para evaluar su conocimiento no es sobre los conceptos teóricos que me pueda responder correcta o incorrectamente en 20 minutos sino más bien una prueba que pueden llevar a casa sin límite de tiempo (esto puede ser otro post). Entonces tengo un sesgo con los code challenges. Ahora que tal si te entreno para esto desde tu formación.

/Proyectos

Por eso creamos /Proyectos donde te damos una lista de aplicaciones con su respectivo diseño para que cualquiera pueda practicar y recibir feedback si así lo quiere.

Extendimos esta característica a los cursos donde el gamification es ganar una medalla muy bonita, pero donde lo que realmente queremos es "forzarte" a practicar si es que la quieres (to be honest).

El sistema funciona así:

• Cada curso va relacionado a un proyecto en especial.
• Desarrollamos el 50% del proyecto en las clases.
• El otro 50% queda como "tarea" para el estudiante para obtener la medalla en cuestión.
• En tu perfil vinculas tus cuentas de Discord y Github.
• Desde tu perfil puedes avisar que terminaste el proyecto y relacionarlo a un repositorio en Github donde debes cumplir ciertos requisitos para su revisión como tener una url donde probarlo.
• Cada que usas el sistema recibo una notificación en Discord donde puedo evaluar si está ok para "aprobar".
• Sí, la evaluación es manual y a día de hoy yo me he encargado del 100%.
• Sin embargo el equipo interno y "experts" invitados en Discord también pueden evaluar. agradecimiento especial a @sergiodxa por todo su apoyo.
• Puedo dejarte feedback con lo cual tu proyecto pasa a un estado de "iteración", el feedback lo puedes ver en tu mail, Discord y tu perfil de estudiante.
• Una vez estes nuevamente seguro de tus resultados puedes volver a mandarlo para una nueva revisión.
• Repite el ciclo hasta que se apruebe.
• Al aprobar obtienes una notificación por mail, una medalla en tu perfil y mi aprecio eterno por tu compromiso.

El concepto de medallas aun está en desarrollo y ameritará una nueva explicación

No hay nada revolucionario en el software ni esta tesis funciona para cualquier curso online.

Conclusiones

• Es mucho compromiso interno que no escalará si tenemos éxito (si eso pasa tendremos un problema feliz y seguro podría pagar a los experts)

• ¿Estamos en contra de la selección múltiple? No, maybe la programemos algún día.

Creo que al final de todo tu no necesitas una medalla para hacerte creer que sabes lo que sabes. Yo solo quiero que practiques, así que si no deseas enviar tu proyecto a evaluación está bien.

Aprende y evalúate como quieras.