Evaluar y decidir. Al terminar tendrás, en archivos listos para usar, la evaluación de tu curso: preguntas de caso, un proyecto con su rúbrica y la plantilla del reporte de cada aprendiz.
En la parte 1 diseñaste tu curso al revés: primero las metas, después cómo comprobarlas, al final los contenidos. Ahora toca el segundo paso. El curso terminó y alguien dice que lo estudió todo. ¿Cómo sabes si de verdad puede hacer lo que el curso prometía?
Este taller sirve para tres tipos de curso. Elige el tuyo; los ejemplos y el prompt de la práctica se adaptan a él.
Un curso para que las personas nuevas lleguen preparadas, o para decidir a quién contratar. La evaluación responde: ¿está listo para el puesto?
Un tema con su evaluación. La evaluación responde: ¿qué aprendió cada estudiante y qué hay que reforzar?
Diseñas al revés lo que tú quieres aprender, te evalúas en dos intentos con la IA como tutora (lección 3) y mides tu propia ganancia. La evaluación responde: ¿ya lo sé hacer?
Una evaluación bien hecha no pregunta "lo que salió en el curso": comprueba cada meta que definiste en la parte 1. Si una meta no tiene cómo comprobarse, o una pregunta no mide ninguna meta, algo sobra o falta.
| Meta (qué debe saber hacer) | Evidencia (cómo lo compruebas) |
|---|---|
| Aplica el procedimiento de atención de una solicitud | Preguntas de caso: "Llega esta solicitud; ¿cuál es el siguiente paso?" |
| Detecta errores en un documento antes de entregarlo | Un documento con tres errores escondidos: encuéntralos y explica cada uno |
| Resuelve un caso completo con criterio | Proyecto final calificado con rúbrica, más una sustentación corta |
El médico y educador George Miller propuso en 1990 una pirámide para evaluar competencias que hoy se usa en muchas áreas. Sirve para ver qué mide cada tipo de evaluación:
| Nivel | Cómo se evalúa | Dónde se aplica |
|---|---|---|
| Sabe y sabe cómo | Preguntas cerradas basadas en casos, con retroalimentación | Una plataforma de evaluación, un formulario o una página propia |
| Lo demuestra | Un caso abierto o un proyecto final con rúbrica | Lo califica una persona; la IA puede asistir con la rúbrica |
| Lo hace | Observación en la práctica real | El periodo de prueba, las primeras semanas, el aula |
Muestra de dónde parte cada persona. Sin ella no sabes cuánto aprendió.
Con retroalimentación en cada pregunta. El error enseña. Es la práctica.
Sin retroalimentación, con otras preguntas sobre los mismos temas. Con dos intentos ves la ganancia (lección 6): quién avanzó, no solo quién sabía. Tómala como una pista, no como una prueba de que el curso funcionó: parte de la subida puede ser práctica o azar.
La IA escribe muchas preguntas en segundos. Que sean buenas depende de lo que le pidas:
| Pídele que… | Porque… |
|---|---|
| Parta de un caso | Mide si la persona aplica, no si memorizó una frase. |
| Use errores típicos como opciones incorrectas | Una opción absurda no engaña a nadie; un error que cometería alguien nuevo sí, y eso te dice qué no entendió. |
| Explique cada opción | La retroalimentación convierte la evaluación en aprendizaje. |
| Cite la sección de donde sale | Puedes verificarla y el aprendiz sabe dónde repasar. |
| Evite "todas las anteriores" y "ninguna de las anteriores" | Se adivinan fácil y dejan de funcionar si la plataforma baraja las opciones. |
| Escriba dos versiones paralelas | Mismos temas, otros casos y cifras: el segundo intento no es el mismo examen. |
Y antes de usarla para decidir algo, pruébala con dos o tres personas: las preguntas ambiguas aparecen enseguida.
Una rúbrica dice qué se evalúa (criterios) y cómo se ve cada nivel de desempeño. Así dos personas que califican el mismo trabajo llegan a una nota parecida, y quien lo presenta sabe de antemano qué se espera. Un ejemplo para un caso completo:
| Criterio | En desarrollo | Competente | Destacado |
|---|---|---|---|
| Procedimiento | Omite pasos clave | Sigue todos los pasos | Sigue los pasos y explica por qué cada uno |
| Precisión | Varios errores que afectan el resultado | Errores menores que no cambian el resultado | Sin errores y con verificación propia |
| Comunicación | Cuesta entender lo que hizo | Claro y ordenado | Claro, ordenado y adaptado a quien lo lee |
| Criterio ante lo imprevisto | Se detiene o improvisa sin avisar | Identifica el problema y pregunta | Propone una solución razonable y la justifica |
El reporte junta todo en un solo producto (lección 6): los resultados de los dos intentos y la ganancia, la rúbrica del proyecto, las fortalezas, lo que hay que reforzar y una recomendación. En formato Excel si lo vas a seguir trabajando, en PDF si es para entregar.
Contratar, aprobar o reprobar a una persona lo decide una persona. Revisa que los criterios sean solo de desempeño: la edad, el género o el origen no son criterios, y usarlos repite el sesgo que viste en la lección 6.
Tus aprendices también tienen IA. Una pregunta que se responde pegándola en un chat no mide lo que sabe la persona. Tres defensas:
Situaciones con tus documentos, tus procesos y tus herramientas, que la IA no conoce.
Hacerlo en el programa o el entorno real del trabajo, no en un documento que cualquiera puede generar.
Cinco minutos para explicar su proyecto y responder dos preguntas. Nadie puede delegar eso.
Analizar los resultados con IA ahorra horas (lección 6), pero son datos de personas. El orden importa: se anonimiza antes de dárselos a la IA, no con la IA. Si le pides que quite los nombres, ya se los entregaste.
| Pieza | Formato |
|---|---|
| Preguntas de caso con retroalimentación, por módulo | Según dónde las apliques: una página HTML de un solo archivo (lección 8), el formato de tu plataforma o un documento para imprimir |
| Proyecto final con su rúbrica | Word o PDF |
| Plantilla del reporte del aprendiz | Excel o PDF |
Este taller termina con tu evaluación en archivos. Para aplicarla tienes cuatro caminos, de lo más sencillo a lo más completo:
| Camino | Qué es | Ten en cuenta |
|---|---|---|
| 1 · Plataformas que ya existen | Google Forms (calificación automática y respuestas en una hoja), ThatQuiz, Socrative, Wayground (antes Quizizz), Kahoot, Genially. Kahoot y Wayground importan preguntas desde una hoja de cálculo con su plantilla. NotebookLM genera cuestionarios y tarjetas desde tus fuentes, más para estudiar que para evaluar formalmente. | Gratis o con planes gratuitos limitados. Poco control sobre dos intentos y análisis de ganancia. |
| 2 · Tu propio sitio con base de datos | Tus páginas de evaluación publicadas en internet, más una base de datos en la nube que guarda los resultados (por ejemplo Supabase: la página es la vitrina que ve el aprendiz; la base de datos, la bodega donde tú analizas). Se construye con ayuda de un agente como Claude Code. | Es un proyecto técnico: publicación, seguridad y privacidad. Se aborda en el taller Tu sitio web con IA. Un enlace no anunciado no es privado. |
| 3 · Una plataforma ya construida, por suscripción | El motor de evaluación de Víctor Aguilar: tienes tu cuenta de evaluador, cargas tus preguntas, creas códigos para cada aprendiz o para un grupo y ves en tu tablero los dos intentos, la ganancia, los temas a reforzar y el reporte. Exporta los resultados anonimizados, listos para analizar con IA. | No construyes nada. Pregunta por el servicio en la página de contacto. |
| 4 · Una instancia propia con tu marca | El mismo motor, instalado en tus propias cuentas, con tu identidad visual. | Requiere un plan de pago de la base de datos o un servicio mensual de mantenimiento. Pregunta en la página de contacto. |
Si hiciste la parte 1, usa tu curso. Si no, usa el manual de inducción de la lección 3 como si fuera un módulo. Abre un chat nuevo cada vez que el paso lo diga.
Paso 1. En un chat nuevo, pega el prompt A, como lo pediría cualquier persona:
Hazme 5 preguntas de opción múltiple sobre este manual para evaluar a las personas nuevas. MANUAL DE INDUCCIÓN 1. Horario. Lunes a viernes de 8:00 a 17:00, con almuerzo de 12:30 a 13:30. 2. Vacaciones. 15 días hábiles por cada año trabajado. Se solicitan al jefe inmediato con al menos 15 días de anticipación, por el formulario de permisos. 3. Permisos. Para citas médicas, avisa al jefe inmediato el día anterior y entrega el soporte al volver. 4. Periodo de prueba. Dura dos meses, con una conversación de seguimiento al final de cada mes. 5. Herramientas. Recibes correo corporativo y acceso al sistema de solicitudes el primer día. Tu contraseña es personal: nunca la compartas. 6. A quién acudir. Dudas del trabajo: jefe inmediato. Nómina y certificados: Talento humano.
Paso 2. En otro chat nuevo, pega el prompt B, con las reglas de este taller:
Actúa como un diseñador de evaluaciones. Con el manual de abajo, escribe 5 preguntas de opción múltiple que evalúen si la persona sabe aplicar el manual, no solo recordarlo: cada una parte de un caso concreto. Las opciones incorrectas deben ser errores que cometería alguien nuevo. Para cada opción, una línea de retroalimentación que explique por qué es o no correcta, y la sección del manual de donde sale. No uses "todas las anteriores" ni inventes datos que no estén en el manual. MANUAL DE INDUCCIÓN 1. Horario. Lunes a viernes de 8:00 a 17:00, con almuerzo de 12:30 a 13:30. 2. Vacaciones. 15 días hábiles por cada año trabajado. Se solicitan al jefe inmediato con al menos 15 días de anticipación, por el formulario de permisos. 3. Permisos. Para citas médicas, avisa al jefe inmediato el día anterior y entrega el soporte al volver. 4. Periodo de prueba. Dura dos meses, con una conversación de seguimiento al final de cada mes. 5. Herramientas. Recibes correo corporativo y acceso al sistema de solicitudes el primer día. Tu contraseña es personal: nunca la compartas. 6. A quién acudir. Dudas del trabajo: jefe inmediato. Nómina y certificados: Talento humano.
Paso 3. Compara: ¿cuáles preguntas se responden recordando una frase y cuáles obligan a pensar en una situación? Mira las opciones incorrectas de B: ¿son errores reales de alguien nuevo? Esas son las que te dicen qué no entendió.
Este prompt te entrevista según tu tipo de curso y la plataforma donde vas a aplicar la evaluación, y al final te entrega un prompt personalizado para generarla. Ese prompt personalizado es el entregable del taller: guárdalo en tu biblioteca y úsalo con cada módulo de tu curso.
Paso 1. Abre un chat nuevo y pega el prompt maestro. Si tienes la estructura de tu curso de la parte 1, adjúntala.
Actúa como un diseñador de evaluaciones experto. Quiero diseñar la evaluación de mi curso y necesito que me ayudes a construir un prompt personalizado para generarla. Hazme preguntas de a UNA, en español sencillo; si respondo "no sé", propón una opción y pídeme confirmar.
Pregúntame, en este orden:
1) Mi tipo de curso: empresa (inducción o filtro de personal), docente o academia (una unidad de clase) o autoformación (algo que quiero aprender yo).
2) Para quién es el curso y qué nivel tienen al empezar.
3) Las metas: qué debe saber HACER la persona al terminar. Si adjunté la estructura del curso, propónmelas a partir de ella.
4) Qué material tengo como fuente.
5) Dónde voy a aplicar las preguntas: una página propia, una plataforma de evaluación que recibe preguntas en JSON, Google Forms, Kahoot o Wayground, otra plataforma, o en papel.
6) Si habrá dos intentos (práctica con retroalimentación y examen final) y si habrá proyecto final.
Con mis respuestas, escríbeme UN prompt listo para usar con cada módulo que genere:
- Preguntas de opción múltiple basadas en casos, con errores típicos como opciones incorrectas, retroalimentación para cada opción, la fuente de cada respuesta y el tema que evalúa. Sin "todas las anteriores". Si hay dos intentos, dos versiones paralelas: mismos temas, otros casos.
- El formato de salida según dónde las aplicaré: página HTML de un solo archivo con retroalimentación al instante; JSON con este formato por pregunta: {"q": "...", "opciones": ["...", "...", "..."], "correcta": [índice desde 0], "explicacion": "si falla", "ampliacion": "si acierta", "tema": "...", "puntos": 1}, y con dos intentos {"practica": [...], "examen": [...]}; una tabla con la plantilla de importación de la plataforma que elegí; texto ordenado para copiar; o documento para imprimir con la clave aparte.
- Si hay proyecto final: el enunciado del proyecto y una rúbrica de 4 criterios por 3 niveles.
- La plantilla del reporte del aprendiz: resultados, ganancia, rúbrica, fortalezas, qué reforzar y recomendación, con la decisión final en manos de una persona.
El prompt debe exigir usar solo mi material, marcar como [FALTA: ...] lo que no esté en él y no incluir datos personales.
Al final, entrégame el prompt listo para copiar y explícame en dos líneas cómo usarlo con cada módulo.Paso 2. Responde sus preguntas. Paso 3. Guarda el prompt que te entregue: descárgalo en .txt o guárdalo en tu biblioteca de la Fábrica de Prompts. Paso 4. Úsalo en un chat nuevo con tu primer módulo y revisa el resultado con la lista de "Preguntas que la IA escribe bien".
Cuando ya tengas resultados, primero anonimízalos (los cuatro pasos de Aprende) y después usa este prompt en un chat nuevo, reemplazando la última línea por tu tabla:
Actúa como un analista de formación. Te doy los resultados anonimizados de una evaluación (cada persona es un código). Hazme: 1) Una tabla de indicadores: promedio de cada intento, porcentaje de aprobación de cada intento y ganancia promedio. 2) La ganancia normalizada de cada persona, calculada como (intento 2 − intento 1) ÷ (100 − intento 1), ordenada de mayor a menor. 3) Los temas que más se fallaron y cuáles no mejoraron entre intentos. 4) Tres recomendaciones priorizadas para mejorar el curso, no para juzgar a las personas. Muestra los cálculos para que pueda verificarlos y separa lo que muestran los datos de lo que sería una suposición. Si falta un dato, no lo inventes: márcalo. Resultados: [pega aquí tu tabla anonimizada]
Paso 1. Toma una meta de tu curso y escribe tú solo, sin la IA ni el prompt maestro: dos preguntas de caso con sus opciones y su retroalimentación, y un criterio de rúbrica con sus tres niveles. Lo que se evalúa aquí es lo que tú ya sabes diseñar.
Paso 2. Abre un chat nuevo, pega este prompt de evaluación y reemplaza la última línea por lo que escribiste:
Actúa como un experto en evaluación del aprendizaje y revisa lo que te pego al final: preguntas de caso y un criterio de rúbrica. 1) ¿Cada pregunta mide una meta concreta y obliga a aplicar, no solo a recordar? 2) ¿Las opciones incorrectas son errores creíbles de alguien que está aprendiendo? ¿Alguna se descarta sin pensar? 3) ¿La retroalimentación enseña algo cuando la persona se equivoca? 4) ¿Los tres niveles del criterio se distinguen con claridad, de modo que dos personas calificarían igual? 5) ¿Hay algo que favorezca o perjudique a alguien por razones que no son de desempeño? 6) Escribe una versión mejorada. Marca entre [corchetes] lo que solo yo puedo completar y no inventes nada sobre mi curso. No respondas las preguntas: solo evalúalas. Mi diseño es: [pega aquí tus preguntas y tu criterio]
Paso 3. Compara la versión mejorada con la tuya y anota qué regla se te escapó. La revisión de la IA es una opinión útil, no un veredicto: la prueba real es aplicar tus preguntas a dos o tres personas y ver cuáles resultan ambiguas. Después, si quieres, genera las mismas preguntas con tu prompt maestro y compara.
Escribe tu nombre y responde las 8 preguntas. Si fallas, verás al instante por qué; si aciertas, un dato que amplía. Al final descarga tu resultado en .txt y súbelo a tu carpeta de entregas.
Tu evaluación ya existe en archivos. Para publicarla en internet con tus propios resultados, el siguiente paso es el taller Tu sitio web con IA; si prefieres no construir nada, revisa los caminos 1 y 3 de "¿Y después?".