Cómo crear una rúbrica para evaluar prompts sin premiar su longitud

Guía preparada con apoyo de IA. Casos y resultados didácticos, con datos ficticios; adapta y comprueba las plantillas antes de utilizarlas.

Convertir una impresión en criterios observables

Decir que un prompt está bien elaborado deja al alumno sin una referencia útil. En esta propuesta la rúbrica tiene cuatro criterios: objetivo identificable, datos delimitados, tratamiento de ausencias y formato revisable. Cada criterio se marca como ausente, parcial o demostrado, acompañado de una frase de evidencia. No se suman palabras ni expresiones técnicas. Una instrucción breve puede ser adecuada si permite transformar la entrada y detectar qué parte de la salida necesita comprobación.

Usar un caso con una respuesta contrastable

La entrada ficticia dice: Irene revisará el inventario el martes; se estudiará cambiar de proveedor; falta decidir quién envía el informe. El objetivo consiste en extraer tareas confirmadas sin convertir propuestas en acuerdos. Un prompt que pida hacer un plan completo deja sin regular responsables ausentes y decisiones pendientes. La salida de referencia identifica la revisión de Irene, mantiene martes como fecha relativa y deja el envío del informe sin responsable. El cambio de proveedor sigue siendo una propuesta.

Aplicar la rúbrica a una instrucción

Entrega al revisor el texto del prompt, la entrada y una salida de prueba. Pídele que valore cada criterio por separado. Objetivo demostrado exige que la acción solicitada sea inequívoca. Límites demostrados requiere una regla explícita para no inventar responsables. Formato demostrado permite localizar acción, evidencia y pendiente. Si una salida sale bien por casualidad aunque el límite no exista, la rúbrica del prompt debe registrar esa carencia. La evaluación del resultado se realiza en otra columna.

Evalúa este prompt: «Haz un plan completo con estas notas». Tarea prevista: extraer solo acciones confirmadas de una reunión. Valora objetivo, datos, límites ante información ausente y formato revisable como ausente, parcial o demostrado. Justifica con el texto del prompt, sin inventar intención del autor. Propón una modificación breve por cada carencia detectada.

Detectar el caso límite que cambia la valoración

Prueba después con una nota que diga Irene no revisará inventario; Óscar estudiará la alternativa, sin compromiso. Una instrucción robusta conserva la negación y distingue estudio de decisión. Si el asistente inventa una tarea para Irene, revisa si la consigna exige respaldo textual. El error también puede aparecer con un prompt claro; por eso no conviertas una única ejecución correcta en garantía. Conserva el resultado fallido y explica qué control humano lo habría detectado antes de usarlo.

Mini práctica de revisión entre compañeros

Dos participantes redactan instrucciones diferentes para la misma nota y las intercambian sin decir cuál prefieren. Cada revisor señala una mejora concreta y una característica ya demostrada. Después ejecutan una segunda entrada con un responsable ausente. El criterio de cierre consiste en poder justificar cada valoración con un fragmento de la instrucción y un comportamiento observado. Si los revisores discrepan sobre el significado de demostrado, añade un ejemplo a la rúbrica antes de continuar con más ejercicios.

Cómo seguir aprendiendo

Para situar este caso dentro de un método más amplio, consulta nuestra guía de metodología y campus. Si quieres practicar con acompañamiento, revisa el programa del curso relacionado y comprueba sus objetivos, requisitos y modalidad antes de elegir.