Cómo probar un prompt antes de usarlo en el trabajo
Un prompt que funcionó una vez puede fallar la siguiente. Pruébalo antes de depender de él.
Respuesta breve: define qué es una buena respuesta, ejecuta el prompt con varios ejemplos reales, observa dónde falla, ajusta una cosa a la vez y registra la versión que funcionó. Un prompt que acierta una vez no está probado; uno que acierta en casos variados, sí.
Qué ayuda antes de empezar
- Una tarea específica, como resumir correos de clientes o estandarizar descripciones de productos.
- De cinco a diez ejemplos reales, incluidos casos fáciles, difíciles y extraños.
- Un criterio de calidad escrito, para saber qué es acertar.
Etapas
- Escribe el objetivo y el criterio de éxito. Por ejemplo: "resumir en hasta tres frases, sin inventar información y manteniendo los números exactos".
- Escribe la primera versión del prompt. Incluye el rol, el contexto, la tarea, el formato y las restricciones.
- Prueba con los ejemplos. Ejecuta el prompt en cada uno, sin cambiar nada, y guarda los resultados.
- Evalúa con el criterio. Marca cada respuesta como buena, aceptable o mala y anota por qué.
- Busca patrones en los fallos. Suelen repetirse: formato erróneo, información inventada, tono inadecuado.
- Ajusta una cosa a la vez. Cambia una instrucción y ejecuta de nuevo. Si cambias demasiado, no sabrás qué mejoró.
- Prueba casos límite. Textos vacíos, muy largos, en otro idioma, con datos confusos.
- Ejecuta más de una vez. Las respuestas pueden variar; mira si el resultado es estable.
- Registra. Guarda la versión final del prompt, la fecha, los ejemplos usados y las limitaciones conocidas.
Un ejemplo
Rodrigo creó un prompt para clasificar mensajes de clientes en "duda", "queja" y "elogio". Funcionó bien en los primeros ejemplos, pero falló con mensajes con ironía. Añadió una instrucción para tratar el tono y probó de nuevo con ejemplos irónicos. La tasa de acierto mejoró y anotó que los casos ambiguos deben ser revisados por una persona. Es un ejemplo ilustrativo.
Errores comunes
- Probar con un solo ejemplo: no muestra la variación.
- Cambiar varios puntos a la vez: es difícil saber el efecto de cada uno.
- No definir el criterio: sin él, la evaluación se vuelve impresión.
- Olvidar los datos sensibles: no uses información confidencial en pruebas sin confirmar la política del servicio.
Próximo paso
Elige una tarea de tu trabajo, escribe el criterio de éxito y prueba tu prompt con cinco ejemplos reales. Incluso una prueba pequeña evita muchos problemas.
