Saltar al contenido
Café virtual

Casos y pruebas

Prompt Control, Research Flow y Human in the Loop: ejercicios y pruebas que me ayudan a aprender.

01 Prompt ControlCómo cambia una respuesta cuando cambia la manera de pedirla. Caso práctico

Este caso de Prompt Control utiliza una situación ficticia y no contiene datos reales de clientes ni empresas.

Qué quiero observar

Hago la misma petición cinco veces, añadiendo cada vez una capa más, y comparo cómo cambia la respuesta. La idea de fondo: trabajar bien con IA no es hacer una pregunta, sino preparar bien el encargo.

Cómo lo pruebo

  1. 1 · Solo la pregunta
  2. 2 · + para quién y para qué
  3. 3 · + tono, formato y límites
  4. 4 · + un ejemplo de lo que espero
  5. 5 · + «revisa antes de responder»
  6. Comparo las 5 respuestas

Ejemplo paso a paso · ChatGPT, cada versión en un chat nuevo

Caso: la reseña de Sofia, clienta habitual, cuyo pedido llegó cinco días tarde sin que nadie la avisara.

Versión 1

Lo que pedí

«Responde a esta reseña.»

Lo que respondió

«Hola Sofia, sentimos mucho el retraso y, sobre todo, no haberte informado de que tu pedido llegaría más tarde de lo previsto. Entendemos tu decepción, especialmente después de tantos años confiando en nosotros. Gracias por hacérnoslo saber. Revisaremos qué ha ocurrido para evitar que vuelva a suceder y mejorar nuestra comunicación cuando haya cualquier incidencia con una entrega. Esperamos recuperar tu confianza en tu próxima experiencia con nosotros.»

Versión 2

Lo que añadí

Para quién y para qué: «Es Sofia, clienta habitual de una tienda online. El objetivo es que se sienta escuchada y vuelva a confiar en nosotros.»

Lo que respondió

«Hola Sofia, Sentimos mucho el retraso y, sobre todo, que no te avisáramos a tiempo. Entendemos perfectamente tu decepción, especialmente después de tantos años confiando en nosotros. Agradecemos que nos lo hayas contado. Vamos a revisar qué ocurrió para evitar que vuelva a pasar y mejorar la comunicación cuando haya cualquier incidencia con un pedido. Esperamos poder recuperar tu confianza en tu próxima compra.»

Versión 3

Lo que añadí

Tono, formato y límites: «Tono cercano y sincero, sin excusas ni frases hechas. Máximo cuatro frases. No ofrezcas descuentos.»

Lo que respondió

«Sofia, siento que tu pedido llegara cinco días tarde y que no te avisáramos. Entiendo que te haya decepcionado, sobre todo después de tantos años comprando con nosotros. Vamos a revisar qué falló en el seguimiento y en el aviso del retraso. Queremos recuperar tu confianza con una experiencia mejor.»

Versión 4

Lo que añadí

Un ejemplo del estilo que busco, sacado de otro caso: «Javier, tienes razón: el producto no era lo que mostrábamos en la foto. Ya lo hemos corregido en la web para que no le pase a nadie más. Gracias por avisarnos con tanto detalle.»

Lo que respondió

«Sofia, tienes razón: además del retraso, deberíamos haberte avisado de que tu pedido no llegaría a tiempo. Sabemos que llevas años confiando en nosotros y entendemos que esta vez te hayamos decepcionado. Gracias por decírnoslo; revisaremos qué falló en la comunicación para evitar que vuelva a ocurrir.»

Versión 5

Lo que añadí

Una revisión antes de responder: «Revisa tu borrador: que no prometa nada que no podamos cumplir, que no suene a plantilla y que responda a lo que más le molestó.»

Lo que respondió

«Sofia, tienes razón: lo peor no fueron solo los cinco días de retraso, sino que nadie te avisara. Después de tantos años comprando con nosotros, entendemos especialmente tu decepción. Gracias por señalarlo con tanta claridad; revisaremos cómo estamos comunicando este tipo de incidencias para evitar que vuelva a pasar.»

Cada versión suma una capa a la anterior.

Papel humano

Compara las respuestas y valora cuál se ajusta mejor a lo que necesitaba, y por qué.

Qué aprendo

El contexto apenas cambió la respuesta. Definir el tono y la extensión, y dar un ejemplo, sí la mejoró. La revisión final puso el foco en lo que más molestó a Sofia: nadie la avisó. Aun así, hacía falta un último ajuste humano.

02 Research FlowQué parte de una investigación puede automatizarse sin automatizar también la interpretación. Boceto

Qué quiero observar

Hasta dónde llega la máquina ordenando y dónde empieza el trabajo de entender. El patrón es una pista, no necesariamente la explicación.

Cómo lo pruebo

  1. Comentarios de clientes
  2. Clasificación automática
  3. Agrupación temática
  4. Detección de patrones
  5. Hipótesis
  6. Revisión humana

Papel humano

Revisa las hipótesis, las contrasta con el contexto y decide qué merece investigarse más a fondo.

Qué aprendo

Ordenar información y entenderla son trabajos distintos. El contexto sigue necesitando interpretación.

03 Human in the loopDónde puede automatizarse y en qué momento debe intervenir una persona. Boceto

Qué quiero observar

Qué tareas pueden fluir solas y en qué punto una revisión humana evita errores que luego salen caros.

Cómo lo pruebo

  1. Entrada
  2. La IA procesa
  3. Validación humana
  4. Continuar · Corregir · Detener

Papel humano

Decide en el punto de validación: si el resultado sigue adelante, se corrige o se detiene.

Qué aprendo

Un flujo necesita puntos de revisión donde una persona pueda corregirlo o detenerlo.

04 AI Quality CheckCómo evitar dar por buena una respuesta solo porque suena segura. Boceto

Qué quiero observar

Que una respuesta bien escrita no es lo mismo que una respuesta fiable, y qué controles ayudan a distinguirlas.

Cómo lo pruebo

  1. La IA genera una respuesta
  2. Segunda capa de revisión: fuentes, contradicciones, errores y sesgos
  3. Nivel de confianza
  4. Una persona decide si sirve

Papel humano

Lee la revisión y decide si la respuesta sirve, necesita cambios o se descarta.

Qué aprendo

Conviene revisar el contenido y las fuentes, además de cómo está redactada la respuesta.

05 AI vs AIQué ocurre cuando una IA contrasta o cuestiona la respuesta de otra. Boceto

Qué quiero observar

Si el desacuerdo entre agentes ayuda a ver ángulos muertos… o solo añade ruido.

Cómo lo pruebo

  1. Un agente propone una interpretación
  2. Otro agente la cuestiona: busca fallos y explicaciones alternativas
  3. Contraste de argumentos
  4. La decisión final es humana

Papel humano

Escucha a los dos agentes, contrasta sus argumentos y toma la decisión final.

Qué aprendo

Dos respuestas distintas abren preguntas. La discrepancia no demuestra por sí sola cuál es correcta.

06Model ChoiceCaso práctico · Leer benchmarks con criterio¿Qué modelo elegir según la tarea?Caso práctico

Leer una captura de benchmarks, distinguir sus métricas y comprobar qué podemos concluir de ellas.

Captura fija aportada para este ejercicio. No se actualiza en tiempo real y su fecha no está indicada.

Speed mide tokens de salida por segundo. Cost per Task es el coste medio ponderado del benchmark, no el precio garantizado de tu propia tarea.

Fuente: Artificial Analysis ↗

Cuatro preguntas para explorar la captura. Puedes cambiar tu respuesta.

Artificial Analysis: Intelligence, Speed, Cost per Task

Según la captura, ¿cuál genera más tokens por segundo?

¿Cuál tiene el menor Cost per Task en esta captura?

Entre estas tres opciones, ¿cuál tiene más puntuación en Intelligence?

¿Podemos elegir el más eficiente para cualquier tarea con estos gráficos?

Más rápido, más barato y más adecuado son preguntas distintas. La decisión empieza por definir qué necesitamos obtener.

Esta web incluye material audiovisual creado con IA.