Módulo 07

Ingeniería de sistemas de prompts

Fase del proceso:
Construir
Nivel de competencia:
Ingeniería
Tiempo estimado:
10-12 horas
Requisitos previos:
Patrones de arquitectura y estudios de alternativas

Trata los prompts como artefactos versionados de interfaz y de control dentro de un sistema más grande, no como cadenas mágicas. Diseñarás las instrucciones, los límites de la evidencia, los ejemplos y los criterios de éxito a partir de cómo se comporta el modelo y de lo que dicen las evaluaciones.

Al terminar este módulo sabrás

  • Diseñar manifiestos de prompt que separen las instrucciones estables, la evidencia, la entrada variable, los ejemplos y los contratos de salida.
  • Decidir con los resultados de tus experimentos si usar zero-shot o few-shot, y si el prompt debe centrarse en el objetivo o describir un procedimiento.
  • Reducir la ambigüedad de las instrucciones y evitar que los datos no fiables se interpreten como si tuvieran autoridad.
  • Versionar los prompts y ligar cada cambio a evidencia de evaluación.

Qué vas a producir: Manifiesto de prompt versionado y comparación de evaluaciones: El manifiesto versionado con su registro de cambios, y la comparación entre la v1 y la versión actual sobre el conjunto adversarial público. Se guarda en tu Cuaderno de Ingeniería como evidencia de lo que sabes hacer.

Lecciones

  1. 7.1 Anatomía del prompt como interfaz

    Intención, evidencia, restricciones, criterios de éxito e interfaz; separa lo que tiene autoridad de los datos no fiables.

    Punto de práctica: Convierte un prompt conversacional escrito de una sola pieza en un manifiesto con secciones explícitas.

  2. 7.2 Ejemplos, contraejemplos y rúbricas

    Cómo elegir los ejemplos few-shot, la diversidad, los contraejemplos y la generación guiada por rúbricas.

    Punto de práctica: Compara ejemplos elegidos al azar con ejemplos límite seleccionados a mano sobre un conjunto de 30 casos.

  3. 7.3 Prompts adaptados al modelo y controles de razonamiento

    Objetivos y restricciones claros, los controles de esfuerzo que admite el modelo y salidas auditables en lugar de razonamiento oculto.

    Punto de práctica: Compara en una prueba A/B, con un modelo de razonamiento, una estructura procedimental "paso a paso" frente a un prompt centrado en el objetivo.

  4. 7.4 Versionado de prompts y disciplina de regresión

    Los prompts como artefactos fuente, con versiones semánticas, registro de cambios y evidencia de regresión.

    Punto de práctica: Crea las versiones v1 y v2 de un manifiesto de prompt y compáralas sobre un conjunto de evaluación fijo.

Laboratorio: Laboratorio de manifiestos de prompt

Ejecutas un prompt de extracción que se te da hecho, examinas los casos en los que falla y lo refactorizas en componentes estructurados.

Se ejecuta en Google Colab: sin instalar nada y sin API key.

Ver el notebook en Colab (se abre en una pestaña nueva)

Reto de ingeniería

Construye un prompt o un sistema de extracción de facturas que maneje campos ausentes, varios totales, OCR con ruido e instrucciones malintencionadas. El prompt no se te da.

Artefacto: Manifiesto de prompt versionado y comparación de evaluaciones

Control de competencia

Reto con una robustez pública >= 80%; la defensa del diseño explica los compromisos.

  • PRM-01 Se declara la interfaz del esquema
  • SEC-03 La entrada no fiable está delimitada o separada (crítico)
  • PRM-03 No se inventan los valores ausentes
  • PRM-04 Se gestionan las facturas con varios totales
  • PRM-05 Se incluyen la versión del prompt y el registro de cambios
  • PRM-06 Robustez pública >= 80% en el conjunto de facturas adversariales

Referencias

    Ingeniería de sistemas de prompts · FMSE Módulo 7 | AgenticAI