Solicitar información
 Duración 14 horas

Temario del curso

Introducción al Aprendizaje por Refuerzo a partir de Retroalimentación Humana (RLHF)

  • Qué es el RLHF y por qué es importante.
  • Comparación con los métodos de ajuste fino supervisado.
  • Aplicaciones del RLHF en los sistemas de IA modernos.

Modelado de Recompensas con Retroalimentación Humana

  • Recopilación y estructuración de la retroalimentación humana.
  • Construcción y entrenamiento de modelos de recompensa.
  • Evaluación de la efectividad de los modelos de recompensa.

Entrenamiento con Optimización de la Política Proximal (PPO)

  • Vista general de los algoritmos PPO para RLHF.
  • Implementación de PPO con modelos de recompensa.
  • Ajuste fino iterativo y seguro de modelos.

Ajuste Fino Práctico de Modelos de Lenguaje

  • Preparación de conjuntos de datos para flujos de trabajo de RLHF.
  • Ajuste fino práctico de un LLM pequeño utilizando RLHF.
  • Desafíos y estrategias de mitigación.

Escala del RLHF a Sistemas de Producción

  • Consideraciones de infraestructura y capacidad de cómputo.
  • Garantía de calidad y bucles de retroalimentación continua.
  • Mejores prácticas para la implementación y el mantenimiento.

Consideraciones Éticas y Mitigación de Sesgos

  • Abordaje de riesgos éticos en la retroalimentación humana.
  • Estrategias de detección y corrección de sesgos.
  • Aseguramiento de la alineación y la seguridad de las salidas.

Estudios de Caso y Ejemplos del Mundo Real

  • Estudio de caso: Ajuste fino de ChatGPT con RLHF.
  • Otras implementaciones exitosas de RLHF.
  • Lecciones aprendidas e información del sector.

Requerimientos

  • Comprensión de los fundamentos del aprendizaje supervisado y del aprendizaje por refuerzo.
  • Experiencia en ajuste fino de modelos y arquitecturas de redes neuronales.
  • Familiaridad con la programación en Python y marcos de aprendizaje profundo (p. ej., TensorFlow, PyTorch).

Público Objetivo

  • Ingenieros de aprendizaje automático.
  • Investigadores de IA.

Formación Corporativa a Medida

Soluciones de formación diseñadas exclusivamente para empresas.

  • Contenido personalizado: Adaptamos el temario y los ejercicios prácticos a los objetivos y necesidades reales del proyecto.
  • Calendario flexible: Fechas y horarios adaptados a la agenda de su equipo.
  • Modalidad: Online (en directo), In-company (en sus oficinas) o Híbrida.
Inversión

Precio por grupo privado (formación online) desde 2900 € + IVA*

Contáctenos para obtener un presupuesto exacto y conocer nuestras promociones actuales

Próximos cursos

Categorías Relacionadas