Gracias por enviar su consulta! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Gracias por enviar su reserva! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Duración 14 horas
Temario del curso
Introducción al Aprendizaje por Refuerzo a partir de Retroalimentación Humana (RLHF)
- Qué es el RLHF y por qué es importante.
- Comparación con los métodos de ajuste fino supervisado.
- Aplicaciones del RLHF en los sistemas de IA modernos.
Modelado de Recompensas con Retroalimentación Humana
- Recopilación y estructuración de la retroalimentación humana.
- Construcción y entrenamiento de modelos de recompensa.
- Evaluación de la efectividad de los modelos de recompensa.
Entrenamiento con Optimización de la Política Proximal (PPO)
- Vista general de los algoritmos PPO para RLHF.
- Implementación de PPO con modelos de recompensa.
- Ajuste fino iterativo y seguro de modelos.
Ajuste Fino Práctico de Modelos de Lenguaje
- Preparación de conjuntos de datos para flujos de trabajo de RLHF.
- Ajuste fino práctico de un LLM pequeño utilizando RLHF.
- Desafíos y estrategias de mitigación.
Escala del RLHF a Sistemas de Producción
- Consideraciones de infraestructura y capacidad de cómputo.
- Garantía de calidad y bucles de retroalimentación continua.
- Mejores prácticas para la implementación y el mantenimiento.
Consideraciones Éticas y Mitigación de Sesgos
- Abordaje de riesgos éticos en la retroalimentación humana.
- Estrategias de detección y corrección de sesgos.
- Aseguramiento de la alineación y la seguridad de las salidas.
Estudios de Caso y Ejemplos del Mundo Real
- Estudio de caso: Ajuste fino de ChatGPT con RLHF.
- Otras implementaciones exitosas de RLHF.
- Lecciones aprendidas e información del sector.
Requerimientos
- Comprensión de los fundamentos del aprendizaje supervisado y del aprendizaje por refuerzo.
- Experiencia en ajuste fino de modelos y arquitecturas de redes neuronales.
- Familiaridad con la programación en Python y marcos de aprendizaje profundo (p. ej., TensorFlow, PyTorch).
Público Objetivo
- Ingenieros de aprendizaje automático.
- Investigadores de IA.
Formación Corporativa a Medida
Soluciones de formación diseñadas exclusivamente para empresas.
- Contenido personalizado: Adaptamos el temario y los ejercicios prácticos a los objetivos y necesidades reales del proyecto.
- Calendario flexible: Fechas y horarios adaptados a la agenda de su equipo.
- Modalidad: Online (en directo), In-company (en sus oficinas) o Híbrida.
Precio por grupo privado (formación online) desde 2900 € + IVA*
Contáctenos para obtener un presupuesto exacto y conocer nuestras promociones actuales