Entrar em Contato
 Duração 14 horas

Programa do Curso

Introdução ao Aprendizado por Reforço a partir de Feedback Humano (RLHF)

  • O que é o RLHF e porquê é importante
  • Comparação com métodos de afinação supervisionada
  • Aplicações do RLHF em sistemas de IA modernos

Modelação de Recompensa com Feedback Humano

  • Coleta e estruturação do feedback humano
  • Construção e treino de modelos de recompensa
  • Avaliação da eficácia dos modelos de recompensa

Formação com Otimização de Política Próxima (PPO)

  • Visão geral dos algoritmos PPO para RLHF
  • Implementação do PPO com modelos de recompensa
  • Afinação iterativa e segura de modelos

Afinação Prática de Modelos de Linguagem

  • Preparação de conjuntos de dados para fluxos de trabalho de RLHF
  • Afinação prática de um pequeno LLM utilizando RLHF
  • Desafios e estratégias de mitigação

Escalação do RLHF para Sistemas de Produção

  • Considerações de infraestrutura e computação
  • Garantia de qualidade e ciclos de feedback contínuos
  • Boas práticas para implantação e manutenção

Considerações Éticas e Mitigação de Viés

  • Abordagem dos riscos éticos no feedback humano
  • Estratégias de deteção e correção de viés
  • Garantia de alinhamento e saídas seguras

Estudos de Caso e Exemplos do Mundo Real

  • Estudo de caso: Afinação do ChatGPT com RLHF
  • Outras implantações bem-sucedidas de RLHF
  • Lições aprendidas e perspetivas do setor

Requisitos

  • Conhecimento dos fundamentos do aprendizado supervisionado e do aprendizado por reforço
  • Experiência na afinação de modelos e em arquiteturas de redes neurais
  • Familiaridade com programação em Python e frameworks de deep learning (ex.: TensorFlow, PyTorch)

Público-Alvo

  • Engenheiros de machine learning
  • Pesquisadores de IA

Formação Empresarial Personalizada

Soluções de formação concebidas exclusivamente para empresas.

  • Conteúdo Personalizado: Adaptamos o programa e os exercícios práticos aos objetivos e necessidades reais do seu projeto.
  • Horário Flexível: Datas e horários adaptados à agenda da sua equipe.
  • Formato: Online (ao vivo), In-Company (em suas instalações) ou Híbrido.
Investimento

Preço por grupo privado, formação online em direto, a partir de 2600 € + VAT*

Entre em contato conosco para obter um orçamento preciso e conhecer nossas promoções mais recentes

Próximas Formações Provisórias

Categorias Relacionadas