Entrar em Contato
 Duração 14 horas

Programa do Curso

Introdução aos Modelos de Visão-Linguagem

  • Visão geral dos VLMs e o seu papel na IA multimodal
  • Arquiteturas populares: CLIP, Flamingo, BLIP, etc.
  • Casos de utilização: pesquisa, legendagem, sistemas autónomos, análise de conteúdos

Preparação do Ambiente de Ajustamento Fino

  • Configuração do OpenCLIP e outras bibliotecas VLM
  • Formatos de conjuntos de dados para pares imagem-texto
  • Pipelines de pré-processamento para entradas de visão e linguagem

Ajustamento Fino do CLIP e Modelos Similares

  • Perda contrastiva e espaços de incorporação conjuntos
  • Prática: ajuste fino do CLIP em conjuntos de dados personalizados
  • Gestão de dados específicos de domínio e multilíngues

Técnicas Avançadas de Ajustamento Fino

  • Utilização de LoRA e métodos baseados em adaptadores para eficiência
  • Ajuste de prompts e injeção de prompts visuais
  • Compromissos entre avaliação zero-shot e ajustada finamente

Avaliação e Benchmarking

  • Métricas para VLMs: precisão de recuperação, BLEU, CIDEr, recall
  • Diagnósticos de alinhamento visual-textual
  • Visualização de espaços de incorporação e classificações incorretas

Implementação e Utilização em Aplicações Reais

  • Exportação de modelos para inferência (TorchScript, ONNX)
  • Integração de VLMs em pipelines ou APIs
  • Considerações de recursos e escalonamento de modelos

Estudos de Caso e Cenários Aplicados

  • Análise de media e moderação de conteúdos
  • Pesquisa e recuperação em comércio eletrónico e bibliotecas digitais
  • Interação multimodal em robótica e sistemas autónomos

Resumo e Próximos Passos

Requisitos

  • Conhecimento de deep learning para visão computacional e NLP
  • Experiência com PyTorch e modelos baseados em transformers
  • Familiaridade com arquiteturas de modelos multimodais

Público-Alvo

  • Engenheiros de visão computacional
  • Desenvolvedores de IA

Formação Empresarial Personalizada

Soluções de formação concebidas exclusivamente para empresas.

  • Conteúdo Personalizado: Adaptamos o programa e os exercícios práticos aos objetivos e necessidades reais do seu projeto.
  • Horário Flexível: Datas e horários adaptados à agenda da sua equipe.
  • Formato: Online (ao vivo), In-Company (em suas instalações) ou Híbrido.
Investimento

Preço por grupo privado, formação online em direto, a partir de 2600 € + VAT*

Entre em contato conosco para obter um orçamento preciso e conhecer nossas promoções mais recentes

Próximas Formações Provisórias

Categorias Relacionadas