O avanço da IA generativa ampliou a presença de agentes inteligentes e modelos de linguagem em produtos, operações, atendimento, pesquisa, automação e tomada de decisão.

Esse movimento trouxe novas demandas relacionadas à avaliação, confiabilidade, observabilidade e governança desses sistemas em contexto organizacional.

O evento LLM-Evaluation: Agentes e LLMs em Organizações foi estruturado para discutir métodos, critérios e práticas aplicadas para avaliação de LLMs e workflows agentic em ambientes reais.

Ao longo da imersão, serão explorados temas como:

• Métricas qualitativas e quantitativas  

• Avaliação humana  

• Benchmarking  

• Tracing e monitoramento  

• Segurança e mitigação de alucinação  

• RAG  

• Engenharia de prompts  

• Arquiteturas baseadas em agentes  

O encontro busca aproximar perspectivas técnicas, estratégicas e operacionais relacionadas à adoção organizacional de IA em escala.

OBJETIVOS

Ao participar do evento, você irá:

• Compreender fundamentos de avaliação de LLMs e agentes  

• Analisar critérios de qualidade para sistemas de IA generativa  

• Explorar estratégias de observabilidade e tracing  

• Discutir riscos, governança e confiabilidade  

• Entender desafios de avaliação em pipelines com RAG e agentes  

• Conhecer aplicações organizacionais e casos práticos  

PÚBLICO-ALVO

Evento voltado para profissionais e estudantes das áreas de:

• Inteligência Artificial  

• UX e Design Conversacional  

• Produto  

• Engenharia de Software  

• Pesquisa  

• Data/ML  

• Inovação  

• Tecnologia  

• Liderança e estratégia digital  

CONTEÚDOS ABORDADOS

• Fundamentos de LLM-Evaluation  

• Métricas qualitativas e quantitativas  

• Avaliação humana e benchmarking  

• Prompt Engineering e avaliação contextual  

• RAG e pipelines híbridos  

• Agentes autônomos e workflows agentic  

• Observabilidade e tracing  

• Monitoramento de performance e custos  

• Segurança e mitigação de alucinação  

• Governança e confiabilidade organizacional  

MODALIDADE

Evento online e ao vivo.

CERTIFICADO

Os participantes receberão certificado correspondente à carga horária do evento.

INFORMAÇÕES IMPORTANTES

• O acesso será enviado aos participantes inscritos  

• Recomenda-se conexão estável com a internet  

• O evento poderá incluir demonstrações e discussões técnicas