LLM-Evaluation: Agentes e LLMs em Organizações

SOBRE O EVENTO

O avanço da IA generativa ampliou a presença de agentes inteligentes e modelos de linguagem em produtos, operações, atendimento, pesquisa, automação e tomada de decisão. Esse movimento também trouxe novas demandas relacionadas à avaliação, confiabilidade, observabilidade e governança desses sistemas em contexto organizacional.

O evento LLM-Evaluation: Agentes e LLMs em Organizações foi estruturado para discutir métodos, critérios e práticas aplicadas para avaliação de LLMs e workflows agentic em ambientes reais.

Ao longo da imersão, serão explorados temas como métricas qualitativas e quantitativas, avaliação humana, benchmarking, tracing, monitoramento, segurança, alucinação, RAG, engenharia de prompts e arquiteturas baseadas em agentes.

O encontro busca aproximar perspectivas técnicas, estratégicas e operacionais, considerando os desafios contemporâneos da adoção de IA em escala.

OBJETIVOS

Ao participar do evento, você irá:

• Compreender fundamentos de avaliação de LLMs e agentes
• Analisar critérios de qualidade para sistemas de IA generativa
• Explorar estratégias de observabilidade e tracing
• Discutir riscos, governança e confiabilidade
• Entender desafios de avaliação em pipelines com RAG e agentes
• Conhecer aplicações organizacionais e casos práticos

PÚBLICO-ALVO

Evento voltado para profissionais e estudantes das áreas de:

• Inteligência Artificial
• UX e Design Conversacional
• Produto
• Engenharia de Software
• Pesquisa
• Data/ML
• Inovação
• Tecnologia
• Liderança e estratégia digital

CONTEÚDOS ABORDADOS

• Fundamentos de LLM-Evaluation
• Métricas qualitativas e quantitativas
• Avaliação humana e benchmarking
• Prompt Engineering e avaliação contextual
• RAG e pipelines híbridos
• Agentes autônomos e workflows agentic
• Observabilidade e tracing
• Monitoramento de performance e custos
• Segurança e mitigação de alucinação
• Governança e confiabilidade organizacional
  

MODALIDADE

Evento online e ao vivo.

CERTIFICADO

Os participantes receberão certificado de participação correspondente à carga horária do evento.

PARA QUEM ESTE EVENTO É RELEVANTE

• Profissionais implementando IA em produtos e operações
• Times estruturando agentes e workflows inteligentes
• Pesquisadores e especialistas em IA generativa
• Pessoas interessadas em avaliação, governança e confiabilidade de LLMs
• Lideranças avaliando adoção organizacional de IA

INFORMAÇÕES IMPORTANTES

• O acesso será enviado aos participantes inscritos.
• Recomenda-se conexão estável com a internet.
• O evento poderá incluir demonstrações e discussões técnicas.

INSCRIÇÕES

As vagas são limitadas conforme capacidade da organização e gestão do evento na plataforma.