118º Meetup AWS UG SP [Presencial] GenAI em escala + Serverless na prática

# GenAI em escala + Serverless na prática

Nesta edição do AWS User Group São Paulo, teremos uma noite com dois temas super atuais e complementares:

• IA Generativa aplicada à avaliação de sistemas conversacionais em escala (com foco em qualidade x custo)
• Modernização de arquitetura com serverless, saindo de uma aplicação em EC2 para uma arquitetura mais resiliente e escalável

Se você trabalha com GenAI, arquitetura cloud, modernização de aplicações, observabilidade de qualidade ou engenharia de software na AWS, este meetup foi feito para você.

***

## Palestra 1

### Além da Amostragem: Tornando Viável a Avaliação de Cobertura Total em IA Conversacional

Avaliar sistemas conversacionais multiagentes em escala apresenta um desafio real: como manter qualidade de avaliação sem tornar o custo inviável. Embora LLMs de ponta funcionem muito bem como juízes automáticos, seu uso contínuo para avaliar milhares de conversas pode se tornar economicamente impraticável.
Nesta sessão, Guto e Harry apresentam um framework que utiliza Small Language Models (SLMs) para tornar a avaliação economicamente viável em larga escala, com foco em três pilares:

• criação de datasets sintéticos
• benchmarking de modelos
• estratégias sistemáticas de melhoria de performance

A abordagem combina geração de conversas sintéticas com avaliação multi-métrica via LLM-as-a-Judge, seguida por comparação entre diferentes arquiteturas de modelos para entender os trade-offs de custo x qualidade. Por fim, serão exploradas estratégias como ensemble methods, prompt engineering e fine-tuning supervisionado de modelos mais econômicos para alcançar qualidade de avaliação próxima a modelos frontier.

Ao final, você vai entender como selecionar a melhor combinação de modelo + estratégia para o seu cenário, equilibrando metas de acurácia com restrições de custo em diferentes métricas e casos de uso.

### Palestrantes (mini bios)

Guto Leoni Santos é Cientista de Dados no Generative AI Innovation Center (LATAM). Possui 7 anos de experiência no desenvolvimento de aplicações com aprendizado de máquina e deep learning. Atualmente, atua no desenvolvimento de soluções com IA Generativa para geração de texto, imagens e aplicações multiagentes.
Harry Cavanagh é Data Scientist no GENAIIC da AWS, com PhD em IA e Biofísica pelo Imperial College London. Ex-membro da startup Solve Intelligence (Y Combinator), onde trabalhou com patentes usando IA Generativa, e ex-cientista na Illumina (Singapura), aplicando deep learning em genética humana. É apaixonado por construir sistemas de IA com impacto real no mundo.

***

## Palestra 2

### Se funciona, tá bom? Como serverless pode revolucionar sua aplicação

Você construiu sua primeira aplicação em EC2. Funciona... até não funcionar mais. O tráfego aumenta, a instância trava ou falha, e você está desesperado tentando escalar. Soa familiar?
Nesta sessão-jogo (surpresa 👀), vamos desenhar juntos uma aplicação típica em EC2 que não escala bem e evoluí-la, passo a passo, para uma arquitetura serverless. Você vai ver onde o EC2 sofre e como serverless resolve problemas de escalabilidade, operação e resiliência — sem precisar acordar às 3h da manhã.

### Palestrantes

Giovana Armani começou sua jornada técnica como desenvolvedora de software na Amazon. Depois de 4 anos na área, hoje atua como Developer Advocate na AWS, criando conteúdo educacional sobre conceitos técnicos fundamentais e melhores práticas de desenvolvimento na nuvem.
Marcelo Palladino atua como Developer Advocate na AWS, onde trabalha para conectar desenvolvedores e empresas à inovação em nuvem, promovendo boas práticas de engenharia, arquitetura moderna e adoção de tecnologias emergentes.

***

## Informações IMPORTANTES!!!!!!

Em caso de inscrição e desistência, cancele sua participação no Meetup para liberar a vaga para a próxima pessoa da fila.
É obrigatório informar seu RG na confirmação de presença.
Inscrições sem o RG serão invalidadas.
Também é obrigatório informar o número de telefone no cadastro.
Não compartilharemos nenhuma informação com terceiros; os dados serão utilizados apenas para confirmação no dia do evento.

***

## Como chegar

Endereço oficial:
Amazon Web Services, Edifício JK
Av. Chedid Jafet, 200 - Vila Olímpia, São Paulo - SP, 04551-065, Brazil
Referência:
Região da Vila Olímpia (Edifício JK).

***

Os encontros do AWS User Group São Paulo seguem o Código de Conduta, disponível em:
https://github.com/AWSUserGroupSP/codigo-de-conduta
Ao confirmar sua participação, você concorda automaticamente com o código.
#AWS #AWSCommunity #AWSUGSP

***

## Organizadores

• Willian Peixoto
• Vanessa Santos
• Amanda S. de Souza
• Leticia Massae
• Caiuã Lorio
• Vinícius Matos