Meetup DataLab: Pipelines de Dados (com transmissão ao vivo)


Detalhes
Bem-vindos pessoal!
Somos o laboratório de dados da Serasa Experian, unidade de pesquisa e desenvolvimento que explora diversos tópicos, como dados alternativos, processamento de linguagem natural, processamento de imagens e modelagem de crédito.
O primeiro meetup de 2020 vai ser sobre Pipeline de Dados!
Nesse encontro, vamos contar com a participação do speaker convidado, Rodrigo Vieira.
Palestra - Utilizando Airflow em Pipeline de Dados
Esta sessão tem como objetivo compartilhar como a Onefootball está usando o Airflow para resolver desafios de engenharia de dados, beneficiando-se dos Hooks e Operadores da comunidade para simplificar os pipelines de dados.
Além disso, Rodrigo vai falar sobre a extensão de recursos do Airflow, aproveitando-se do Kubernetes Operator para encapsular pipeline de dados em imagens docker para executá-los no Kubernetes.
Airflow é uma plataforma para criar, programar e monitorar programaticamente workflows, é extensível o suficiente para qualquer empresa definir integrações personalizadas.
O projeto inicialmente desenvolvido e mantido pelo Airbnb, hoje é mantido pela Apache Foundation e pode ajudar em sua jornada de dados.
Sobre o palestrante:
Rodrigo Vieira Del Monte é Data Engineer na Onefootball. Nós ultimos 10 anos, ele esteve envolvido na implementação de projetos open source para órgãos governamentais, consultorias e fintechs do mercado brasileiro. Sempre disposto a criar ambientes econômicos e diretos para pequenas equipes, construídos por automação.
Não pode vir até o DataLab? Assista ao vivo pelo link: https://viz-wcs.voxeldigital.com.br/?CodTransmissao=730336
Aguardamos vocês :)
Agenda:
18h30 - Recepção
19h00 - Rodrigo
20h00 - Encerramento

Meetup DataLab: Pipelines de Dados (com transmissão ao vivo)