5° Meetup Engenharia de Dados

This is a past event

88 people went

Location image of event venue

Details

Bem vind@ ao 5° Meetup Engenharia de Dados!

Agenda

1° palestra:
"Escalando aplicações para processamento de dados na AWS com Spark"
Tiago Miserani - Engenheiro de Dados | Desenvolvedor @ Cinnecta

Bio:

Formado em Ciência da Computação pela Universidade Federal de Alfenas e pós-graduado em Eng. de Software pela PUC-Minas. Há mais de 10 anos atua com análise e desenvolvimento de sistemas.
Trabalha com engenharia de dados desde 2017 na Cinnecta com o propósito de levar dados relevantes e de qualidade para todos.

Descrição:

Vamos discutir a evolução de uma arquitetura para coleta, processamento e armazenamento de grande volume de dados. E também sobre como conseguimos trabalhar com 5TB dados/mês usando kinesis, S3, Glue, EMR, Redis, DynamoDB, Elasticsearch, RDS (MySQL, PostGIS), SQS, AWS Lambda, AWS Beanstalk, Airflow e muito Apache Spark.

2° palestra
"Conhecendo Google Cloud Dataflow e suas aplicações"
Bruno Liberal - Engenheiro de Dados | Desenvolvedor @ CI&T

Bio:

Há quatro anos atuando como desenvolvedor na CI&T e mais recentemente se especializando em tecnologias Google Cloud, Bruno é entusiasta da plataforma e suas aplicações em Data Science principalmente utilizando Spark, Hadoop, BigQuery e combinando produtos GCP de gerenciamento, análise e visualização para Big Data.