Past Meetup

247. WJUG - Journey through real time data distribution with Kafka pipelines

This Meetup is past

79 people went

Location image of event venue

Details

Serdecznie zapraszamy na 247. spotkanie Warszawa JUG, które odbędzie się 5. marca o godzinie 18:15 w sali 3180 (2. piętro) Wydziału Matematyki, Informatyki i Mechaniki Uniwersytetu Warszawskiego przy ulicy Banacha 2.

Agenda:

18:15 - Konrad Szatan - Journey through real time data distribution with Kafka pipelines

Opis prelekcji:
In this new data intensive world
data distribution became one of main concerns in systems world wide. With message brokers like Kafka we have proper tooling to achieve desired goal, but are we doing it good enough?

In this session I want to tell you our story about using various databases changelogs as continuous source of data. I will describe how we have on-boarded Kafka Connect and Kafka Streams to stream real time changes wherever we needed them. What problems have we encountered during that journey? What have we learnt from building data distribution platform and what we would had changed as take away for you. All of that deployed to Kubernetes and strictly monitored to ensure our colleagues that their data are safe and up to date.

***
Ogłoszenia:

* WJUG rozpoczął kampanię #call4people, w nadziei do zachęcenia uczestników do zgłaszania nowych prezentacji. Formularz zgłoszeniowy jest dostępny pod adresem https://warszawajug.typeform.com/to/L5ydtp . Jeżeli potrzebujecie pomocy lub konsultacji - odezwijcie się do jednego z organizatorów podczas spotkania. Bardzo chętnie wam pomogą.

* Po spotkaniu idziemy na integrację do:
Drugie Dno Ochota, Tarczyńska 5/9,[masked] Warszawa
lub
Pub Lolek, Rokitnicka 20, Pola Mokotowskie

Tagi:
#deployment #microservices