Warsztaty: Wstęp do Big Data: Pozyskiwanie Danych (aka Data Ingestion)

W ramach warsztatów nauczymy się pozyskiwać dane z plików, JMS i baz relacyjnych przy użyciu narzędzi z dwóch popularnych platform Hadoop'owych - Cloudera ( Flume / Sqoop) i Hortonworks HDP (NiFi) i transportować je do Hadoop'a. Przy okazji dowiemy się jak wybierać formaty składowania danych w Data Lake zależnie od przewidywanych zastosowań, stosować skrypty wewnątrz NiFi, a także zapisywać i wykonywać joby Sqoop'owe.

Prelekcja przed warsztatami: https://www.meetup.com/Java-User-Group-Lodz/events/235596525/