Wstęp do Big Data: Pozyskiwanie Danych (aka Data Ingestion)

O prelekcji:

Pierwszym problemem, jaki spotykamy przy budowie systemów Big Data, jest pozyskiwanie danych, które mamy przetwarzać. W grę wchodzą wszelkie typy źródeł danych: od plików i logów aplikacji, przez messaging aż po bazy danych. Podczas wykładu przedstawione zostaną popularne narzędzia do data ingestion na platformie Hadoop:

• Flume- Sqoop - Logstash- NiFi

Padnie też parę słów o sposobach składowania danych na HDFS i podstawach data warehousingu.

6 grudnia będą warsztaty - https://www.meetup.com/Java-User-Group-Lodz/events/235596552/.

Prelegent:
Kamil Owczarek (GFT)