MLDM Monday -- Large Scale Data Series

Chia-Chi (c3h3) 0988209252

Wush Wu 0973687970

聚會議程：

1910 ~ 1920 Warm Up

1930 ~ 2000 簡簡單單使用Amazon EMR & PIG 來做巨量資料分析 (David)

說到巨量資料分析,目前的主流不外乎是使用 Hadoop Cluster 來做 Map Reduce,但是一想到Hadoop 繁雜的設定,跟要去哪邊找這麼多機器做Cluster 等問題, 就足以讓人打退堂鼓. 而當環境一切就緒, 要懂得如何撰寫 Map Reduce 程式, 才能開始著手分析資料, 又成為讓人頭痛的問題

所幸, Amazon 提供 Elastic Map Reduce 的雲端服務, 讓使用者彈指之間便可產生不同運算需求的Hadoop Cluster; 透過Pig Script 即可快速完成 Map Reduce 程式, 透過兩項利器, 讓巨量資料運算變得相當容易. 本次的Sharing 將示範如何啟用Amazon EMR 跟如何在上面撰寫Pig Script 讓你快速入門巨量資料分析