Software Engineering mit Spark – QS im Big Data (Adidas: anmelden bis 14.6.!!)

Hi Folks,

the next talk will be at Adidas in Herzogenaurach again, but in German this time. Location is not finally fixed yet, but you need to register with your name to this event until Thursday, June 14 in order to get through security. Adidas security needs the list with named participants on June 15.

Regards, Jens

====
Nun zum Inhalt auf deutsch:

Beim Entwickeln von Big Data Lösungen mit Apache Spark steht häufig erst einmal das parallelisierte Verarbeiten von großen Datenmengen auf einem Rechencluster im Vordergrund. Mit steigender Komplexität der Anwendungen wird die Qualitätssicherung immer wichtiger. Setzt man von Anfang an eine richtige Architektur und Prinzipien aus dem Software Engineering ein, können dabei langfristig wartbare Lösungen entstehen.

Agenda:

• Kurze Intro zu Apache Spark, Architektur und DAGs
• Architektur und Testen
• Externer vs. interner Workflow
• Dataframe API als Teamsprache
• Clean Coding, Release Management, Template

Vortragender:

Dr. Daniel Bast beschäftigt sich seit 10 Jahren mit Data Analytics und war sowohl als Data Scientist als auch Software Engineer und Technical Lead für Big Data Projekte tätig. Heute arbeitet er als Senior Solution Architect im Bereich Data Analytics bei der Adidas AG und ist für dort die Architektur und Roadmap der Big Data Plattformen zuständig. Er ist Mitglied der Deutschen Physikalischen Gesellschaft und ICPMSB Certified Professional for Medical Software - Foundation Level und iSAQB® Certified Professional for Software Architecture - Foundation Level.