Python Bordeaux #6 : microservices et luigi

Tout d'abord bonne année à toutes et à tous !

Nous commençons cette année par un chaleureux meetup à propos de microservices et de traitement de données.

• Microservices avec zmq

https://a248.e.akamai.net/secure.meetupstatic.com/photos/event/a/c/8/7/600_457304167.jpeg

A la découverte de 0MQ (ZéroMQ). 0MQ est une petite librairie qui permet de connecter du code depuis n'importe quel langage. Il transporte des messages en utilisant différents protocoles (IPC, TCP, TIPC, multicast) et distribue ces messages selon différentes méthodes (pub-sub, push-pull, and router-dealer).

Au travers d'un exemple très simple nous verrons comment connecter différents services ensemble avec 0MQ.

• Traitement de données avec luigi : luigi (https://github.com/spotify/luigi) est un projet Open Source porté par spotify. Il est très facile à utiliser et pratique quand on souhaite automatiser des traitements de données qui peuvent avoir des dépendances entre eux. Il permet aussi, à partir d'une interface Web, de visualiser les traitements en cours. La présentation se finira par une petite démonstration dont le code sera disponible après le meetup.

N'hésitez pas à mettre des liens d'articles, projets ou vidéos que vous avez vus récemment dans la section What's Up du framapad https://annuel.framapad.org/p/py-bdx

Comme à l'accoutumée, nous finirons ce meetup par un sympathique apéro.