Big Data – Comment choisir son moteur
de streaming Big Data open source

S'inscrire maintenant

Complétez ce formulaire pour vous inscrire au webinar.

*required fields

Big Data – Comment choisir son moteur de streaming Big Data open source

On Demand

En matière de big data, l’architecture lambda est de plus en plus challengée par une architecture qui ne traite la donnée qu'avec les moteurs de streaming. Ces moteurs sont nombreux: rien que dans la fondation Apache, citons Storm, Spark Streaming, Flink, Kafka Streams, Beam, Apex. Azure propose aussi Apache Storm as a service, ou un moteur propriétaire Azure Stream Analytics dont il sera aussi brièvement question.

Le projet boontadata a pour objectif de comparer la façon dont on développe sur ces différents frameworks, voir comment ils résolvent des problèmes tels que les messages qui arrivent dans le désordre, en retard ou en double. Il propose un environnement à base de conteneurs docker. Cela permet également d'utiliser des clusters dès la phase de développement et tests, sur une simple VM Azure avec un peu de RAM ;-).

Nous avons développé et utilisé cet environnement pour tester différents moteurs. Nous vous ferons part des résultats que nous avons obtenus. Vous verrez également comment vous faire votre propre opinion en utilisant cet environnement.