Alan Poe appliqué au data streaming - "Toutes choses sont bonnes ou mauvaises par comparaison"

13/10/2022 : 16:45 - 17:30 | Showroom | Julien Cognet

J’ai eu l’occasion de mettre en œuvre :

4 solutions techniques différentes de data streaming (Apache Nifi, Apache Flink, Apache Spark Streaming et Apache Kafka Streams)
3 solutions de stockage de forte volumétrie (Apache Cassandra, TimescaleDB et Oracle DB)
sur 3 projets différents de télécollecte IoT et de traitements de données Big Data.

Cela représente 8 ans de recul sur le traitement de données de forte volumétrie. Cette expérience s’est construite “grâce” à des dizaines de problèmes de performances, de cohérence des données, d’engorgement de nos systèmes distribués… J’ai donc de belles histoires techniques à vous raconter sur le pire et le meilleur de ces différentes solutions. Vous voulez savoir quelle est la meilleure et celle que je vous recommande ? Je suis sûr que vous connaissez la réponse courte “ça dépend”. Pour la réponse longue, il faudra venir me voir…

REX
BigData & AI