La révolution du traitement des données est en marche avec l'arrivée de Spark 4 et Apache Iceberg ! Cette présentation vous démontrera comment cette combinaison technologique devient rapidement le nouveau standard incontournable pour les projets data modernes.

Au programme :

• Les nouveautés majeures de Spark 4 : découvrez les améliorations significatives en termes de performances, notamment avec le nouveau moteur de requêtes, le support natif des lacs de données et l'optimisation automatique des requêtes.
• Apache Iceberg démystifié : plongez dans cette table format nouvelle génération qui révolutionne la gestion des données dans les lacs de données. Nous aborderons ses fonctionnalités clés comme le Time Travel, le Schema Evolution et le partitionnement dynamique.
• Cas d'usage concrets : à travers des démonstrations pratiques, nous verrons comment implémenter un pipeline de données moderne combinant ces technologies, avec un focus particulier sur les bonnes pratiques et les pièges à éviter.
• Performance et scalabilité : découvrez comment cette stack permet d'obtenir des performances exceptionnelles même sur des volumes de données massifs, tout en maintenant une cohérence ACID.

RUM : Real User Monitoring

OTEL: Open Telemetry

Sans une visibilité unifiée sur l'ensemble de votre infrastructure, il peut être difficile d'investiguer les dépendances backend lors du dépannage de problèmes front, ou de suivre la source des défaillances de base de données qui proviennent de mauvaises requêtes du navigateur. Une visibilité complète vous donne les informations nécessaires pour identifier et résoudre rapidement les incidents.

Vous pouvez désormais connecter vos données utilisateur avec les traces correspondantes, vous donnant une visibilité unifiée et de bout en bout sur les requêtes alors qu'elles se déplacent à travers les couches de votre infrastructure. Cela fournit un contexte riche autour des problèmes et vous aide à localiser plus facilement les problèmes backend qui ont entraîné une erreur visible par l'utilisateur, ou à identifier la portée des utilisateurs affectés par un problème dans votre infrastructure, qu'il s'agisse d'un point d'accès spécifique de votre application ou d'une région géographique.