Kafka Summit 2024
Et les nouveautés sont…
Lors du Kafka Summit 2024 de Londres, Confluent a annoncé la disponibilité de Confluent Cloud pour Apache Flink, une solution multicloud pour faciliter le déploiement des charges de travail de traitement de flux. L’entreprise américaine de Big Data a également introduit Tableflow, une fonctionnalité de conversion des sujets Kafka et des schémas associés en tables Apache Iceberg.
Plus de 3 500 participants étaient réunis lors du Kafka Summit qui s’est tenu à Londres les 19 et 20 mars derniers pour découvrir le lot de nouveautés présentées par Confluent autour de la norme ouverte dans le domaine du streaming de données.
Des travaux pratiques pour appréhender Apache Flink
A notamment été présenté lors de la cérémonie d’ouverture, Confluent Cloud, entièrement géré pour Apache Flink. Cette solution multicloud facilite le déploiement des charges de travail de traitement de flux où que soient les données et les applications des clients. Lors de ces deux journées, les participants ont pu appréhender les fondamentaux et le développement d’applications Apache Flink à travers plusieurs sessions et interventions.
Devaris Brown, PDG de Meroxa, est revenu sur la manière de construire des applications avec Flink, via une approche code- first plutôt que SQL, afin de donner un plus grand contrôle aux développeurs sur la logique et la gestion de l’application. Dans le même registre, David Moravek, ingénieur logiciel principal chez Confluent et co- fondateur d’immerok, a démontré qu’il était possible de rendre les applications de streaming de données plus fiables en configurant des checkpoints dans Flink.
Confluent Cloud s’est également doté de Tableflow. En early access, cette fonctionnalité autorise la conversion des sujets Kafka et des schémas associés en tables Apache Iceberg afin d’alimenter des lacs et des entrepôts de données. « Tableflow permet de présenter les données Kafka directement dans une table Iceberg, facilitant l’accès aux données pour des requêtes analytiques dans des plateformes comme Snowflake, Bigquery, Databricks, etc. » , a détaillé Shaun Clowes — Chief Product Officer.
Confluent a également assuré que Kora, le moteur alimentant les services Kafka natif est 16 fois plus rapide que Kafka OSS. Des améliorations ont également été apportées au portefeuille de connecteurs entièrement gérés.
Un meilleur accès aux fonctionnalités de gouvernance
« De nouvelles améliorations ont été dévoilées pour le portefeuille de connecteurs entièrement géré de Confluent, y compris le DNS Forwarding et les points d’accès de sortie privés, ainsi qu’un SLA amélioré de 99,99 %. » , a déclaré Confluent dans son compte rendu. Sur l’aspect gouvernance des flux, l’offre de Confluent est désormais activée par défaut sur tous les environnements avec un SLA ( Service Level Agreement) de disponibilité de 99,99 % pour le Schema Registry, promet l’entreprise. « De plus, nous avons annoncé que la couverture régionale pour la gouvernance des flux s’étendra à toutes les régions de Confluent Cloud, offrant un accès plus fluide aux principales fonctionnalités de gouvernance. » L’entreprise n’en a pas fini avec 2024, puisqu’un prochain sommet est prévu à Bangalore ( Inde) le 2 mai prochain. L’entreprise sera également présente au Current 2024 en septembre.