Les ETLs, Kafka et Confluent avec Fred Cecilia
Rencontre avec Fred Cécilia de chez Confluent, pour parler d'ETLs et de Kafka.
Dans cet épisode pour les mordus de data, Jean-Rémy a rencontré Fred Cecilia, ingénieur chez Confluent. Confluent est l'enterprise spécialistes du système ETL open-source Kafka.
On a parlé open source, parcours de développeur, et Fred répond à toutes nos questions:
- Qu'est-ce qu'un ETL (Extract, Transform, Load) ?
- Comment ça marche et à quoi ça sert ?
- Kafka, c'est quoi ?
- Pourquoi faire appel à une entreprise spécialisée pour mettre en place un ETL ?
- Comment fait-on, concrètement, pour gérer un projet ETL ? Quelles contraintes doit-on prendre en compte avant de commencer ?
- Quelles sont les limites des ETLs classique, et comment les ETLs Streaming tels que Kafka permettent-ils de contourners ces limitations ?
Les spaghettis, c'est bon dans l'assiette, mais pas dans les systèmes d'information