DEV Community

Erreur 200

Les ETLs, Kafka et Confluent avec Fred Cecilia

Dans cet épisode pour les mordus de data, Jean-Rémy a rencontré Fred Cecilia, ingénieur chez Confluent. Confluent est l'enterprise spécialistes du système ETL open-source Kafka.

On a parlé open source, parcours de développeur, et Fred répond à toutes nos questions:

  • Qu'est-ce qu'un ETL (Extract, Transform, Load) ?
  • Comment ça marche et à quoi ça sert ?
  • Kafka, c'est quoi ?
  • Pourquoi faire appel à une entreprise spécialisée pour mettre en place un ETL ?
  • Comment fait-on, concrètement, pour gérer un projet ETL ? Quelles contraintes doit-on prendre en compte avant de commencer ?
  • Quelles sont les limites des ETLs classique, et comment les ETLs Streaming tels que Kafka permettent-ils de contourners ces limitations ?

Les spaghettis, c'est bon dans l'assiette, mais pas dans les systèmes d'information

Liens mentionnés

Episode source