Data lake

Un stockage de données brutes en formats ouverts sur du stockage objet, assez bon marché pour tout garder. Les formats de table y ajoutent transactions et évolution de schéma.

Où on le retrouve dans les vrais systèmes

  • Data lake

    Stocke tout d'abord et décide du schéma à la lecture. Les formats de table comme Iceberg ajoutent transactions et voyage dans le temps ; sans gouvernance, un lac devient vite un marécage.

    En production : Amazon S3 + Apache Iceberg, Delta Lake, Azure Data Lake Storage, Apache Hudi

Regarde-le casser, puis répare-le

Construis une architecture, envoie-lui une journée de trafic et de pannes, et comprends pourquoi elle tient ou cède. Gratuit pour commencer.