ITFabricLab ouvre bientôt : les labs, simulations et examens ne sont pas encore accessibles. Vous pouvez parcourir le catalogue et créer votre compte pour être prévenu de l'ouverture.
ITFabricLab — Learn. Build. Troubleshoot. Connect.
Se connecter

Data

Plateforme data moderne (ELT + entrepôt + BI)

Ingestion Airbyte/Kafka, stockage lakehouse, transformations dbt orchestrées par Airflow, qualité de données et tableaux de bord.

CDCmodèles
Sources (ERP, CRM, apps)
Airbyte
Kafka (événements)
Lakehouse bronze/silver/gold
dbt
Airflow
Qualité (GE)
BI (Superset)
Plateforme data moderne (ELT + entrepôt + BI) : Sources (ERP, CRM, apps), Airbyte, Kafka (événements), Lakehouse bronze/silver/gold, dbt, Airflow, Qualité (GE), BI (Superset)

Chaîne de valeur de la donnée en ELT :

  1. Ingestion : connecteurs Airbyte pour les bases et SaaS, Kafka pour les événements temps réel.
  2. Stockage : zone brute (bronze), nettoyée (silver) et métier (gold) dans un lakehouse Delta ou un entrepôt ClickHouse/Snowflake.
  3. Transformation : modèles dbt testés (unicité, non-nullité, relations), modélisation en étoile avec dimensions à historique (SCD2).
  4. Orchestration : DAG Airflow avec dépendances, reprises et SLA.
  5. Qualité & gouvernance : Great Expectations, catalogue, gestion des données personnelles (RGPD).
  6. Restitution : Superset/Power BI sur des KPI définis avec les métiers.