Pipelines de Données et ETL

AA

Apache Airflow

4.7/5.01 évaluation vérifiée

Gratuit

Plateforme open-source pour créer, planifier et surveiller des flux de travail complexes en Python.

• Définition des pipelines en code Python pur sans fichiers de configuration XML.
• Architecture modulaire hautement évolutive prenant en charge plusieurs exécuteurs.
• Interface web complète pour inspecter les journaux et surveiller les états.

176étoiles sur GitHub

PR

Prefect

4.6/5.01 évaluation vérifiée

Gratuit·Open Source·Apache-2.0

Orchestration de flux de travail avec Python pour l'ingénierie des données et l'IA.

• Définition native des flux en Python sans langages spécifiques complexes.
• Architecture d'exécution durable avec nouvelles tentatives automatiques et récupération d'erreurs.
• Noyau open-source solide avec options d'auto-hébergement et de déploiement cloud.

24.1kétoiles sur GitHub

DA

Dagster

4.6/5.01 évaluation vérifiée

Freemium·Open Source·Apache-2.0

Plateforme d'orchestration de données axée sur les actifs pour l'ingénierie moderne et l'IA.

• Approche centrée sur les actifs de données plutôt que sur de simples tâches planifiées
• Excellente visibilité de bout en bout sur le lignage et la qualité des données
• Noyau open source solide avec options cloud gérées

16.4kétoiles sur GitHub

AI

Airbyte

4.6/5.01 évaluation vérifiée

Freemium

Plateforme de mouvement de données open source pour pipelines ELT et agents IA

• Catalogue étendu de plus de 700 connecteurs prêts pour la production
• Version open source disponible pour un déploiement auto-hébergé sans restriction
• Architecture extensible qui simplifie la création de connecteurs personnalisés

22.3kétoiles sur GitHub

AS

Astronomer

4.5/5.01 évaluation vérifiée

Payant·$250/mois·Apache-2.0

Plateforme d'orchestration de données et de pipelines IA propulsée par Apache Airflow.

• Runtime optimisé surpassant les performances du planificateur standard d'Apache Airflow.
• Prise en charge intégrée des flux de travail orientés intelligence artificielle.
• Capacités de reprise après sinistre avec un RPO inférieur à 15 minutes.

459étoiles sur GitHub

DL

dbt Labs

4.5/5.01 évaluation vérifiée

Freemium·Open Source·Apache-2.0

Le standard ouvert pour la transformation de données moderne et prête pour l'IA via SQL.

• Transformation de données en SQL avec contrôle de version natif
• Tests intégrés et validation locale avant le déploiement en production
• Traçabilité interactive et visualisation claire des dépendances entre modèles

14.1kétoiles sur GitHub

PO

Polar

4.5/5.01 évaluation vérifiée

Freemium

Plateforme de facturation et Merchant of Record pour les entreprises de logiciels IA.

• Architecture spécialisée pour les métriques IA comme les tokens et le GPU.
• Le statut de Merchant of Record gère la conformité fiscale mondiale.
• Flux de migration simplifiés depuis les configurations Stripe existantes.

DA

DataHub

4.5/5.01 évaluation vérifiée

Freemium·Open Source·Apache-2.0

Plateforme de contexte de données et de gouvernance pour les équipes d'ingénierie et d'IA

• Graphe de contexte unifié connectant traçabilité, qualité et métadonnées en temps réel
• Forte adoption par la communauté open-source avec des milliers d'organisations actives
• Architecture extensible conçue pour s'intégrer aux flux de travail des agents d'IA

12.9kétoiles sur GitHub

FI

Fivetran

4.4/5.01 évaluation vérifiée

Freemium

Plateforme automatisée de mouvement et de synchronisation de données pour l'analytique.

• Catalogue étendu avec des centaines de connecteurs natifs pour sources SaaS et bases de données.
• Gestion automatisée des modifications de schéma dans les sources.
• Architecture entièrement gérée qui réduit l'effort d'ingénierie sur les pipelines.

GE

Great Expectations

4.4/5.01 évaluation vérifiée

Gratuit·Open Source·Apache-2.0

Framework open source de qualité des données pour tester et documenter les pipelines.

• Génération automatique de documentation visuelle des données au format HTML.
• Intégration native avec Python et des environnements de type notebook comme Jupyter.
• Support étendu pour divers moteurs de stockage et moteurs SQL.

11.9kétoiles sur GitHub

WI

Windsor.ai

4.4/5.01 évaluation vérifiée

Freemium

Plateforme d'intégration de données sans code connectant plus de 350 sources à des destinations BI et IA.

• Prend en charge plus de 350 sources de données et plusieurs destinations analytiques
• Intégration native avec les assistants IA via des protocoles standard
• Permet un nombre illimité d'utilisateurs sur tous les abonnements

CO

Coupler.io

4.4/5.01 évaluation vérifiée

Freemium

Plateforme d'intégration de données sans code et analyse IA pour synchroniser les sources d'entreprise.

• Connectivité avec plus de 400 sources de données d'entreprise.
• Capacités de transformation et de fusion de données sans code.
• Intégration native avec les entrepôts de données modernes et assistants IA.