Fivetran et dbt : pourquoi l'avenir des données doit être ouvert et fiable

Depuis le début, il est apparu clairement que Fivetran et dbt Labs partageaient la même vision : fournir aux équipes chargées des données une base ouverte et interopérable alliant la fiabilité de l'infrastructure gérée à la flexibilité des normes ouvertes. Cette conviction a guidé chaque étape de notre collaboration, et aujourd'hui, nous sommes fiers de partager cette vision publiquement alors que Fivetran et dbt Labs conviennent d'unir leurs forces pour établir la norme en matière d'infrastructure de données ouvertes.

Cette vision était hors de portée pour la plupart des entreprises. Malgré des années d'investissement, les silos de données persistants et la sous-utilisation persistent IA des pilotes qui n'ont pas dépassé le stade de l'expérimentation.

Deux forces font que c'est le moment de briser ce schéma :

1. L'IA est passée de l'expérimentation à l'exécution. Elle permet désormais de prendre des décisions dans des domaines où la précision est vitale et la transparence est requise.
2. Les normes ouvertes sont passées d'idéaux techniques à la base de l'infrastructure de données d'entreprise. Des normes telles que formats de tableaux ouverts et les métadonnées partagées permettent désormais aux données de vivre une seule fois et de fonctionner partout, en découplant le stockage du calcul et en permettant une interopérabilité fiable entre les clouds, les moteurs et les catalogues. L'industrie s'est en effet alignée sur des principes communs et des cadres interopérables.

C'est le contexte pour l'intégration de Fivetran et de dbt Labs. Le mandat est clair. Mouvement des données, transformation, métadonnées, activation, et la sémantique doit garantir une fiabilité mesurable, une cohérence de bout en bout et la liberté de choix attendue par chaque équipe chargée des données. Construite sur des normes ouvertes et des métadonnées partagées, cette infrastructure fournit à l'IA une base gouvernée et portable sur laquelle elle peut compter.

Pourquoi maintenant

Fivetran et dbt Labs ont plus de 1 500 clients commerciaux communs, et Fivetran gère plus de 16 000 projets dbt chaque semaine. Ils nous ont montré ce qui fonctionne, quelles sont les opportunités qui subsistent et pourquoi l'avenir exigera une infrastructure de données unifiée et ouverte.

Fivetran et dbt ancrent chacun des éléments essentiels de la pile de données moderne, reflétant une expertise approfondie en matière de mouvement et de transformation. Fivetran a établi la norme en matière de transfert automatique de données à grande échelle, avec un temps de disponibilité publié de 99,9 %. Sa réplication à haut volume et ses plus de 700 connecteurs gérés capturent les changements opérationnels avec un minimum de labeur et une fraîcheur prévisible. dbt a créé la norme en matière d'ingénierie analytique et a rendu la transformation reproductible, testable et explicable. Sa couche sémantique transforme la dérive métrique d'une fatalité en un anti-modèle.

Ensemble, ces fonctionnalités constituent l'épine dorsale d'une infrastructure de données ouverte qui est fiable, portable et prête à alimenter la prochaine génération d'analyses, d'agents d'IA et de prise de décision automatisée. Pour les entreprises, cela signifie des décisions plus rapides, moins de goulots d'étranglement en matière d'intégration et des systèmes de données évolutifs sans complexité supplémentaire.

Notre engagement en faveur de l'ouverture

Ce partenariat repose sur la confiance, et la confiance repose sur la clarté. Parce que la clarté est importante pendant les transitions, nous souhaitons exprimer publiquement nos engagements. dbt Core restera open source sous sa licence actuelle et continuera à être pris en charge et maintenu indéfiniment. Le moteur dbt Fusion restera disponible en source sous sa licence actuelle et continuera également à être pris en charge indéfiniment. Ces technologies ne sont pas simplement des composants d'une architecture ; elles sont les fleurons du mouvement ouvert et essentielles à la portabilité que les clients attendent.

Fivetran a toujours fait partie de la communauté dbt, et notre succès dépend de notre capacité à continuer à gagner la confiance qu'elle a bâtie. Nous avons contribué à plus de 60 paquets dbt open source, démontrant notre croyance en une collaboration ouverte et en notre engagement envers cet écosystème. En plus de proposer déjà des intégrations avancées avec dbt Core et la plateforme dbt, nous nous engageons à nous appuyer sur cette base pour proposer une expérience unifiée.

Maillage SQL et SQLGlot restera open source, et nous nous engageons à soutenir leurs communautés aux côtés de la communauté dbt. Les deux frameworks sont très appréciés et largement adoptés dans l'industrie pour l'analyse, l'optimisation et la transformation SQL.

Notre mission est de donner aux équipes chargées des données le choix et le contrôle par le biais de normes ouvertes, et non par un verrouillage propriétaire. Les licences ouvertes sont fondamentales, et l'ouverture en matière de conception s'étend à la portabilité, à l'interopérabilité et à la confiance. Grâce à des normes partagées telles que SQL, les API, les formats dbt et open table, les équipes chargées des données peuvent déplacer, modéliser et activer des données n'importe où, en ayant la certitude que leurs outils et leurs données restent pleinement les leurs.

Conçu pour l'ère de l'IA

L'IA révolutionne la façon dont les organisations utilisent les données, tout en exposant les limites des systèmes fragmentés. Avec Fivetran, les clients peuvent transférer des données de manière fiable depuis n'importe quelle source vers n'importe quelle destination grâce à des pipelines automatisés qui garantissent précision, fraîcheur et résilience. Avec dbt, ils peuvent modéliser, documenter et gérer ces données directement dans l'entrepôt, créant ainsi les bases dont l'IA a besoin.

Ce moment est plus important que l'une ou l'autre des entreprises. Ensemble, nous offrons :

• Largeur : La plus grande bibliothèque de connecteurs prédéfinis et de modèles de données DBT affinés.
• Fiabilité : Disponibilité et résilience de niveau professionnel éprouvées à l'échelle mondiale.
• Rapidité et efficacité : Un moteur de transformation spécialement conçu pour SQL, soutenu par une orchestration sensible à l'état qui élimine les calculs redondants.
• Alimenté par l'IA : Des agents et des copilotes qui étendent la portée et les capacités de chaque équipe chargée des données.

Réfléchissez à la manière dont cela fonctionne dans la pratique. Saks utilise Fivetran pour diffuser des événements opérationnels à partir de dizaines d'applications SaaS et de systèmes OLTP avec des SLA en matière de livraison et de disponibilité. dbt orchestre les contrats, les tests et les transformations qui se compilent en modèles gouvernés et en une couche sémantique. Les mêmes définitions alimentent les rapports d'analyse, mais également les agents d'IA qui répondent à « »Pouvez-vous me donner une recommandation sur ce qu'il faut acheter en fonction des achats précédents ?» et utilise le lignage pour indiquer exactement quelles entrées ont été lues et quand. Les agents disposent ainsi d'un contexte approprié et d'une documentation fiable.

Ensemble, Fivetran et dbt combleront l'écart entre les données brutes et les données prêtes pour l'IA.

Un avenir marqué par l'ouverture et la fiabilité

L'ouverture et la fiabilité peuvent sembler contradictoires, l'une mettant l'accent sur la flexibilité et l'autre sur la prévisibilité. Chez Fivetran et dbt Labs, nous les considérons comme complémentaires. L'ouverture ne peut réussir que si elle est suffisamment fiable pour s'adapter à l'échelle de l'entreprise, et la fiabilité perdure lorsqu'elle repose sur des bases ouvertes et interopérables.

Jusqu'à la clôture de la transaction, les clients continueront comme d'habitude, sans modification des contrats ou de l'assistance. Après la clôture, notre engagement reste le même : respecter les normes ouvertes, fournir une fiabilité de niveau professionnel et continuer à unifier nos plateformes au sein d'une infrastructure ouverte qui permet à l'IA d'évoluer en toute confiance.

À la communauté dbt, à nos clients communs et à tous les professionnels des données qui ont façonné cet écosystème : merci. Vous avez jeté les bases sur lesquelles nous nous appuyons, et nous nous engageons à les renforcer et à les faire progresser ensemble.

L'ère de l'infrastructure de données ouvertes est arrivée, offrant L'IA, la base elle en a toujours eu besoin : la fiabilité dont dépendent les entreprises et la transparence que les équipes contrôlent. La plupart des données mondiales restent inactives. Il est temps de le mettre en œuvre selon vos conditions.