Rivery annonce la mise en place d’un pipeline de données de MongoDB vers un entrepôt de données Snowflake utilisant la réplication des données Rivery CDC Change Data Capture.
MongoDB dispose de ses propres modèles de données et d’accès recommandés, qui ne sont pas toujours aussi flexibles que le SQL standard à des fins d’analyse. Ses modèles permettent une écriture et une récupération rapides, ainsi que de nombreux autres facteurs tels que la disponibilité et la flexibilité de la structure des données.
Les bases de données transactionnelles telles que MongoDB permettent d’exécuter des analyses sur des plates-formes de stockage avancées telles que Snowflake, pour des analyses efficaces où les données peuvent non seulement être analysées rapidement via SQL, mais également facilement combinées et modélisées avec d’autres sources de données.
Rivery s’appuie sur MongoDB Change Streams, qui est la fonctionnalité de MongoDB qui active CDC pour MongoDB. Rivery utilise dans un premier temps le mode d’extraction « Tous » pour effectuer une première migration des tables choisies dans leur état actuel. À partir de là, la plate-forme transfère les enregistrements Change Stream et les fusions Upsert existants vers la table cible une fois la migration de l’historique terminée, tout en continuant à récupérer de nouveaux enregistrements dans le journal au fur et à mesure. leur création, vous permettant ainsi d’avoir à tout moment une copie « miroir » de la base de données Source MongoDB dans Snowflake.
Le pipeline créé migrera continuellement les données de MongoDB vers Snowflake, permettant une analyse efficace des données. Les données sont analysées facilement et rapidement via SQL mais également combinées et modélisées avec d’autres sources de données.
