Contexte 

Fondée en 1852, la Michigan Education Association (MEA) est une association éducative autonome représentant environ 120,000 8 éducateurs travaillant dans tout l'État du Michigan. L'association utilise les données pour organiser les unités de négociation, préparer la facturation et résoudre les problèmes des membres. L'association exploite des données provenant de plusieurs sources, notamment des fichiers plats et des fichiers CSV comportant plus de XNUMX millions de lignes.   

Case Study

MEA a sous-traité sa facturation à une autre société. Cette société tierce envoie des factures aux clients de MEA et partage les données via un dossier zip sur un serveur SFTP. Le fichier est ensuite téléchargé, décompressé et chargé sur un système transactionnel MS SQL. Le dossier zip contient différents types de fichiers structurés et non structurés, notamment des fichiers CSV, PDF et plats. Sans outil d'automatisation, l'équipe de MEA a dû télécharger les fichiers individuels, créer des flux et exécuter le processus d'intégration manuellement. Les utilisateurs devaient souvent gérer des fichiers contenant jusqu'à des millions d'enregistrements, ce qui rendait l'ensemble du processus d'intégration extrêmement long. Cela signifiait également que les rapports de facturation ne pouvaient être générés qu'une fois que les employés étaient physiquement disponibles au travail pour télécharger des fichiers et exécuter le processus d'intégration. Filtrer les données pertinentes à partir de fichiers contenant des millions d'enregistrements était également un défi. MEA souhaitait uniquement insérer les enregistrements modifiés ou mis à jour dans le système transactionnel MS SQL. Cela a demandé beaucoup de temps et d’efforts car l’organisation ne disposait pas d’un outil pour faciliter le processus.  

« Nous n'avions pas d'entrepôt de données en place et n'utilisions aucun logiciel ETL. Je venais d'un ancien employeur où j'avais utilisé un logiciel pour configurer et maintenir l'entrepôt de données à des fins de reporting. Ce logiciel était bien trop cher pour cette entreprise, alors j'ai fait des recherches et j'ai trouvé Astera. » 

– Gwen Conarton  

Entrer Astera Générateur de pipeline de données

Après avoir mené ses recherches, MEA a découvert Astera Générateur de pipeline de données être le plus à même de répondre à ses besoins.  

Astera Générateur de pipeline de données est une plateforme de gestion de données hautes performances et évolutive qui permet aux entreprises de répondre aux besoins commerciaux avancés d'aujourd'hui. Propulsé par un moteur de traitement parallèle de niveau entreprise, Astera Générateur de pipeline de données propose l'extraction, la transformation, l'intégration et l'entreposage de données sur une seule plateforme.   

MEA a choisi Astera Générateur de pipeline de données pour sa facilité d'utilisation et ses capacités d'automatisation robustes, qui leur ont permis d'éliminer le travail manuel et d'accélérer considérablement les intégrations de données. Au lieu d'attendre qu'un employé exécute manuellement le processus au travail, MEA a utilisé Astera Générateur de pipeline de données pour terminer le processus d'intégration du jour au lendemain et disposer des données dans un format prêt à être rédigé avant le début de la journée de travail. Cela a permis à l'équipe d'économiser des heures consacrées au téléchargement et à l'exécution manuels des flux d'intégration. 

Astera Générateur de pipeline de données a également aidé MEA à créer un entrepôt de données entièrement fonctionnel pour consolider les données et accéder à une vue globale de son processus de facturation. L'équipe a chargé les données du système transactionnel MS SQL vers l'entrepôt de données MySQL. À partir de là, les données ont été intégrées à Salesforce CRM et Salesforce Marketing Cloud pour dynamiser les efforts marketing de MEA. Avant de mettre en œuvre Astera Générateur de pipeline de données, MEA s'appuyait sur des fichiers plats pour importer des données dans Salesforce. L'équipe a été soulagée de constater que Astera Générateur de pipeline de données La plate-forme pourrait extraire des données utilisables à partir de PDF et les intégrer avec plusieurs formats avec une grande facilité.  

 "Globalement, AsteraLe générateur de pipeline de données de nous a permis de passer de l'absence d'entrepôt de données et de processus automatisés à un entrepôt de données entièrement fonctionnel. Après avoir créé les flux de données et les workflows, les avoir planifiés et la validation initiale des données, Astera Générateur de pipeline de données fonctionne comme une machine bien huilée. 

– Gwen Conarton