Casser les silos et croiser les données de façon performante dans une architecture hybride

Groupe de bancassurance coopératif et mutualiste, le Crédit Mutuel Arkéa est composé des fédérations du Crédit Mutuel de Bretagne et du Sud-Ouest ainsi que d’environ 40 filiales spécialisées (Suravenir, Fortuneo Banque, Financo, Monext, etc.).

Acteur majeur de la bancassurance en France, le groupe compte plus de 11000 salariés, 2600 administrateurs et plus de 5 millions de sociétaires et clients.

Dès 2009, l’entreprise a été l’une des premières organisations du secteur à déployer une plateforme Big Data « on premises » sous hadoop. Depuis 2017, l’organisation explore les potentiels avantages du cloud en matière d’innovation, de réduction du time to market et d’amélioration de la performance.

Au sein de la DSI, le Data Office catalyse et valorise les données du Groupe et l’innovation grâce à la mise en place de solutions technologiques et travaille en collaboration avec les relais data présents dans les directions métiers.

L’hybridation de la plateforme data du Crédit Mutuel Arkéa a permis d’implémenter une stratégie innovante pour tirer profit des bénéfices du cloud tout en restant conforme avec les engagements de portabilité, de protection et de souveraineté des données pris par le Groupe.
Cependant, dans un contexte de croissance exponentielle des données et de demandes d’analyses toujours plus nombreuses, la performance limitée des requêtes analytiques dans Hadoop générait une frustration pour les utilisateurs. Ces temps de requêtes longs pouvaient s’expliquer à l’époque par plusieurs facteurs, notamment :

• Une incapacité à connecter les outils de business intelligence directement au Data Lake on-premises (Hadoop).
• Une forte dépendance aux processus ETL et aux batch, qui entravait la disponibilité des données.
• Des difficultés à analyser de façon croisée les données stockées on-premises et dans le cloud.

Alors comment casser les silos de données et croiser les données de façon performante ?

Le Crédit Mutuel Arkéa a choisi Starburst Enterprise pour accélérer la performance du Data Lake Hadoop, comptant environ 12 pb de données, ainsi que pour permettre la fédération des données distribuées, stockées on-premises et sur le cloud public.

La décision s’est appuyée notamment sur les points suivants :

• Cohérence de l’offre Starburst avec la préférence du Groupe pour les technologies SQL et open source.
• Compatibilité du modèle de gouvernance et sécurisation des données.
• Capacité de Starburst à délivrer les performances nécessaires pour la gestion de requêtes au sein de volumes de données considérables représentant plusieurs pétaoctets.

Le déploiement de Starburst en tant que couche de virtualisation et de fédération des données pour l’architecture hybride de la plateforme data du Crédit Mutuel Arkéa a permis d’obtenir les résultats suivants :

• Les requêtes utilisateurs sont en moyenne 20x plus rapides, ce qui réduit significativement le time-to-insight et améliore la productivité.
• La satisfaction des utilisateurs internes a bondi, avec une augmentation exponentielle de la base d’utilisateurs, passée de 10 à plus de 550 utilisateurs en quelques mois.
• Plus d’autonomie via l’amélioration de l’expérience d’accès à Hadoop pour l’ensemble des utilisateurs, peu importe leur niveau de compétence technique. « Les experts du Data Office ne sont pas les seuls utilisateurs à apprécier l’expérience offerte par la plateforme Starburst, puisque 65% des utilisateurs font partie des équipes métiers », partage Maxime Havez.
• L’équipe Data a davantage les moyens de prendre part à de nouveaux projets et explore d’autres scénarios d’utilisation, en contribuant activement aux initiatives de l’entreprise en matière d’innovation.

“Starburst s’est rapidement intégré dans le SI de la plateforme BigData d’Arkea et remplit parfaitement son rôle d’accélérateur des requêtes SQL sur l’infrastructure Hadoop. De plus, Starburst permet une hybridation du SI et une centralisation du contrôle des accès qui sont des éléments permettant d’envisager une évolution adaptée et facilitée du Data Lake”, résume Anne Despoulains, Responsable département Infrastructure, Crédit Mutuel Arkéa.

Le succès de ce partenariat repose grandement sur la qualité des relations entre les équipes du Crédit Mutuel Arkéa et de Starburst, qui travaillent main dans la main pour co-construire une solution adaptée aux besoins des utilisateurs du Groupe et de ses filiales. Grâce à cette collaboration efficace, il s’est écoulé moins de 6 mois entre la validation du POC et l’implémentation de la solution.

Ce partenariat a par conséquent ouvert de nouvelles possibilités pour l’analytique et l’innovation au sein du Crédit Mutuel Arkéa, tout en garantissant une intégration sécurisée des données à travers différents environnements.

More resources: Profil Data Rebel de Stéphane Orieux et Profil Data Rebel de Maxime Havez