Améliorer l'efficacité et la productivité via un Data Lakehouse

À propos

Filiale de la société française de télécommunications Orange, Orange Côte d’Ivoire (OCI) est le plus important opérateur mobile de Côte d’Ivoire avec plus de 17 millions de clients actifs. Les activités d’OCI couvrent les télécommunications, mais également Orange Money, une plateforme bancaire permettant de réaliser des transactions financières depuis un téléphone.

Défi

La problématique principale qui a poussé OCI à apporter des changements à sa stratégie de gestion de données vient du besoin d’accéder rapidement aux données stockées dans des sources multiples. Les besoins métiers, et en particulier la lutte contre la fraude, nécessitent un accès rapide et direct à la donnée.

Les demandes d’extraction de données s’accumulaient et mobilisaient de plus en plus les équipes. Les Data Engineers passaient beaucoup trop de temps à traiter ces demandes, ce qui créait un goulot d’étranglement en interne, entraînant des délais importants. Enfin, OCI ne disposait pas de compétences avancées pour moderniser son Data Lake Hadoop existant, ce qui posait des problèmes cruciaux en termes de performance et de gouvernance.

L’équipe a initialement testé la solution open source Trino en autonomie, avant de faire appel à Starburst pour soutenir la gestion du déploiement du moteur, mais également afin de bénéficier des fonctionnalités de connectivité et de sécurité de Starburst Enterprise.

Solution

Transformer la gestion des données avec Starburst, Google et Dell

En réponse à ces défis, la société de télécommunication a adopté une approche hybride en tirant parti des bénéfices apportés par Starburst, Google Cloud Platform (GCP) et une plateforme Cloud Native on-premises déployée sur des serveurs Dell Technologies. OCI a investi dans une nouvelle plateforme lakehouse on-premises mêlant Kubernetes et stockage MinIO, pour plus de performance. L’organisation a également décidé d’entamer la migration d’une partie des données vers Google Cloud Platform (GCP), tout en conservant les données sensibles on-premises pour des raisons réglementaires. L’étape décisive de cette transformation ? L’intégration de Starburst Enterprise, la solution open source Trino assortie d’un support complet, testée en production et qui a servi de base à la virtualisation des données ainsi qu’à leur fédération, favorisant l’adoption d’une logique décentralisée de type Data Mesh.

En collaboration avec Starburst, OCI a mis à disposition une architecture minutieusement testée s’appuyant sur des composants Dell, Starburst Enterprise et d’autres logiciels on-premises. Ce partenariat a permis à OCI de migrer les données intelligemment vers un lakehouse en fonction de ses cas d’utilisation, pour éviter ainsi une surdépendance vis-à-vis d’un fournisseur tout en gérant les formats ouverts de tables et de fichiers les plus courants. En dissociant performances de calcul et stockage, et en tirant parti des nouvelles technologies mises en place, OCI a été en mesure de créer un lakehouse moderne de plusieurs pétaoctets.

Résultats

L’implémentation de Starburst offre à OCI des avantages significatifs :

• La productivité des équipes a augmenté de 300 %, grâce à des gains considérables de temps dans le traitement des demandes d’analyse de données.
• Les équipes métiers sont devenues bien plus autonomes, grâce à un accès à Starburst via SQL, pour une accélération du time-to-insight côté Data Analysts.
• Les Data Engineers sont libérés des tâches d’extractions répétitives et peuvent être mobilisés sur des projets à plus forte valeur ajoutée, notamment le développement de leurs compétences en IA.
• Starburst est devenu le point d’accès unique à la donnée, au lieu de devoir envoyer les requêtes dans différentes sources séparément.
• Pour la compliance, les requêtes qui prenaient plusieurs heures auparavant sur Hadoop ne prennent aujourd’hui que quelques minutes grâce à Starburst.

Pour l’avenir, Starburst restera la pierre angulaire de la stratégie de gestion des données d’OCI et son allié principal pour mettre en place des Data Products et une architecture Data Mesh. Grâce à Starburst Stargate, OCI veut mettre en place de la fédération on-prem et cloud. OCI prévoit d’intégrer les données sur Big Query et en local, et Starburst continuera d’être un véritable catalyseur dans le parcours d’OCI vers l’excellence en matière de données.