L’état de la transformation numérique guidée par les données
Alors que les organisations accélèrent leur transformation numérique dans le contexte de la pandémie de COVID-19, l’enjeu d’exploiter les données, l’apprentissage automatique et l’analytique n’a jamais été aussi crucial.
Selon l’enquête mondiale 2020 de McKinsey sur l’état de l’intelligence artificielle, 50 % des entreprises ont adopté l’IA dans au moins une fonction, et 22 % attribuent au moins 5 % de leur résultat avant intérêts et impôts à des initiatives d’IA.
Cependant, pour libérer la valeur des données et de l’IA à l’échelle, les organisations doivent démocratiser l’accès aux données et développer une culture des données à l’échelle de l’entreprise. L’une des voies consiste à donner accès à des données fiables et activables, à travers les équipes et niveaux de compétences, afin que chacun puisse prendre des décisions métier éclairées par les données.
Une infrastructure data au cœur de la démocratisation des données
Avant d’atteindre la culture des données, il faut poser les bons fondamentaux. Cela commence par comprendre comment les données circulent dans l’organisation, puis construire une infrastructure data unifiée et organisée.
Lors d’un webinaire sur les tendances et prédictions data 2021, Ramnath Vaidyanathan, vice-président de la recherche produit chez DataCamp, a décrit la manière dont les données circulent typiquement au sein d’une organisation. Ce flux nécessite des outils d’ingénierie des données pour capter des données brutes, les ingérer et les transformer, les stocker dans un espace centralisé, puis produire des insights sous forme de tableaux de bord et de rapports, de sorties de modèles d’apprentissage automatique, et plus encore.
La généralisation de l’accès aux données dans l’entreprise dépend fortement d’une architecture d’infrastructure data solide et de l’usage des outils d’infrastructure les plus récents, qui permettent de transformer les données brutes en insights accessibles et de valeur.
L’état des outils d’infrastructure data
L’importance de l’infrastructure et des outils data se reflète dans la croissance rapide et l’évolution du marché. De nombreuses solutions visent à simplifier le travail sur un maillon spécifique de l’infrastructure data d’une organisation, ce qui a produit un paysage d’outils de plus en plus fragmenté et difficile à appréhender.
Le visuel suivant, réalisé par Dataiku, illustre clairement comment le marché de l’infrastructure data s’est segmenté en de nombreuses catégories fines, chacune voyant émerger une liste grandissante de solutions concurrentes.
Source : Dataiku
L’avenir des outils d’infrastructure data
Fin de l’année dernière, Andreessen Horowitz a cherché à apporter de la clarté à ce paysage déroutant en proposant un cadre d’architecture unifiée. Face au besoin croissant de travailler avec de grands volumes de données et à la profusion de solutions disponibles, ce cadre offre une référence pratique pour moderniser, cartographier et construire la pile data d’une organisation.
Source : Andreessen Horowitz
À mesure que ce domaine mûrit, nous assisterons à la consolidation et à la standardisation de différents outils au sein de la pile d’infrastructure data. Combinées à l’adoption du cloud, aux outils de data discovery et aux plateformes centralisées de gouvernance des données, ces évolutions permettront d’offrir un accès aux données à grande échelle, transverse aux équipes et aux fonctions.
Alors, que doit offrir une infrastructure data idéale à l’avenir ? Selon Maksim Pecherskiy, Data Engineer à la Banque mondiale et ancien CDO de la ville de San Diego, les données doivent être collectées, découvrables, fiables, comprises, conformes et activables. L’objectif ultime est de rendre les données utilisables et dignes de confiance, afin de développer une culture des données à l’échelle de l’organisation.
Une infrastructure data mature inclut le cloud, les outils de data discovery et des plateformes centralisées de gouvernance
À mesure que les outils d’infrastructure se consolident autour de la démocratisation des données en 2021 et au-delà, l’adoption et la progression des technologies suivantes vont s’accélérer :
1. Adoption du cloud
L’usage des technologies cloud devient la norme, en particulier après l’accélération de la transformation numérique pilotée par les données observée en 2020.
Au-delà de l’amélioration du stockage et de l’accès aux données, les solutions cloud offrent de nombreux produits conviviaux pour collecter, ingérer, transformer, stocker et générer des insights à partir des données.
De nombreux fournisseurs se positionnent sur les plateformes cloud, et l’un des acteurs majeurs est Amazon Web Services (AWS), qui propose plus de 100 produits permettant aux entreprises de tirer le meilleur parti de leurs données, rapidement, à grande échelle et à moindre coût.
2. Outils de data discovery
La montée en puissance de l’infrastructure data sera déterminante à mesure que des tables, rapports et modèles s’ajoutent au paysage informationnel de l’entreprise. Les parties prenantes doivent pouvoir localiser facilement des données et insights fiables, compris, conformes et activables pour travailler efficacement.
Pour relever ce défi, les outils de data discovery (également appelés outils de gestion des métadonnées ou catalogues de données) peuvent faire office de moteurs de recherche polyvalents au sein de ces gisements de données. Les métadonnées désignent l’ensemble des informations décrivant une donnée, et sont utiles pour indexer la grande variété de données disponibles.
Lyft a open-sourcé son propre outil de data discovery, Amundsen, afin d’offrir des moteurs de métadonnées qui aident les organisations à découvrir, comprendre, partager et faire confiance aux données utilisées pour leurs analyses. Cette capacité est capitale pour toute organisation souhaitant faire monter en compétences ses équipes data à l’échelle.
3. Plateformes centralisées de gouvernance des données
Comme mentionné plus haut, instaurer la confiance dans les données est essentiel pour favoriser leur démocratisation. C’est là que la gouvernance des données joue un rôle majeur. Avec le volume et la variété des données en croissance continue, une supervision centralisée de leur qualité, de leur cohérence et de leur pertinence est cruciale.
Les services de plateformes centralisées de gouvernance proposés par des entreprises comme Collibra et Alation aident les organisations à gérer efficacement la disponibilité, la cohérence et l’intégrité de leurs données. Tous les acteurs peuvent ainsi travailler à partir d’une source de vérité fiable.
Une infrastructure data en maturation n’est qu’une des tendances que nous anticipons pour 2021 et au-delà. Pour en savoir plus, téléchargez notre livre blanc Data Trends and Predictions 2021 : The Year of Data Fluency ou regardez notre webinaire.
