Orkestra optimise la production et la diffusion des données par les métiers, sous contrôle des équipes IT et data.
Les données sont générées sous forme de Data Products intégrant toutes les informations de connaissance.
Les Data Products circulent entre des domaines métiers, sous le contrôle d’une gouvernance attachée au cas d’usages.
Les solutions Data font leur révolution et convergent vers une orientation « unique » : les Data Platforms. Afin de comprendre cette évolution on a produit deux ouvrages complémentaires, la Dynamique des Data Platforms, ainsi que le Panorama des Data Platforms
Tour d’horizon de ce qui justifie cette convergence vers les Data Platforms. Des principes forts comme la donnée qui devient un produit, ou les nouvelles organisations de type Data Mesh. Et un passage en revue et on détaille les différentes fonctions d’une Data Platform.
Une trentaine de solutions proposées par des éditeurs sont passées en revue, on les décrypte et on présente les tendances du marché à suivre.
notre promesse
Harmonisation et uniformisation des référentiels.
Gestion centralisée des référentiels métiers de l’ensemble de l’entreprise
Centralisation et synchronisation d’un Data Catalog qui colle au contexte et aux besoins de l’organisation.
Orkestra fournit une traçabilité et une contextualisation automatique de chaque jeu de données qui colle à la réalité d’usage.
Évaluer régulièrement la qualité des jeux de données et remonter automatiquement les recueils de contrôles qualité.
Les publications de données soumises à régulation sont extrêmement facilitées grâce aux étiquettes de données qui fournissent toute la traçabilité attendue.
A chaque nouveau reporting PPT ou BI, les données à jour sont intégrées instantanément dans les templates prédéfinis.
Sur une architecture triple layer ( Raw > Cleansed > Enriched ), intégration des étiquettes sur les niveaux 2 et 3.
Passage vers une organisation type Data Mesh. Déploiement d’une architecture Data Platform IT pour servir les besoins métiers et les responsabiliser dans la production des données.
Key featureS
Dans ce flot grandissant de production de jeux de données, l’identification devient primordiale.
La Data Platform Orkestra automatise ce processus en créant une codification pour chaque jeu de données.
L’étiquette est insérée au sein du jeu de données et le rend « unique », immuable et identifiable.
L’étiquette est la clé pour favoriser le contrôle, la qualité et le partage des jeux de données.
Chaque flux de fichiers génère automatiquement une « étiquette descriptive ».
Cette étiquette de métadonnées, sorte de « code barre » permet :
Chaque jeu de données étant identifiable est également traçable.
La Data Platform Orkestra fournit automatiquement un linéage des jeux de données opérationnels
Le module Data Manager permet d’intégrer l’ensemble des règles métiers et process de production des données dans Orkestra.
Paramétrage des catalogues d’attributs global : Process, traitement, périmètre, typologie ( type et format des données).
Construction de la structure d’étiquette.
Définition des règles de gestion : Attribution des Cycles, choix des attributs supplémentaires (fait partie d’un groupement d’étiquette, doit avoir une période de validité, doit avoir une période de diffusion …)
Le module Data Fabrik permet de lancer et de valider les productions de jeux de données.
L’utilisateur (« métier ») a la possibilité de paramétrer, de planifier sa production selon le rythme de l’activité et de déterminer les équipes en charge de valider et de diffuser les résultats.
La validation est simplifiée grâce à l’accessibilité des recueils de la qualité des données facilitant l’approbation et/ ou la certification.
La production intègre un étiquetage des data en sortie, un facilitateur de communication entre les différents intervenants tout au long du processus de production.
Chaque flux de fichiers génère une « étiquette descriptive ». Cette étiquette de métadonnées, sorte de « code barre » permet :
Les jeux de données ne sont jamais supprimés, permettant ainsi un Data Lineage à 360° de la donnée
Les étiquettes sont générées par la plateforme.
Les restitutions peuvent être réalisées avec la ou les dernières étiquettes de données, ou des étiquettes précises. (Applications budgétaires, reconstitutions d’historiques,….)
Le portail Datashop est le meilleur endroit pour accéder aux jeux de données métiers et les partager.
Son interface intuitive permet une recherche rapide des jeux de données et un téléchargement simplifié.
Le module MSO monitore les traitements lancés afin d’en évaluer la complétude et la conformité.
videos
La traçabilité des données opérationnelles vient booster l’usage des données par les métiers.
Data Gouvernance Opérationnelle, comment l’ancrée durablement auprès des métiers ?
Data Labeling ou étiquetage des jeux de données métiers : quels sont les bénéfices ?
Face aux silos historiques de données, aux difficultés rencontrées dans les exercices de centralisation des données et à la complexité résultante d’exploiter complètement le potentiel des données (“soyez data”), le Data Mesh définit la vision d’un cadre de vie des données dans l’entreprise. Cette vision a émergé des travaux de Zhamak Dehghani en 2019 (réf). La vision proposée…
Stress, charge de travail, burn out, turn over, abandon, les métiers de la data sont en tension et engendrent du data chaos. Les données sont partout mais difficiles à saisir, historiquement enfouies dans des systèmes, elles sont à extraire mais avec beaucoup d’effort, dispersées et dupliquées dans des silos non interconnectés, entassées dans des data…
Le monde des données exacerbe l’effort d’intégration déjà difficile à traiter : intégrer la prolifération des données issues des projets de digitalisation, intégrer des sources existantes de données hétérogènes en silos, intégrer des fonctions de gestion des données (de data management), intégrer des jeux de données voire des data products (dans un cadre Data Mesh), intégrer des composants techniques support…
Comment gérer des données, des produits de données sans données ? Les données sont devenues un objet de gestion qui comme pour un logiciel client, produit… vont faire appel à des données. Ces données sont appelées Métadonnées et se rassemblent au sein d’Étiquettes, on parle d’étiquetage des données. Ces métadonnées sont essentielles pour l’ensemble des fonctions d’une data platform. Au…
D’un côté, les métiers ont de plus en plus d’attentes et de contraintes liées aux données. De l’autre, l’IT ne peut pas répondre à l’ensemble des besoins data d’une organisation. Le tout s’inscrivant dans une dynamique d’agilité continue à l’échelle, d’innovation (« test and learn »), de reconfigurations, de développement de nouveaux marchés, d’incertitudes, de crises, où…
Les fonctions des data platforms peuvent être représentées sous forme de couches fonctionnelles, support aux processus de gestion des données, en partant de l’intégration de sources de données jusqu’à la gouvernance des données. Les différentes couches fonctionnelles d’une data platform – vision 360° Une première suite de fonctions des data platforms a la charge de…
Les données se sont émancipées. Elles deviennent des produits à part entière qui doivent permettre de répondre aux nombreuses attentes métier. L’accélération de la pression des données ne ralentit pas : volumes, temps réel, natures des données. Nulle entreprise ou organisation ne peut ignorer cette pression, les besoins d’accès aux données et la part de…
Pour tous les acteurs confrontés aux données, le sujet numéro un est l’accès aux données. La vision Produit répond à cette attente, en offrant les moyens d’exploiter correctement des données. C’est-à-dire, les reconnaître (les cataloguer, les exposer), les évaluer (les contrôler, les gouverner, les valoriser), les prendre, les protéger et les utiliser. Cette capacité de…
Deux grandes orientations sont donc à distinguer : des data platforms à la main des métiers, et des data platforms à la main de l’IT. La distinction porte sur les caractéristiques des données traitées et des usages finaux. Dans le cas de l’orientation métier, les données doivent circuler vite et bien, être facilement consommables par…
Lorsque les données sont enfouies dans des couches de stockage (SGBD, Datawarehouse, Data lake), il est nécessaire, pour y accéder, de faire appel à des moyens d’interrogation : par exemple via le langage SQL(1) majoritairement, ou via des outils de Business intelligence et le passage par une couche de programmation de type ETL (Extract Transform and…
Les données se sont émancipées jusque dans le langage courant. Peu de réunions, d’échanges, de négociations, de décisions échappent à une utilisation de données. Pour certains métiers, ce n’est pas une découverte (finance, marketing). Mais pour tous, la pression des données ne fait qu’augmenter, jusqu’à devenir une obsession. Dorénavant, les attentes sont fortes : les données…
Les métiers responsables des données, nous y sommes !!! Pour tous les acteurs confrontés aux données, le sujet numéro un est l’accès aux données. La vision Produit répond à cette attente, en offrant les moyens d’exploiter correctement des données. C’est-à-dire, les reconnaître (les cataloguer, les exposer), les évaluer (les contrôler, les gouverner, les valoriser), les…
