Amazon DataZone : Automatiser la découverte des données

Le catalogue de données commerciales Amazon DataZone agit comme un registre organisationnel fédéré dans lequel les métadonnées techniques peuvent être publiées sous forme de ressources, et vous pouvez ajouter un contexte commercial enrichi. Vous pouvez rendre les données visibles grâce au contexte commercial afin que tous vos utilisateurs puissent les trouver, les comprendre et leur faire confiance rapidement et facilement.

Automatisez l'ajout de descriptions et de noms commerciaux aux données afin de comprendre facilement le contexte et d'éviter d'avoir à utiliser des noms techniques cryptiques. Cette automatisation est alimentée par de grands modèles de langage (LLM) pour une précision et une cohérence accrues. 

La recherche à facettes s'ajoute au catalogue de données commerciales pour aider les consommateurs et les producteurs de données à trouver des actifs de données à l'aide d'informations structurelles familières, telles que les noms de tables et de colonnes, ainsi que les termes commerciaux.

Pour chaque jeu de données, générez une liste des colonnes les plus utiles et des utilisations analytiques potentielles. 

Grâce aux statistiques de qualité des données d'Amazon DataZone, les consommateurs de données peuvent consulter les indicateurs de qualité des données provenant de systèmes de qualité des données d’AWS Glue ou de systèmes tiers. Les consommateurs de données peuvent faire confiance aux sources de données qu'ils utilisent pour prendre des décisions et bénéficier d'un contexte de qualité des données lors de leurs recherches d’actifs. Les producteurs et les équipes informatiques peuvent également utiliser des API pour intégrer les statistiques de qualité des données provenant de systèmes tiers dans un portail unifié, hors console. Les producteurs de données peuvent importer les résultats de qualité des données d’AWS Glue selon un calendrier afin de s'assurer que les scores sont à jour, même si les données sont en constante évolution.

Comprenez l'évolution des données au fil du temps. Le lignage des données peut renforcer la confiance et la maîtrise des données en vous aidant à comprendre d'où proviennent les données, la manière dont elles ont évolué et leur consommation. Vous pouvez réduire le temps passé à cartographier un actif de données et ses relations, à dépanner et à développer des pipelines, et à appliquer des pratiques de gouvernance des données.

Regroupez les actifs de données dans des packages définis (produits de données) adaptés à des cas d’utilisation commerciaux spécifiques afin de rationaliser le catalogage et de permettre aux consommateurs de données de découvrir facilement les données et de s’y abonner. Les producteurs de données peuvent organiser une collection d’actifs pertinents, ajouter un contexte d’entreprise et la publier en tant qu’unité de produit de données. Cela simplifie le processus permettant aux consommateurs de données de localiser tous les actifs de données nécessaires pour des cas d’utilisation particuliers. Les consommateurs peuvent s’abonner à tous les actifs d’un produit de données via un flux de travail d’approbation unique. Les producteurs de données peuvent gérer le cycle de vie du produit, notamment modifier la collection de ressources, annuler la publication, la supprimer et gérer les abonnements. Amazon DataZone propose également une prise en charge des API pour les flux de travail des produits de données, facilitant ainsi l’intégration et l’automatisation.