Tarifs de Dataplex Universal Catalog

Les tarifs de Dataplex Universal Catalog sont basés sur le paiement à l'usage. Dataplex Universal Catalog facture actuellement les services en fonction des SKU suivants:

• Traitement Dataplex Universal Catalog (niveaux standard et premium)
• Stockage de données de Dataplex Universal Catalog
• Stockage de métadonnées
• Appels d'API Data Catalog

Voici un aperçu général de la facturation de chaque fonctionnalité clé de Dataplex Universal Catalog:

En plus de cette facturation, les appels d'API Data Catalog sont facturés en fonction des frais des API Data Catalog.

Autre utilisation

Les fonctionnalités d'organisation des données dans Dataplex Universal Catalog (configuration des lacs, des zones ou des éléments), ainsi que l'application et la propagation des règles de sécurité, sont fournies sans frais.

De plus, certaines fonctionnalités de Dataplex Universal Catalog (y compris les tâches d'ingestion et de qualité des données planifiées, ainsi que les connecteurs gérés de Dataplex Universal Catalog pour l'ingestion de métadonnées à partir de CloudSQL et Looker) déclenchent l'exécution de jobs à l'aide de Dataproc sans serveur, BigQuery, Dataflow et Cloud Scheduler. Ces utilisations sont facturées selon les modèles de tarification de Dataproc, BigQuery, Dataflow et Cloud Scheduler respectivement. Les frais seront affichés sous Dataproc, BigQuery et Dataflow au lieu de Dataplex Universal Catalog.

Tarifs du traitement Dataplex Universal Catalog

Les traitements standards et Premium de Dataplex Universal Catalog sont mesurés par l'unité de calcul de données (DCU). Les heures de calcul de données sont une unité de facturation abstraite pour Dataplex Universal Catalog. La mesure réelle dépend des fonctionnalités individuelles que vous utilisez.

Tarifs du traitement standard de Dataplex Universal Catalog

Le niveau standard de Dataplex Universal Catalog couvre la fonctionnalité de découverte de données qui détecte les métadonnées dans les données gérées par Dataplex Universal Catalog. Voici les prix selon la région de votre choix.

Quota gratuit de Dataplex Universal Catalog

Dans le cadre du niveau de service gratuit de Google Cloud, Dataplex Universal Catalog propose un quota de ressources gratuites dans la limite des conditions fixées. Ce quota est disponible pendant et après l'essai gratuit. Si vous dépassez ces limites d'utilisation et que l'essai gratuit est terminé, le service vous sera facturé selon les tarifs décrits dans les sections ci-dessus.

Tarifs du traitement premium Dataplex Universal Catalog

Le niveau de traitement Premium de Dataplex couvre la traçabilité, la qualité, le profilage et l'atelier d'exploration des données.

Le nombre de DCU facturés pour chaque fonctionnalité est calculé comme suit:

• Analyses de la qualité des données automatiques :
  • La consommation en heures DCU est proportionnelle au traitement nécessaire pour profiler les données et calculer les métriques de qualité des données. La facturation se fait à la seconde, avec un minimum d'une minute.
  • Le montant dépend du nombre de lignes, du nombre de colonnes, de la quantité de données analysées, de la configuration des règles de qualité des données, des paramètres de partitionnement et de clustering de la table, ainsi que de la fréquence de l'analyse.
  • Plusieurs options permettent de réduire le coût des analyses automatiques de la qualité des données :
    • Échantillonnage
    • Analyses incrémentielles
  • Pour séparer les frais liés à la qualité des données des autres frais dans le SKU de traitement premium Dataplex, dans le rapport de facturation Cloud, utilisez l'étiquette goog-dataplex-workload-type avec la valeur DATA_QUALITY.
  • Pour filtrer les frais agrégés, utilisez les libellés suivants disponibles dans l'exportation de la facturation dans BigQuery :
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Analyses du profilage de données :
  • La consommation en heures DCU est proportionnelle au traitement nécessaire pour profiler les données et calculer les métriques de qualité des données. La facturation se fait à la seconde, avec un minimum d'une minute.
  • Le coût dépend du nombre de lignes, du nombre de colonnes, de la quantité de données analysées, des paramètres de partitionnement et de clustering de la table, ainsi que de la fréquence de l'analyse.
  • Plusieurs options permettent de réduire le coût des analyses de profilage des données :
    • Échantillonnage
    • Analyses incrémentielles
    • Filtrage de colonne
    • Filtrage de lignes
  • Pour séparer les frais de profilage des données des autres frais dans le SKU de traitement premium Dataplex, dans le rapport de facturation Cloud, utilisez l'étiquette goog-dataplex-workload-type avec la valeur DATA_PROFILE.
  • Pour filtrer les frais agrégés, utilisez les libellés suivants disponibles dans l'exportation de la facturation dans BigQuery :
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Généalogie des données :
  • La consommation d'heures de CCU est proportionnelle au traitement nécessaire pour analyser automatiquement la traçabilité.
  • Pour séparer les frais de traçabilité des données des autres frais dans le SKU de traitement premium Dataplex, dans le rapport de facturation Cloud, utilisez l'étiquette goog-dataplex-workload-type avec la valeur LINEAGE.
  • Si vous appelez l'API Data Lineage Origin sourceType avec une valeur autre que CUSTOM, cela entraîne des coûts supplémentaires.
• Workbench d'exploration de données :
  • Le prix de l'heure de CCU est calculé en fonction de la consommation de ressources de calcul de la session.

Exemple de tarification de la traçabilité des données

L'utilisateur A active la traçabilité des données pour suivre la traçabilité de BigQuery dans son projet. Le projet se trouve dans l'emplacement us-central1. Au cours d'un mois, la traçabilité des données consomme 100 heures de traitement Dataplex Premium et génère 1 GiB de métadonnées de traçabilité des données. Chacun coûte :

100 * $0.089           // 100 DCU-hours of Dataplex Premium processing billed at $0.089 per DCU-hr

+ (1GiB - 1MiB) * $2   // cost of storing 1GiB data lineage metadata excluding 1MiB of free storage per month
  ---
  = $10.9

Tarifs de l'espace de stockage aléatoire Dataplex Universal Catalog

Les tarifs de stockage aléatoire couvrent tout stockage sur disque spécifié dans les environnements configurés pour l'environnement de travail d'exploration des données.

Tarifs de Catalog

Cette section décrit les tarifs de l'Universal Catalog et de Data Catalog. Pour en savoir plus sur les différences entre le catalogue universel et Data Catalog, consultez la page Catalogue universel ou Data Catalog.

Les frais de catalogue universel s'appliquent au stockage des métadonnées pour le catalogue universel, y compris les métadonnées stockées pour la traçabilité des données. Ces frais seront appliqués à partir du 1er août 2024.

Data Catalog facture le stockage des métadonnées et les appels d'API effectués vers l'API Data Catalog.

Les frais de stockage de métadonnées et d'appels d'API sont comptabilisés quotidiennement. Vous pouvez consulter les données concernant l'utilisation non facturée dans laGoogle Cloud console.

Tarifs applicables au stockage de métadonnées

Dataplex Universal Catalog utilise le SKU de stockage des métadonnées pour facturer le stockage des métadonnées. Le stockage de métadonnées est mesuré en gibioctets (GiB), et 1 GiB correspond à 1 073 741 824 octets. Universal Catalog et Data Catalog mesurent la quantité moyenne de métadonnées stockées sur un court intervalle de temps. Pour la facturation, la moyenne de ces mesures est calculée sur une période d'un mois, et cette moyenne est multipliée par le tarif mensuel.

Si vous ne payez pas en USD, les tarifs indiqués dans votre devise sur la page des SKU de Cloud Platform s'appliquent.

Tarifs de stockage d'Universal Catalog

Les frais de stockage des métadonnées (y compris ceux des entrées et des aspects) sont facturés au projet dans lequel la ressource respective a été créée.

Lorsqu'une ressource de Data Catalog est rendue disponible simultanément dans le catalogue universel, vous ne payez qu'une instance active de cette ressource.

Tarifs de Data Catalog pour le stockage

Tarification des API

Cette section décrit les tarifs des API Universal Catalog et Data Catalog.

Frais de l'API Catalogue universel

Lorsque les utilisateurs interagissent avec le catalogue universel, les appels d'API suivants sont gratuits:

• Créer et gérer des ressources de catalogue universel
• Créer et gérer des ressources de traçabilité, à l'exception de la traçabilité automatiquement collectée
• Recherche dans le catalogue

Frais liés à l'API Data Catalog

Les appels d'API de Data Catalog sont facturés comme décrit dans le tableau suivant:

Si vous ne payez pas en USD, les tarifs indiqués dans votre devise sur la page des SKU de Cloud Platform s'appliquent.

Exemples de tarification Universal Catalog

Cette section fournit des exemples de calcul du coût du catalogue universel.

Petits détails

• L'utilisateur A crée et applique de petits aspects (1 024 octets chacun). Pour 10 $par mois, il peut stocker 5 Gio de métadonnées, soit environ cinq millions d'aspects. En supposant un aspect par table, cela représente un total de cinq millions de tables avec des aspects.

• L'utilisateur B crée 5 millions d'aspects de 1 Ko chacun le 10 du mois et les supprime le 20. Le coût est de 3,33 $, calculé comme suit : 5 Go de données divisés par un tiers du mois :

5 GiB * $2
* 1/3
= $3.33

Aspects généraux

• L'utilisateur C crée et applique de grands aspects (10 Ko chacun). Pour 10 $par mois, l'utilisateur peut stocker 5 Gio de métadonnées, soit environ 500 000 aspects. En supposant qu'il y ait un aspect par table, cela représente un total de 500 000 tables avec des aspects.

• L'utilisateur D crée 10 000 types d'aspects (par exemple, ETL, gouvernance des données, qualité des données) et applique de grands aspects (10 Ko chacun) à l'aide de chacun des 10 types d'aspects. Pour 10 $par mois, il peut stocker 5 Gio de métadonnées, soit environ 500 000 aspects. En supposant 10 aspects par table, cela représente un total de 50 000 tables avec des aspects.

Étape suivante

• Consultez la documentation produit: Catalogue universel Dataplex, Data Catalog.
• Premiers pas avec Dataplex Universal Catalog
• Découvrez les solutions et cas d'utilisation de Dataplex Universal Catalog.