Stockage Blob Azure

Le type de source Stockage Blob Azure dans ArcGIS Velocity lit les enregistrements des fichiers stockés dans le stockage Blob Azure.

Exemples

Voici quelques exemples d’utilisation de la source Stockage Blob Azure :

  • Un chercheur souhaite charger des centaines de fichiers texte délimités du stockage Blob Azure vers Velocity pour analyser les données.
  • Un service SIG stocke les shapefiles de limites fréquemment utilisés dans le stockage Blob Azure et souhaite charger le shapefile de limites de comté dans Velocity en tant que limite d’agrégation.

Remarques sur l’utilisation

Tenez compte des points suivants lorsque vous utilisez la source Stockage Blob Azure :

  • Tous les fichiers identifiés dans le stockage Blob Azure par le schéma de dénomination défini pour le paramètre Dataset (Jeu de données) doivent avoir la même structure et le même type de géométrie. Si vous spécifiez un nom de dossier pour le paramètre Dataset (Jeu de données), tous les fichiers des répertoires doivent avoir la même structure et le même type de fichier.
  • La clé du compte est chiffrée lors du premier enregistrement de l’analyse et stockée dans cet état.
  • Lorsque vous spécifiez le chemin d’accès au dossier, utilisez des barres obliques (//).
  • Après avoir configuré les paramètres de connexion de la source, consultez la rubrique Configurer les données en entrée pour savoir comment définir la structure et les paramètres clés.

Paramètres

ParamètreDescriptionType de données

Clé du compte

Clé d’accès du compte de stockage Blob Azure.

Velocity utilise la clé d’accès du compte pour charger les sources de données spécifiées dans l’application.

La clé d’accès du compte est chiffrée lors du premier enregistrement de l’analyse et stockée dans cet état.

Chaîne

Nom du compte

Nom du compte de stockage Azure qui renferme les conteneurs de stockage d’objets blob Azure.

Chaîne

Suffixe d’extrémité

Suffixe du point d’extrémité utilisé pour accéder au stockage Blob Azure. Pour la plupart des utilisateurs, il s’agit du suffixe suivant : core.windows.net.

Chaîne

Nom du conteneur

Nom du conteneur de stockage d’objets blob Azure qui contient les fichiers à charger.

Chaîne

Chemin d’accès au dossier

Le chemin d’accès du dossier contenant les fichiers à charger dans Velocity. Voici quelques exemples :

  • Si les fichiers sont chargés à partir du niveau racine du stockage Blob Azure, entrez une barre oblique (/).
  • Si les fichiers sont chargés à partir d’un dossier du stockage Blob Azure, entrez une barre oblique suivie du chemin d’accès au dossier (par exemple, /gis_data_folder/folder_containing_desired_dataset).

Chaîne

Jeu de données

Nom du fichier à lire, si un seul fichier est chargé, ou schéma identifiant un jeu de fichiers, suivi de l’extension du type de fichier.

Pour créer un schéma identifiant un jeu de fichiers, utilisez un astérisque (*), seul ou associé à un nom de fichier partiel, en tant que caractère générique.

Tous les fichiers identifiés par le schéma de dénomination doivent posséder la même structure et le même type de géométrie.

Si vous chargez plusieurs fichiers et/ou des dossiers imbriqués, vous pouvez également définir le nom du dossier conteneur comme nom du jeu de données plutôt qu’un nom de fichier avec une extension. Si vous spécifiez un nom de dossier conteneur comme jeu de données, vous ne pouvez pas utiliser de caractères génériques, ni restreindre les types de fichier. Tous les fichiers du dossier spécifié sont ingérés, et doivent avoir le même type de fichier.

Voici quelques exemples :

  • Un seul fichier d’un dossier - filename.csv
  • Tous les fichiers d’un dossier - *.shp
  • Sélectionner les fichiers d’un dossier - sensor_data_201*.json
  • Tous les fichiers d’un répertoire ou d’un répertoire de répertoires (sous-répertoires) - containingFolderName

Chaîne

Charger uniquement les fichiers récents

Indique si la source du stockage Blob Azure charge tous les fichiers, ou seulement ceux créés ou modifiés depuis la dernière exécution de l’analyse.

  • La valeur par défaut est false (faux), ce qui implique que, lors de chaque exécution de l’analyse, tous les fichiers de la source et du chemin d’accès spécifiés portant le nom de jeu de données indiqué sont chargés.
  • Lorsque la valeur true (vrai) est définie, seuls les fichiers modifiés ou créés sont chargés lors de chaque exécution de l’analyse.

Ce paramètre ne peut être défini sur true (vrai) que pour les analyses de Big Data programmées.

Lors de la première exécution d’une analyse de Big Data programmée avec ce paramètre défini sur true (vrai), l’analyse s’exécute entièrement sans charger aucun fichier. Lors des analyses suivantes, les fichiers dont la date de dernière modification est postérieure à la date de la dernière analyse programmée sont chargés.

Booléen

Considérations et limitations

Vous devez prendre en compte certains points et certaines limitations lorsque vous utilisez la source Stockage Blob Azure :

  • Tous les fichiers identifiés dans le stockage Blob Azure par le schéma de dénomination défini dans la propriété de jeu de données doivent avoir la même structure et le même type de géométrie.
  • L’ingestion de données JSON avec une matrice d’objets référencée par un nœud racine n’est pas prise en charge actuellement pour Amazon S3 ou le stockage Blob Azure.