Mise en route des partages de fichiers Big Data—ArcGIS GeoAnalytics Server

Remarque :

Dans 10.9.1 ou version supérieure, inscrivez un partage de fichiers Big Data via la page de contenu de votre portail. Ceci est la méthode recommandée pour inscrire vos partages de fichiers Big Data. Utilisez uniquement Server Manager pour la mise à jour si votre partage de fichiers Big Data a été créé avec Server Manager et que vous ne l’avez pas remplacé par un partage de fichiers Big Data dans le portail.

Un partage de fichiers Big Data est un élément créé sur votre portail qui fait référence à un emplacement disponible sur votre instance ArcGIS GeoAnalytics Server. Vous pouvez utiliser l’emplacement du partage de fichiers Big Data comme entrée et sortie pour les données d’entité (points, polylignes, polygones et données tabulaires) des outils GeoAnalytics. Lorsque vous créez un partage de fichiers Big Data via la page de contenu de votre portail, au moins deux éléments sont créés dans votre portail :

Un élément de data store (partage de fichiers Big Data)
Un élément de partage de fichiers Big Data
Un élément de data store (répertoire Cloud) si vous inscrivez un répertoire Cloud pour un partage de fichiers Big Data

L’élément de partage de ficheirs Big Data pointe vers un service de catalogue Big Data, ce qui indique les jeux de données dans le partage de fichiers Big Data et leur structure (informations de géométrie et de temps incluses) et les formats de sortie, appelés modèles, que vous avez inscrits. Lors de l’utilisation d’un partage de fichiers Big Data en guise d’entrée d’un outil ArcGIS GeoAnalytics Server, vous pouvez accéder à l’élément de partage de fichiers Big Data pour exécuter l’analyse sur un jeu de données.

Remarque :

Un partage de fichiers Big Data n’est disponible que si l’administrateur du portail a activé GeoAnalytics Server. Pour en savoir plus sur l’activation de GeoAnalytics Server, reportez-vous à la rubrique Configurer ArcGIS GeoAnalytics Server.

Partages de fichiers Big Data

Il y a plusieurs avantages à utiliser un partage de fichiers Big Data :

Vous pouvez conserver vos données dans un emplacement accessible jusqu'à ce que vous soyez prêt à exécuter l'analyse. Un partage de fichiers Big Data accède aux données lors de l’exécution de l’analyse, afin que vous puissiez continuer à ajouter davantage de données à un jeu de données existant dans votre partage de fichiers Big Data sans avoir à réinscrire ou à publier vos données.
Vous pouvez également modifier le manifeste pour supprimer, ajouter ou mettre à jour des jeux de données du partage de fichiers Big Data.
Les partages de fichiers Big Data permettent de définir facilement l'heure et la géométrie et acceptent plusieurs formats d'heure dans un jeu de données unique.
Ils vous permettent également de partitionner vos jeux de données tout en traitant plusieurs partitions en tant que jeu de données unique.
L’utilisation de partages de fichiers Big Data pour les données en sortie permet de stocker vos résultats dans des formats utilisables par d’autres processus, comme un fichier parquet, en vue d’une analyse ou d’un stockage ultérieur.

Remarque :

Vous ne pouvez accéder aux partages de fichiers Big Data que si vous exécutez des GeoAnalytics Tools. Cela signifie que vous pouvez uniquement parcourir les fichiers Big Data et les ajouter à votre analyse ; vous ne pouvez pas visualiser les données sur une carte.

Les partages de fichiers Big Data peuvent faire référence aux sources de données en entrée suivantes :

Partage de fichiers : répertoire de jeux de données sur un disque local ou un partage réseau.
Apache Hadoop Distributed File System (HDFS) : répertoire HDFS de jeux de données.
Apache Hive : base de données Metastore Hive.
Cloud store : compartiment Amazon Simple Storage Service (S3), conteneur de stockage Microsoft Azure Blob ou stockage Microsoft Azure Data Lake Gen2 (répertoire administrateur ArcGIS Server uniquement) contenant un répertoire de jeux de données.

Lors de l’écriture de résultats dans un partage de fichiers Big Data, vous pouvez utiliser la sortie suivante de GeoAnalytics Tools :

Partage de fichiers
HDFS
Répertoire cloud

Les types de fichier suivants sont pris en charge en tant que jeux de données pour l’entrée et la sortie dans les partages de fichiers de données :

Fichiers délimités (tels que .csv, .tsv et .txt)
Shapefiles (.shp)
Fichiers Parquet (.parquet)
Remarque :
Seuls les fichiers Parquet non chiffrés sont pris en charge.
Fichiers ORC (.orc)

Les partages de fichiers Big Data constituent l’une des différentes façons dont les GeoAnalytics Tools peuvent accéder à vos données et ne sont pas requis pour GeoAnalytics Tools. Consultez Utiliser les GeoAnalytics Tools dans Map Viewer Classic pour obtenir la liste des entrées de données des GeoAnalytics Tools et des sorties possibles.

Vous pouvez enregistrer autant de partages de fichiers Big Data que vous en avez besoin. Chaque partage de fichiers Big Data peut avoir autant de jeux de données que vous souhaitez.

La table ci-dessous souligne certains termes importants lorsqu'il est question d'aborder les partages de fichiers Big Data.


Période	Description
Partage de fichiers Big Data	Emplacement inscrit auprès de votre instance GeoAnalytics Server à utiliser comme entrée ou comme sortie de jeu de données, ou bien à la fois comme entrée et comme sortie de GeoAnalytics Tools.
Service de catalogue Big Data	Service qui désigne les jeux de données en entrée et les schémas et les noms de modèle en sortie de votre partage de fichiers Big Data. Il est créé lors de l’enregistrement de votre partage de fichiers Big Data et lors de la création de votre manifeste. Pour en savoir plus sur les services de catalogue Big Data, consultez la documentation Service de catalogue Big Data dans l'aide de l'API REST d'ArcGIS Server.
Élément du partage de fichiers Big Data	Élément de votre portail qui fait référence au service de catalogue Big Data. Vous pouvez contrôler qui peut utiliser votre partage de fichiers Big Data comme entrée vers GeoAnalytics en partageant cet élément dans le portail.
Manifeste	Un fichier JSON souligne les jeux de données disponibles et le schéma pour les entrées dans votre partage de fichiers Big Data. Le manifeste est généré automatiquement lorsque vous inscrivez un partage de fichiers Big Data et peut être modifié lors de la mise à jour ou de l'utilisation d'un fichier d’astuces. Un seul partage de fichiers Big Data possède un manifeste.
Modèles en sortie	Un ou plusieurs modèles qui indiquent le type de fichier et la mise en page facultative lors de l’écriture de résultats vers un partage de fichiers Big Data. Par exemple, un modèle pourrait préciser que les résultats écrivent vers un fichier de forme. Un partage de fichiers Big Data peut avoir aucun, un ou plusieurs modèles en sortie.
Type de partage de fichiers Big Data	Le type d’emplacements que vous inscrivez. Par exemple, vous pourriez avoir un partage de fichiers Big Data ou saisir HDFS.
Format de jeu de données de partage de fichiers Big Data	Format des données que vous lisez ou écrivez. Par exemple, le type de fichier peut être un fichier de forme.
Fichier d'astuces	Un fichier facultatif que vous pouvez utiliser pour contribuer à générer un manifeste pour les fichiers délimités utilisés en tant qu’entrée.

Préparer l'inscription des données en tant que partage de fichiers Big Data

Pour utiliser vos jeux de données en tant qu’entrées dans un partage de fichiers Big Data, vérifiez que vos données sont correctement mises en forme. Consultez la rubrique ci-dessous pour la mise en page selon le type de partage de fichiers Big Data.

Partages de fichiers et HDFS

Pour préparer l’inscription de vos données en tant que partage de fichiers Big Data, vous devez organiser vos jeux de données dans des sous-dossiers, sous un seul dossier parent qui sera inscrit. Dans ce dossier parent que vous enregistrez, les noms des sous-dossiers représentent les noms de jeu de données. Si vos sous-dossiers contiennent plusieurs dossiers ou fichiers, tous les contenus des sous-dossiers de niveau supérieur sont lus comme jeu de données unique, et doivent partager la même structure. L’exemple suivant illustre l’inscription du dossier FileShareFolder contenant trois jeux de données : Earthquakes, Hurricanes et GlobalOceans. Lorsque vous inscrivez un dossier parent, tous les sous-répertoires du dossier spécifié sont également inscrits auprès de l’instance GeoAnalytics Server. Inscrivez toujours le dossier parent (par exemple, \\machinename\FileShareFolder) qui contient un ou plusieurs dossiers de jeux de données individuels.

Exemple d'un partage de fichiers Big Data contenant trois jeux de données : Earthquakes, Hurricanes et GlobalOceans.


|---FileShareFolder                 < -- The top-level folder is what is registered as a big data file share
   |---Earthquakes                  < -- A dataset "Earthquakes", composed of 4 csvs with the same schema
      |---1960
         |---01_1960.csv
         |---02_1960.csv
      |---1961
         |---01_1961.csv
         |---02_1961.csv
   |---Hurricanes                   < -- The dataset "Hurricanes", composed of 3 shapefiles with the same schema
      |---atlantic_hur.shp
      |---pacific_hur.shp
      |---otherhurricanes.shp
   |---GlobalOceans                 < -- The dataset "GlobalOceans", composed of a single shapefile
      |---oceans.shp

Bien que la terminologie diffère, la même structure est appliquée aux partages de fichiers et à HDFS. Un partage de fichiers contient un dossier ou répertoire supérieur et les jeux de données sont représentés par les sous-répertoires. Dans HDFS, l’emplacement du partage de fichiers est inscrit et contient des jeux de données. La table suivante indique les différences :


	Partage de fichiers	HDFS
Emplacement du partage de fichiers Big Data	Dossier ou répertoire	Chemin HDFS
Jeux de données	Sous-dossiers supérieurs	Jeux de données dans le chemin HDFS

Lorsque vos données sont organisées dans un dossier contenant des sous-dossiers de jeux de données, pour permettre à votre instance GeoAnalytics Server d’accéder à vos données, suivez les étapes de la rubrique Rendre vos données accessibles pour ArcGIS Server, puis inscrivez le dossier du jeu de données ou le chemin HDFS via le portail.

Hive

Remarque :

GeoAnalytics Server utilise Spark 3.0.1. La version de Hive doit être la version 2.3.7 ou 3.0.0–3.1.2.

Si vous essayez d’inscrire un fichier Big Data auprès d’une version de Hive différente de la version nécessaire, l’inscription du partage de fichiers Big Data échoue. Le cas échéant, redémarrez la boîte d’outils GeoAnalyticsManagement dans ArcGIS Server Administrator Directory > services > System > GeoAnalyticsManagement> stop. Répétez les étapes pour démarrer.

Dans Hive, toutes les tables d’une base de données sont reconnues comme jeux de données dans un partage de fichiers Big Data. L’exemple suivant présente un Metastore contenant deux bases de données, default et CityData. Lorsque vous inscrivez un partage de fichiers Big Data Hive, vous ne pouvez sélectionner qu’une seule base de données. Dans cet exemple, si vous sélectionnez la base de données CityData, le partage de fichiers Big Data contient deux jeux de données, à savoir FireData et LandParcels.


|---HiveMetastore                 < -- The top-level folder is what is registered as a big data file share
   |---default                    < -- A database
      |---Earthquakes
      |---Hurricanes
      |---GlobalOceans
   |---CityData				            < -- A database that is registered (specified in Server Manager)
      |---FireData
      |---LandParcels

Stockages cloud

Pour préparer l'inscription de vos données en tant que partage de fichiers Big Data dans un stockage cloud, vous devez organiser vos jeux de données dans des sous-dossiers, sous un seul dossier parent.

Voici un exemple de structuration des données. Cet exemple inscrit le dossier parent, FileShareFolder, qui contient trois jeux de données : Earthquakes, Hurricanes et GlobalOceans. Lorsque vous inscrivez un dossier parent, tous les sous-répertoires du dossier spécifié sont également inscrits auprès de l’instance GeoAnalytics Server.

Voici un exemple de structuration des données dans un stockage cloud qui sera utilisé comme partage de fichiers Big Data. Ce fichier Big Data contient trois jeux de données : Earthquakes, Hurricanes et GlobalOceans.


|---Cloud Store                          < -- The cloud store being registered
   |---Container or S3 Bucket Name       < -- The container (Azure) or bucket (Amazon) being registered as part of the cloud store
      |---FileShareFolder                < -- The parent folder that is registered as the 'folder' during cloud store registration
         |---Earthquakes                 < -- The dataset "Earthquakes", composed of 4 csvs with the same schema
            |---1960
               |---01_1960.csv
               |---02_1960.csv
            |---1961
               |---01_1961.csv
               |---02_1961.csv
         |---Hurricanes                  < -- The dataset "Hurricanes", composed of 3 shapefiles with the same schema
            |---atlantic_hur.shp
            |---pacific_hur.shp
            |---otherhurricanes.shp
         |---GlobalOceans                < -- The dataset "GlobalOceans", composed of 1 shapefile
            |---oceans.shp

Ajouter un partage de fichiers Big Data

Pour ajouter un partage de fichiers Big Data de type dossier, HDFS, Hive ou stockage Blob Microsoft Azure, compartiments Amazon Simple Storage Service (S3) ou répertoire Cloud de compartiments compatibles S3, reportez-vous à la rubrique Ajouter un partage de fichiers Big Data.

Procédez comme suit pour inscrire un répertoire Cloud Microsoft Azure Data Lake Gen2 en tant que partage de fichiers Big Data.

Prérequis :

Avant de commencer, vous devez disposer des éléments suivants et procéder comme suit :

Choisissez un nom pour votre partage de fichiers Big Data. Ce nom sera utilisé partout pour l’inscription du répertoire Cloud et l’inscription du partage de fichiers Big Data, sauf indication contraire. N’utilisez pas d’espaces ou de caractères spéciaux.
Une instance Azure Data Lake Gen2
Une clé partagée pour votre Azure Data Lake Gen2

Connectez-vous au répertoire du portail avec l’URL https://webadaptorhost.domain.com/webadaptorname/sharing/rest.
Procurez-vous l’ID de votre serveur GeoAnalytics Server en accédant à l’URL suivante : https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/0123456789ABCDEF/servers. Notez l’ID du serveur GeoAnalytics Server, qui servira dans les étapes suivantes.
Ajoutez ensuite le répertoire Cloud Data Lake Gen2 dans votre portail. Modifiez l’URL en https://webadaptorhost.domain.com/webadaptorname/sharing/rest/content/users/<username>/addItem, en remplaçant <username> par le nom d’utilisateur sous lequel vous êtes connecté.
Renseignez la page Ajouter un élément avec les informations suivantes :
- Type : Data Store
- Title (Titre) : utilisez le nom que vous avez choisi d’utiliser partout.
- Format : JSON
Pour le paramètre Text (Texte), utilisez l’objet JSON suivant et mettez à jour les paramètres comme suit :
- <title> : remplacez par le nom que vous allez utiliser partout.
- <data lake name> : remplacez par le nom de votre Data Lake dans Azure.
- <shared key> : remplacez par la clé partagée de votre Data Lake.
- <container name> : remplacez par le conteneur dans lequel vos données sont stockées.
- <folder name> : remplacez par le dossier dans lequel vos dossiers de données sont stockés.
```
{
   "path": "/cloudStores/<title>",
   "type": "cloudStore",
   "provider": "azuredatalakegen2store",
   "info": 
         {
          "isManaged": false,
          "connectionString": "{\"endpoint\":\"<data lake name>.dfs.core.windows.net\",\"authType\":\"SharedKey\",\"sharedKey\":\"<shared key>\"}",
          "container": "<container name>",          
          "folder": "<folder name>"
         }
}
  
```
Cliquez sur Ajouter un élément. Notez l’objet JSON qui est renvoyé.
Il ressemblera à cet exemple :
```
{
  "id": "ae514ea11d0a4a2cb720dd627694b098",
  "success": true,
  "folder": ""
}
```
Ouvrez un nouvel onglet et accédez à l’URL suivante : https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/self/datastores/addToServer. Renseignez le formulaire avec les informations suivantes :
- DatastoreId : utilisez l’ID renvoyé dans le JSON à l’étape précédente.
- ServerId : ID de votre GeoAnalytics Server.
- Format : JSON
Un message JSON concernant le statut sera renvoyé. En cas de réussite, passez à l’étape suivante.
Connectez-vous à ArcGIS Server Manager sur GeoAnalytics Server. Accédez à Site > Stockage des données. Passez en revue les répertoires de données inscrits, trouvez celui que vous venez de créer et copiez le nom de fichier.
Il sera au format <chosenname>_ds_<unique key>. Vous allez utiliser ce nom à l’étape suivante.
Ajoutez ensuite le partage de fichiers Big Data qui fait référence à votre répertoire Cloud dans votre portail. Accédez à l’URL https://webadaptorhost.domain.com/webadaptorname/sharing/rest/content/users/<username>/addItem, en remplaçant <username> par le nom d’utilisateur sous lequel vous êtes connecté.
Renseignez les valeurs suivantes dans le formulaire :
- Type : Data Store
- Title (Titre) : utilisez le nom que vous avez choisi d’utiliser partout.
- Format : JSON
Pour le paramètre Text (Texte), utilisez l’objet JSON suivant et mettez à jour les paramètres comme suit :
- <cloud_title> : utilisez le nom de l’étape 7.
- <title> : remplacez par le nom choisi que vous avez utilisé ailleurs.
```
{
   "info":{
      "connectionString":"{\"path\":\"/cloudStores/<cloud_title>\"}",
      "connectionType":"dataStore"
   },
   "path":"/bigDataFileShares/<title>",
   "type":"bigDataFileShare"
}
```
Cliquez sur Ajouter un élément. Notez l’objet JSON qui est renvoyé.
Il ressemblera à cet exemple :
```
{
  "id": "bk514ea14d0a3a2cb890hh627694b071",
  "success": true,
  "folder": ""
}
```
Retournez à l’URL suivante : https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/self/datastores/addToServer. Renseignez le formulaire avec les informations suivantes :
- DatastoreId : utilisez l’ID renvoyé dans le JSON à l’étape précédente.
- ServerId : ID de votre GeoAnalytics Server.
- Format : JSON

Vous disposez maintenant d’un élément de partage de fichiers Big Data et d’un élément de répertoire Cloud. Une fois votre élément de partage de fichiers Big Data créé, GeoAnalytics Server génère un troisième élément, qui inclut le manifeste de vos données et que vous pouvez modifier dans le contenu de votre portail. La création peut prendre plusieurs minutes selon la quantité de jeux de données. Pour modifier vos jeux de données, reportez-vous à la rubrique Gérer les partages de fichiers Big Data dans un portail ci-dessous.

Gérer les partages de fichiers Big Data dans un portail

Une fois que vous avez créé un partage de fichiers Big Data, vous pouvez examiner les jeux de données qu’il contient et les modèles qui indiquent le mode d’écriture des résultats enregistrés dans les partages de fichiers Big Data.

Modifier un partage de fichiers Big Data

Lorsqu’un élément de partage de fichiers Big Data est créé, un manifeste est automatiquement généré et chargé pour les données en entrée. Lors de la génération d'un manifeste, les champs représentant la géométrie et l’heure ne sont pas toujours évalués correctement et vous devrez peut-être les modifier. Pour mettre à jour un manifeste et la façon dont les jeux de données sont représentés, suivez les étapes de la rubrique Mettre à jour les partages de fichiers Big Data. Pour en savoir plus sur le manifeste de partage de fichiers Big Data, reportez-vous à la rubrique Manifeste de partage de fichiers Big Data dans l’aide ArcGIS Server.

Si vous avez créé votre partage de fichiers Big Data dans ArcGIS Server avec le gestionnaire, suivez les étapes de la rubrique Mettre à jour les manifestes de partage de fichiers Big Data dans Server Manager.

Modifier les modèles en sortie pour un partage de fichiers Big Data

Si vous décidez d’utiliser votre partage de fichiers Big Data comme emplacement en sortie, les modèles en sortie sont automatiquement générés. Ces modèles mettent en avant la mise en page des résultats de l’analyse en sortie, comme le type de fichier, et la manière dont l’heure et la géométrie seront enregistrés. Si vous souhaitez modifier la mise en forme de la géométrie ou de l’heure, ou ajouter ou supprimer des modèles, vous pouvez modifier les modèles. Pour mettre à jour les modèles en sortie, suivez les étapes de la rubrique Créer, mettre à jour et afficher des modèles en sortie. Pour en savoir plus sur les modèles en sortie, reportez-vous à la rubrique Modèles en sortie dans les partages de fichiers Big Data.

Migrer les partages de fichiers Big Data créés dans Server Manager vers un portail

Les partages de fichiers Big Data créés avec un portail présentent de nombreux avantages par rapport aux fichiers Big Data créés dans Server Manager, par exemple :

Expérience utilisateur optimisée pour faciliter la mise à jour des jeux de données.
Expérience simplifiée pour inscrire vos partages de fichiers Big Data.
Les éléments sont stockés et partagés avec les identifiants de connexion du portail

Il est recommandé de transférer les partages de fichiers Big Data existants depuis Server Manager vers un portail. Dans certains cas, cela est obligatoire. Dans les cas suivants, vous devez migrer les partages de fichiers Big Data vers un portail pour continuer à les utiliser :

Partages de fichiers Big Data basés sur un répertoire Cloud Microsoft Azure Data Lake Gen1.

Pour migrer un partage de fichiers Big Data depuis Server Manager vers un portail, vérifiez que vous disposez des éléments suivants :

Les identifiants de connexion et l’emplacement de fichier de votre partage de fichiers Big Data configuré.
Le cas échant, les identifiants de connexion et l’emplacement de fichier de votre répertoire Cloud configuré.

Une fois les identifiants de connexion connus, procédez comme suit :

Connectez-vous à Server Manager sur votre site GeoAnalytics Server.
Accédez à Site > Stockage des données. Cliquez sur le bouton de mise à jour dans le partage de fichiers Big Data à migrer.
Accédez à Advanced (Avancé) > Manifest (Manifeste). Cliquez sur le bouton Download (Télécharger) pour enregistrer le manifeste.
Si vous avez des astuces, procédez de la même manière pour les astuces. Cliquez sur Hints (Astuces)Download (Télécharger) pour enregistrer votre fichier d’astuces. Renommez votre extension de fichier .dat en .txt.
Si vous avez des modèles en sortie sous la section Advanced (Avancé)Output Templates (Modèles en sortie), copiez le texte et enregistrez-le dans un fichier texte.
Créez un partage de fichiers Big Data dans le contenu du portail à l’aide du même type et du même emplacement en entrée que ceux utilisés précédemment.
Si vous ne connaissez pas les identifiants de connexion, votre administrateur peut les trouver dans Administrateur de serveur à l’aide de l’option decrypt=true dans les éléments de partage de fichiers Big Data et de répertoire Cloud.
- Si vous mettez à niveau le répertoire Cloud Microsoft Azure Data Lake Gen1 vers Gen2, procédez comme suit.
- Pour tout autre type de partage de fichiers Big Data, suivez les étapes de la rubrique Ajouter un élément de data store avec les mêmes identifiants de connexion et emplacement que votre partage de fichiers Big Data existant.
Une fois votre partage Big Data créé, cliquez sur Datasets (Jeux de données) et activez l’option Show advanced (Afficher les paramètres avancés).
Chargez le manifeste enregistré précédemment en cliquant sur Upload (Charger) dans la section du manifeste. Accédez au fichier JSON du manifeste qui a été enregistré plus tôt et cliquez sur Upload (Charger). Cliquez sur le bouton Sync (Synchroniser) pour répercuter les changements.
Si vous avez un fichier d’astuces à charger, suivez la même procédure et chargez votre fichier d’astuces sous l’option Show advanced (Afficher les paramètres avancés) > Hints (Astuces) > Upload (Charger). Cliquez sur le bouton Sync (Synchroniser) pour répercuter les changements.
Pour charger les modèles en sortie, procédez de l’une des manières suivantes :
- Ajoutez manuellement les modèles en sortie à l’aide de l’élément de partage de fichiers Big Data Outputs (Sorties) > Add output templates (Ajouter des modèles en sortie).
- Mettez à jour le fichier JSON de l’élément de partage de fichiers Big Data via le répertoire administrateur ArcGIS Server. Cette procédure n’est recommandée que si vous savez mettre à jour des fichiers JSON.

Vous disposez maintenant d’un partage de fichiers Big Data et d’un manifeste pour votre élément de partage de fichiers Big Data dans votre portail. Vous pouvez actualiser vos processus de façon à utiliser et désigner ce partage de fichiers Big Data. Si vous êtes certain que tout fonctionne conformément à vos attentes, supprimez le partage de fichiers Big Data d’origine dans Server Manager.

Analyse d'un partage de fichiers Big Data

Vous pouvez exécuter une analyse sur un jeu de données dans un partage de fichiers Big Data à l’aide d’un client prenant en charge GeoAnalytics Server, à savoir l’un des suivants :

ArcGIS Pro
Map Viewer Classic
ArcGIS REST API
ArcGIS API for Python

Pour exécuter votre analyse sur un partage de fichiers Big Data via ArcGIS Pro ou Map Viewer Classic, sélectionnez l’outil GeoAnalytics Tools que vous souhaitez utiliser. Pour sélectionner les données à entrer dans l’outil, accédez à l’emplacement de vos données sous Portal (Portail) dans ArcGIS Pro ou ouvrez la boîte de dialogue Browse Layers (Rechercher des couches) dans Map Viewer Classic. Les données se trouvent dans Mon contenu si vous les avez vous-même inscrites. Sinon, recherchez dans Groups (Groupes) ou All Portal (L’intégralité du portail). La couche de partage de fichiers Big Data sélectionnée en vue d'être analysée ne s'affiche pas sur la carte.

Remarque :

Vérifiez que vous êtes connecté à un compte de portail qui peut accéder au partage de fichiers Big Data inscrit. Vous pouvez effectuer une recherche sur votre portail en utilisant le terme bigDataFileShare* pour trouver rapidement tous les partages de fichiers Big Data auxquels vous avez accès.

Pour exécuter l’analyse sur un partage de fichiers Big Data via ArcGIS REST API, utilisez l’URL du service de catalogue Big Data en entrée. Si vous avez créé le partage de fichiers Big Data dans le portail, il sera au format {"url":" https://webadaptorhost.domain.com/webadaptorname/rest/DataStoreCatalogs/bigDataFileShares_filesharename/"}. Par exemple, si la machine s’appelle example, le domaine esri, l’adapteur Web server, le partage de fichiers Big Data MyData et le jeu de données Earthquakes, l’URL a le format : {"url":" https://example.esri.com/server/rest/DataStoreCatalogs/bigDataFileShares_MyData/Earthquakes_uniqueID"}. Si vous avez créé le partage de fichiers Big Data dans Server Manager, il sera au format {"url":"https://webadaptorhost.domain.com/webadaptorname/rest/DataStoreCatalogs/bigDataFileShares_filesharename/BigDataCatalogServer/dataset"}

Pour en savoir plus sur les données à entrer dans le cadre d’une analyse de Big Data via REST, reportez-vous à la rubrique Entrée d’entités dans la documentation REST API des services ArcGIS.

Enregistrer les résultats dans un partage de fichiers Big Data

Vous pouvez exécuter l’analyse sur un jeu de données (partage de fichiers Big Data ou autre entrée) et enregistrer les résultats dans un partage de fichiers Big Data. Lorsque vous enregistrez les résultats vers un partage de fichiers Big Data, vous ne pouvez pas les visualiser. Vous pouvez y parvenir via les clients suivants :

Map Viewer Classic
ArcGIS REST API
ArcGIS API for Python

Lorsque vous écrivez des résultats vers un partage de fichiers Big Data, le manifeste en entrée est mis à jour pour inclure le jeu de données que vous venez d’enregistrer. Les résultats que vous avez écrit vers le partage de fichiers Big Data sont désormais disponibles en tant qu’entrée pour l’exécution d’un autre outil.

Vous avez un commentaire à formuler concernant cette rubrique ?