Iniciar com compartilhamentos do arquivo de grandes dados

Anotação:

Na versão 10.9.1 ou superior, registre um compartilhamento de arquivo de big data por meio da página de conteúdo do portal. Esta é a maneira recomendada de registrar seus compartilhamentos de arquivos do big data. Somente utilize Server Manager paa edição se seu compartilhamento de arquivo de big data foi criado utilizando Server Manager e você não o substituiu por um compartilhamento de arquivo de big data no portal.

Um compartilhamento do arquivo big data é um item criado em seu portal que faz referência a um local disponível no seu ArcGIS GeoAnalytics Server. Você pode usar o local do compartilhamento de arquivo do big data como entrada e saída para dados de feição (dados de pontos, polilinhas, polígonos e tabulares) de ferramentas do GeoAnalytics. Quando você cria um compartilhamento de arquivo do big data por meio da página de conteúdo do portal, pelo menos dois itens são criados em seu portal:

• Um item de armazenamento de dados (compartilhamento de arquivo de big data)
• Um item de compartilhamento de arquivo de big data
• Um item do data store (armazenamento na nuvem), se você estiver registrando um armazenamento na nuvem para um compartilhamento de arquivos do big data

O item do compartilhamento de arquivo do big data aponta para um serviço do catálogo de grandes dados, que descreve os conjuntos de dados no compartilhamento de arquivo do big data e seus esquemas, incluindo informações de geometria e tempo, e os formatos de saída, denominados de modelos, que você registrou. Ao utilizar um compartilhamento de arquivo do big data para a entrada em uma ferramenta do ArcGIS GeoAnalytics Server, é possível procurar o item do compartilhamento de arquivo do big data para executar a análise em um conjunto de dados.

Anotação:

Um compartilhamento de arquivo do big data estará somente disponível se o administrador do portal habilitou o GeoAnalytics Server. Para saber mais sobre habilitar o GeoAnalytics Server, consulte Instalar o ArcGIS GeoAnalytics Server.

Compartilhamentos de arquivo do Big Data

Há vários benefícios em utilizar um compartilhamento de arquivo do big data:

• Você pode manter seus dados em um local acessível até que você esteja pronto para executar a análise. Um compartilhamento do arquivo de grandes dados acessa os dados quando a análise é executada, portanto, você pode continuar adicionando dados em um conjunto de dados existente em seu compartilhamento do arquivos de grandes dados sem ter que registrar novamente ou publicar seus dados.
• Você também pode modificar o manifesto para remover, adicionar ou atualizar conjunto de dados no compartilhamento do arquivo de grandes dados.
• Os compartilhamentos do arquivo de grandes dados são extremamente flexíveis sobre como o tempo e a geometria podem ser definidos e permite múltiplos formatos de tempo em um único conjunto de dados.
• Os compartilhamentos do arquivo de grandes dados também permitem a você particionar seus conjuntos de dados, enquanto ainda tratar múltiplas partições como um único conjunto de dados.
• O uso de compartilhamentos do arquivo de grandes dados para dados de saída permite a você armazenar seus resultados em formatos que você pode utilizar para outros fluxos de trabalho, como um arquivo de parquet para análise posterior ou armazenamento.

Anotação:

Os compartilhamentos do arquivos big data são somente acessados ao executar o GeoAnalytics Tools. Isto significa que você pode somente procurar e adicionar arquivos de grandes dados na sua análise; você não pode visualizar os dados em um mapa.

Os compartilhamentos do arquivo de grandes dados podem referenciar as seguintes fontes de dados de entrada:

• Compartilhamento de arquivo—Um diretório de conjunto de dados em um disco local ou rede de compartilhamento.
• Apache Hadoop Distributed File System (HDFS)—Um diretório de conjuntos de dados do HDFS .
• Apache Hive—Bancos de dados de metastore do Hive.
• Armazenamento na nuvem—Um contêiner Amazon Simple Storage Service (S3), Microsoft Azure contêiner Blob ou Microsoft Azure Data Lake Gen2 (ArcGIS Server Administrator Directory somente) armazenar contendo um diretório de conjuntos de dados.

Ao gravar resultados em um compartilhamento de arquivo do big data, é possível utilizar a seguinte de saída das GeoAnalytics Tools:

• Compartilhamento de arquivo
• HDFS
• Armazenamento de nuvem

Os seguintes tipos de arquivos são suportados como conjuntos de dados para entrada e saída em compartilhamentos do arquivo de grandes dados:

• Arquivos delimitados (como .csv, .tsv e .txt)
• Shapefiles (.shp)
• Arquivos Parquet (.parquet)

  Anotação:

  Apenas arquivos parquet não criptografados são suportados.

• Arquivos ORC (.orc)

Os compartilhamentos do arquivo big data é uma das diversas maneiras que as GeoAnalytics Tools podem acessar seus dados e não são um requisito para GeoAnalytics Tools. Consulte Usar as GeoAnalytics Tools noMap Viewer Classic para uma lista de possíveis entradas de dados do GeoAnalytics Tools como saídas.

Você pode registrar quantos compartilhamentos do arquivo de grandes dados você precisar. Cada compartilhamento do arquivo de grandes dados pode ter quantos conjuntos de dados você desejar.

A tabela abaixo descreve alguns termos importantes ao falar sobre compartilhamentos do arquivo de grandes dados.

Termo	Descrição
Compartilhamento do arquivo de grandes dados	Um local registrado com seu GeoAnalytics Server para ser utilizado como entrada, saída do conjunto de dados ou ambas a entrada e saída para ferramentas do GeoAnalytics Tools.
Serviço de catálogo do Big Data	Um serviço que descreve os conjuntos de dados e esquemas de entrada e os nomes dos modelos de saída do compartilhamento do arquivos de grandes dados. Isto é criado quando seu compartilhamento do arquivo de grandes dados é registrado e seu manifesto é criado. Para aprender mais sobre serviços do catálogo do big data, consulte a documentação Serviço de Catálogo do Big Data na ajuda do ArcGIS Services REST API.
Item de compartilhamento do arquivo de grandes dados	Um item no seu portal que faz referência ao serviço de catálogo do Big Data. Você pode controlar quem pode utilizar seu compartilhamento do arquivo de grandes dados como entrada para GeoAnalytics compartilhando este item no portal.
Manifesto	Um arquivo JSON que descreve os conjuntos de dados disponíveis e o esquema para entradas em seu compartilhamento do arquivo de grandes dados. O manifesto é gerado automaticamente quando você registra um compartilhamento do arquivo de grandes dados e pode ser modificado ao editar ou utilizar um arquivo de dicas. Um único compartilhamento do arquivo de grandes dados tem um manifesto.
Modelos de saída	Um ou mais modelos que descrevem o tipo de arquivo e a formatação opcional ao gravar os resultados em um compartilhamento do arquivo de grandes dados. Por exemplo, um modelo pode especificar que os resultados sejam gravados em um shapefile. Um compartilhamento do arquivo de grandes dados pode ter nenhum, um ou mais modelos de saída.
Tipo de compartilhamento do arquivo de grandes dados	O tipo de locais que você está registrando. Por exemplo, você pode ter um compartilhamento do arquivo de grandes dados ou digitar HDFS.
Formato do conjunto de dados do compartilhamento de arquivo do big data	O formato dos dados que você está lendo ou gravando. Por exemplo, o tipo do arquivo pode ser shapefile.
Arquivo de sugestões	Um arquivo opcional que pode ser utilizado para auxiliar na geração de um manifesto para arquivos delimitados utilizados como uma entrada.

Preparar seus dados para serem registrados como um compartilhamento do arquivo de grandes dados

Para usar seus conjuntos de dados como entradas em um compartilhamento de arquivo de big data, certifique-se de que seus dados estejam formatados corretamente. Veja abaixo a formatação baseada no tipo de compartilhamento do arquivo de grandes dados.

Compartilhamentos de arquivo e HDFS

Para preparar seus dados para um compartilhamento de arquivo de big data, você deve formatar seus conjuntos de dados como subpastas em uma única pasta pai que será registrada. Nesta pasta principal que você registrar, os nomes das subpastas representarão os nomes do conjunto de dados. Se as suas subpastas tiverem múltiplas pastas ou arquivos, todo o conteúdo do nível superior das subpastas serão lidos como um único conjunto de dados e deverão compartilhar o mesmo esquema. O seguinte é um exemplo de como registrar a pasta FileShareFolder que contém três conjuntos de dados, denominados Earthquakes, Hurricanes e GlobalOceans. Ao registrar uma pasta principal, todos os subdiretórios na pasta que você especificar também serão registrados com o GeoAnalytics Server. Sempre registre a pasta principal (por exemplo, \\machinename\FileShareFolder) que contém uma ou mais pastas do conjunto de dados individual.

Exemplo de um compartilhamento do arquivo de grandes dados que contém três conjuntos de dados: Earthquakes, Hurricanes e GlobalOceans.

|---FileShareFolder                 < -- The top-level folder is what is registered as a big data file share
   |---Earthquakes                  < -- A dataset "Earthquakes", composed of 4 csvs with the same schema
      |---1960
         |---01_1960.csv
         |---02_1960.csv
      |---1961
         |---01_1961.csv
         |---02_1961.csv
   |---Hurricanes                   < -- The dataset "Hurricanes", composed of 3 shapefiles with the same schema
      |---atlantic_hur.shp
      |---pacific_hur.shp
      |---otherhurricanes.shp
   |---GlobalOceans                 < -- The dataset "GlobalOceans", composed of a single shapefile
      |---oceans.shp

Esta mesma estrutura é aplicada nos compartilhamentos de arquivo e HDFS, embora a terminologia seja diferente. Em um compartilhamento de arquivo, há uma pasta ou diretório de nível superior e os conjuntos de dados são representados pelos subdiretórios. No HDFS, a localização de compartilhamento do arquivo é registrada e contém conjuntos de dados. A tabela seguinte esboça as diferenças:

	Compartilhamento de arquivo	HDFS
Local de compartilhamento do arquivo de grandes dados	Uma pasta ou diretório	Um caminho do HDFS
Conjuntos de Dados	Subpastas de nível superior	Conjuntos de dados dentro de caminho do HDFS

Depois que seus dados estiverem organizados como uma pasta com subpastas de conjunto de dados, torne seus dados acessíveis para seu GeoAnalytics Server seguindo os passos em Tornar seus dados acessíveis para ArcGIS Server e registrar a pasta do conjunto de dados ou o caminho do HDFS por meio do portal.

Hive

Anotação:

O GeoAnalytics Server usa Spark 3.0.1. Hive deve ser da versão 2.3.7 ou 3.0.0–3.1.2.

Se você tentar e registrar um compartilhamento do arquivo de big data com Hive que não seja a versão correta, o registro de compartilhamento do arquivo de big data falhará. Se isto acontecer, reinicie a caixa de ferramentas do GeoAnalyticsManagement no ArcGIS Server Administrator Directory, > services > System > GeoAnalyticsManagement> stop. Repita as etapas para iniciar.

No Hive, todas as tabelas em um banco de dados são reconhecidas como conjunto de dados em um compartilhamento do arquivo big data. No exemplo seguinte, há uma metastore com dois bancos de dados, default e CityData. Ao registrar um compartilhamento de arquivo de big data Hive, apenas um banco de dados pode ser selecionado. Neste exemplo, se o banco de dados CityData foi selecionado, haverá dois conjuntos de dados no compartilhamento do arquivo big data, FireData e LandParcels.

|---HiveMetastore                 < -- The top-level folder is what is registered as a big data file share
   |---default                    < -- A database
      |---Earthquakes
      |---Hurricanes
      |---GlobalOceans
   |---CityData				            < -- A database that is registered (specified in Server Manager)
      |---FireData
      |---LandParcels

Armazenamentos de nuvem

Para preparar seus dados para um compartilhamento de arquivo do big data em um armazenamento de nuvem, formate seu conjunto de dados como subpastas em uma única pasta principal.

O seguinte é um exemplo de como estruturar seus dados. Este exemplo registra a pasta principal, FileShareFolder, que contém três conjuntos de dados: Earthquakes, Hurricanes e GlobalOceans. Ao registrar uma pasta principal, todos os subdiretórios na pasta que você especificar também serão registrados com o GeoAnalytics Server.

Exemplo de como estruturar dados em um armazenamento de nuvem que será utilizado como um compartilhamento de arquivo do big data. Este arquivo de grandes dados contém três conjunto de dados: Earthquakes, Hurricanes e GlobalOceans.

|---Cloud Store                          < -- The cloud store being registered
   |---Container or S3 Bucket Name       < -- The container (Azure) or bucket (Amazon) being registered as part of the cloud store
      |---FileShareFolder                < -- The parent folder that is registered as the 'folder' during cloud store registration
         |---Earthquakes                 < -- The dataset "Earthquakes", composed of 4 csvs with the same schema
            |---1960
               |---01_1960.csv
               |---02_1960.csv
            |---1961
               |---01_1961.csv
               |---02_1961.csv
         |---Hurricanes                  < -- The dataset "Hurricanes", composed of 3 shapefiles with the same schema
            |---atlantic_hur.shp
            |---pacific_hur.shp
            |---otherhurricanes.shp
         |---GlobalOceans                < -- The dataset "GlobalOceans", composed of 1 shapefile
            |---oceans.shp

Adicionar compartilhamento de arquivo do big data

Para adicionar um compartilhamento de arquivo de big data do tipo pasta, HDFS, Hive ou armazenamento Microsoft Azure Blob, contêiners Amazon Simple Storage Service (S3) buckets ou armazenamento em nuvem de contêiners S3 compatíveis, consulte Adicionar um compartilhamento de arquivo de big data.

Siga estas etapas para registrar um armazenamento na nuvem Microsoft Azure Data Lake Gen2 como um compartilhamento de arquivo de big data.

Pré-requisitos:

Antes de começar, certifique-se de ter e fazer o seguinte:

• Escolha um nome para seu compartilhamento de arquivo de big data. Esse nome será usado para registro de armazenamento em nuvem e registro de compartilhamento de arquivo de big data, salvo indicação em contrário. Não use espaços ou caracteres especiais.
• Um Azure Data Lake Gen2
• Uma chave compartilhada para o seu Azure Data Lake Gen2

1. Entre no seu Portal Directory utilizando a URL https://webadaptorhost.domain.com/webadaptorname/sharing/rest.
2. Obtenha o ID do servidor do seu GeoAnalytics Server navegando até o seguinte URL: https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/0123456789ABCDEF/servers. Anote o ID do servidor GeoAnalytics Server, que será usado em etapas posteriores.
3. Em seguida, adicione o armazenamento em nuvem Data Lake Gen2 ao seu portal. Modifique a URL para https://webadaptorhost.domain.com/webadaptorname/sharing/rest/content/users/<username>/addItem, substituindo <username> com o nome de usuário com o qual você fez login.
4. Preencha a página Adicionar Item com as seguintes informações:

   • Tipo—Data Store

   • Título—Use o nome que você escolheu para usar por toda parte.

   • Formato—JSON

   Para o parâmetro Text use o seguinte JSON e atualize os parâmetros conforme descrito:

   • <title>—Substitua pelo nome escolhido que você usará
   • <data lake name>—Substitua pelo nome do seu Data Lake no Azure.
   • <shared key>—Substitua pela chave compartilhada para seu Data Lake.
   • <container name>—Substitua pelo contêiner em que seus dados estão armazenados.
   • <folder name>—Substitua pela pasta em que suas pastas de dados estão armazenadas.

   {
      "path": "/cloudStores/<title>",
      "type": "cloudStore",
      "provider": "azuredatalakegen2store",
      "info": 
            {
             "isManaged": false,
             "connectionString": "{\"endpoint\":\"<data lake name>.dfs.core.windows.net\",\"authType\":\"SharedKey\",\"sharedKey\":\"<shared key>\"}",
             "container": "<container name>",          
             "folder": "<folder name>"
            }
   }
     
   

5. Clique em Adicionar Item. Anote o objeto JSON retornado.

   Será semelhante a esta amostra:

   {
     "id": "ae514ea11d0a4a2cb720dd627694b098",
     "success": true,
     "folder": ""
   }

6. Abra uma nova guia e vá para a seguinte URL: https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/self/datastores/addToServer. Preencha o formulário com as seguintes informações:
   • DatastoreId—Use o ID retornado no JSON da etapa anterior.

   • ServerId—O ID de seu GeoAnalytics Server.

   • Formato—JSON

   Isso retornará uma mensagem JSON do status. Se for bem-sucedido, continue na próxima etapa.

7. Entre no ArcGIS Server Manager no GeoAnalytics Server. Vá até Site > Armazenamentos de Dados. Procure nos armazenamentos de dados registrados e encontre aquele que você acabou de criar e copie o nome do arquivo.

   Será no formato <chosenname>_ds_<unique key>. Você usará esse nome na próxima etapa.

8. Em seguida, adicione o compartilhamento de arquivo de big data referenciando seu armazenamento em nuvem ao seu portal. Acesse a URL https://webadaptorhost.domain.com/webadaptorname/sharing/rest/content/users/<username>/addItem, substituindo <username> com o nome de usuário com o qual você fez login.

   Preencha os seguintes valores no formulário:

   • Tipo—Data Store

   • Título—Use o nome que você escolheu para usar por toda parte.

   • Formato—JSON

   Para o parâmetro Text use o seguinte JSON e atualize os parâmetros conforme descrito:

   • <cloud_title>—Use o nome da Etapa 7.
   • <title>—Substitua pelo mesmo nome escolhido que você usou em outro lugar.

   {
      "info":{
         "connectionString":"{\"path\":\"/cloudStores/<cloud_title>\"}",
         "connectionType":"dataStore"
      },
      "path":"/bigDataFileShares/<title>",
      "type":"bigDataFileShare"
   }
   

9. Clique em Adicionar Item. Anote o objeto JSON retornado.

   Será semelhante a esta amostra:

   {
     "id": "bk514ea14d0a3a2cb890hh627694b071",
     "success": true,
     "folder": ""
   }

10. Retornar para a seguinte URL: https://webadaptorhost.domain.com/webadaptorname/sharing/rest/portals/self/datastores/addToServer. Preencha o formulário com as seguintes informações:
    • DatastoreId—Use o ID retornado no JSON da etapa anterior.

    • ServerId—O ID de seu GeoAnalytics Server.

    • Formato—JSON

Agora você tem um item de compartilhamento de arquivo de big data e um item de armazenamento em nuvem. Depois que seu item de compartilhamento de arquivo de big data é criado, o GeoAnalytics Server criará um terceiro item, que inclui o manifesto dos seus dados, que você pode modificar nos conteúdos do seu portal. Isso pode levar alguns minutos para ser criado, dependendo da quantidade de conjuntos de dados. Para modificar seus conjuntos de dados, consulte Gerenciar compartilhamentos de arquivos de big data em um portal abaixo.

Gerenciar compartilhamentos de arquivo do big data em um portal

Depois de criar um compartilhamento de arquivo de big data, você pode revisar os conjuntos de dados nele e os modelos que descrevem como os resultados salvos em compartilhamentos de arquivo de big data serão gravados.

Modificar um compartilhamento de arquivo do big data

Quando um item de compartilhamento de arquivo de big data é criado, um manifesto para os dados de entrada é gerado e carregado automaticamente. O processo de gerar um manifesto nem sempre pode estimar os campos representando a geometria e o tempo corretamente e você pode precisar aplicar edições. Para editar um manifesto e como os conjuntos de dados são representados, siga as etapas em Editar compartilhamentos de arquivos de big data.. Para saber mais sobre o manifesto de compartilhamento de arquivos do big data, consulte Manifesto de compartilhamento de arquivos do big data na ajuda do ArcGIS Server.

Se você criou seu compartilhamento de arquivo de big data no ArcGIS Server utilizando Manager, siga as etapas em Editar manifestos do compartilhamento de arquivo de big data no Server Manager.

Modifique modelos de saída para um compartilhamento de arquivo de big data

Quando você escolhe utilizar o compartilhamento de arquivo do big data como um local de saída, os modelos de saída são gerados automaticamente. Estes modelos descrevem a formatação dos resultados da análise de saída, como o tipo de arquivo e como o tempo e a geometria serão registrados. Se você deseja modificar a geometria ou a formatação de hora, ou adicionar ou excluir modelos, poderá modificar os modelos. Para editar os modelos de saída, siga as etapas em Crie, edite e visualize modelos de saída. Para aprender mais sobre modelos de saída, consulte Modelos de saída em um compartilhamentos de arquivo do big data.

Se você criou seu compartilhamento de arquivo de big data no ArcGIS Server utilizando Manager, siga as etapas em Editar manifestos do compartilhamento de arquivo de big data no Server Manager .

Migrar compartilhamentos de arquivos de big data criados no Server Manager para um portal

Os compartilhamentos de arquivos de big data criados usando um portal têm muitas vantagens sobre os compartilhamentos de arquivos de big data criados no Server Manager, por exemplo:

• Uma experiência de usuário aprimorada para facilitar a edição de conjuntos de dados.
• Experiência mais simples para registrar seus compartilhamentos de arquivos de big data.
• Os itens são armazenados e compartilhados usando credenciais do portal

Recomenda-se que você mova os compartilhamentos de arquivos de big data existentes para um portal do Server Manager. Em alguns casos, é necessário. Nos casos a seguir, você deve migrar os compartilhamentos de arquivos de big data para um portal para continuar a usá-los:

• Compartilhamentos de arquivos de big data com base em um armazenamento na nuvem do Microsoft Azure Data Lake Gen1.

Para migrar um compartilhamento de arquivo de big data do Server Manager para um portal, certifique-se de ter o seguinte:

• As credenciais e o local do arquivo de seu compartilhamento de arquivo de big data configurado.
• Se aplicável, as credenciais e o local do arquivo de seu armazenamento em nuvem configurado.

Depois de saber as credenciais, conclua as seguintes etapas:

1. Entre no Server Manager em seu site do GeoAnalytics Server.
2. Vá até Site > Armazenamentos de Dados. Clique no botão de edição no compartilhamento de arquivo de big data que você gostaria de migrar.
3. Vá até Avançado > Manifesto. Clique no botão Download para salvar o manifesto.
4. Se você tiver alguma dica, conclua as mesmas etapas para dicas. Clique em DicasDownload para salvar seu arquivo de dicas. Renomeie sua extensão de arquivo do .dat para .txt.
5. Se você tiver modelos de saída na seção AvançadoModelos de Saída, copie o texto e salve-o em um arquivo de texto.
6. Crie um compartilhamento de arquivo de big data no conteúdo do portal usando o mesmo tipo e local de entrada usado anteriormente.

   Se você não souber as credenciais, seu administrador poderá encontrá-las em Administrador do Servidorutilizando a opção decrypt=true no compartilhamento de arquivos de big data e itens de armazenamento em nuvem.

   • Se você estiver atualizando o armazenamento em nuvem do Microsoft Azure Data Lake Gen1 para Gen2, use as seguintes etapas.
   • Para qualquer outro tipo de compartilhamento de arquivo de big data, seguindo as etapas em Adicionar um item de armazenamento de dados usando as mesmas credenciais e localização de seu compartilhamento de arquivo de big data existente.
7. Depois que seu compartilhamento de big data for criado, clique em Conjuntos de dados, e ative a opção Mostrar avançado.
8. Carregue o manifesto que você salvou anteriormente clicando em Transferir na seção do manifesto. Vá até o arquivo JSON de manifesto que foi salvo anteriormente e clique em Transferir. Clique no botão Sincronizar para que as alterações sejam refletidas.
9. Se você tiver um arquivo de dicas para transferir, conclua as mesmas etapas e transfira seu arquivo de dicas na opção Mostrar avançado > Dicas > Tansferir. Clique no botão Sincronizar para que as alterações sejam refletidas.
10. Para carregar os modelos de saída, siga um destes procedimentos:
    • Adicione manualmente os modelos de saída usando o item de compartilhamento de arquivo de big data Saída > Adicionar modelos de saída.
    • Edite o arquivo JSON do item de compartilhamento de arquivo de big data através do ArcGIS Server Administrator Directory. Isso só é recomendado se você estiver familiarizado com a edição de arquivos JSON.

Agora você tem um compartilhamento de arquivo de big data e um manifesto para seu item de compartilhamento de arquivo de big data em seu portal. Você pode atualizar seus fluxos de trabalho para usar e apontar para esse compartilhamento de arquivo de big data. Quando tiver certeza de que está funcionando conforme o esperado, exclua seu compartilhamento de arquivo big data original no Server Manager.

Executar a análise em um compartilhamento de arquivo do big data

Você pode executar a análise em um conjunto de dados em um compartilhamento de arquivo big data por quaisquer clientes que suportem GeoAnalytics Server, que inclui o seguinte:

• ArcGIS Pro
• Map Viewer Classic
• ArcGIS REST API
• ArcGIS API for Python

Para executar sua análise em um compartilhamento de arquivo big data através do ArcGIS Pro ou Map Viewer Classic, selecione a GeoAnalytics Tools que deseja utilizar. Para a entrada da ferramenta, navegue até onde seus dados estão localizados no Portal no ArcGIS Pro ou na caixa de diálogo Procurar Camadas no Map Viewer Classic. Os dados estarão em Meu Conteúdo se você mesmo registrou os dados. Caso contrário, procure em Grupos ou Portal Inteiro. Note que uma camada do compartilhamento de arquivo do big data selecionada para análise não será exibida no mapa.

Anotação:

Assegure-se de estar conectado com uma conta do portal que tenha acesso ao compartilhamento de arquivo de big data registrado. Você pode procurar seu portal com o termo bigDataFileShare* para localizar rapidamente todos os compartilhamentos de arquivo do big data que você pode acessar.

Para executar a análise em um compartilhamento de arquivo do big data através do ArcGIS REST API, utilize a URL de serviço do catálogo do big data como a entrada. Se você criou o compartilhamento de arquivo de big data no portal, ele estará no formato {"url":" https://webadaptorhost.domain.com/webadaptorname/rest/DataStoreCatalogs/bigDataFileShares_filesharename/"}. Por exemplo, com uma máquina denominada example, um domínio denominado esri, um web adaptor denominado server, um compartilhamento de arquivo do big data denominado MyData e um conjunto de dados denominado Earthquakes, a URL será: {"url":" https://example.esri.com/server/rest/DataStoreCatalogs/bigDataFileShares_MyData/Earthquakes_uniqueID"}. Se você criou o compartilhamento de arquivo de big data no Server Manager, será no formato {"url":"https://webadaptorhost.domain.com/webadaptorname/rest/DataStoreCatalogs/bigDataFileShares_filesharename/BigDataCatalogServer/dataset"}

Para aprender mais sobre a entrada para análise de grandes dados através do REST, consulte o tópico Entrada de Feição na documentação do ArcGIS Services REST API.

Salvar resultados em um compartilhamento do arquivo de grandes dados

Você pode executar a análise em um conjunto de dados (compartilhamento do arquivo de grandes dados ou outra entrada) e salvar os resultados em um compartilhamento do arquivo de grandes dados. Quando você salva os resultados em um compartilhamento de arquivo do big data, não é possível visualizá-los. Você pode fazer isto através dos seguintes clientes:

• Map Viewer Classic
• ArcGIS REST API
• ArcGIS API for Python

Quando você grava resultados em um compartilhamento de arquivo do big data, o manifesto de entrada é atualizado para incluir o conjunto de dados que você acabou de salvar. Os resultados que você gravou no compartilhamento de arquivo do big data agora estão disponíveis como uma entrada para outra execução da ferramenta.