Os compartilhamentos do arquivo de grandes dados são registrados como um armazenamento de dados via ArcGIS Server Manager no seu ArcGIS GeoAnalytics Server. Um compartilhamento do arquivo de grandes dados exige um manifesto para detalhar o esquema dos dados, como também, os campos e formatos que representam geometria e tempo em um conjunto de dados. O manifesto é automaticamente gerado quando você registrar um compartilhamento do arquivo de grandes dados. Você pode precisar fazer modificações se houver quaisquer alterações nos seus dados ou se a geração do manifesto não foi capaz de determinar todas as informações necessárias — por exemplo, se o manifesto gerado automaticamente não selecionou o campo correto da geometria ou do tempo.
Você pode visualizar e editar os conjuntos de dados e informações do manifesto pelo ArcGIS Server Manager no seu ArcGIS GeoAnalytics Server .
Editar um compartilhamento do arquivo de grandes dados
Após você ter registrado um compartilhamento do arquivo de grandes dados, você poderá visualizar e editar atributos e configurações para estes conjuntos de dados registrados do item abrindo o editor de manifesto de compartilhamento do arquivo de grandes dados.
Por exemplo, você pode desejar verificar o número de conjunto de dados dentro de um compartilhamento de arquivo registrado. Se, ao fazer isso, você não visualiza o número esperado de conjunto de dados no compartilhamento de arquivo registrado, você deve checar se a posição registrada contém o conjunto de dados válido.
Você pode também desejar revisar os esquemas de conjunto de dados de um compartilhamento do arquivo de grandes dados registrado. Você pode modificar um esquema do conjunto de dados selecionado atualizando sua geometria, definição de tempo e nomes de campo em seu recurso de manifesto associado.
Na guia avançada do editor de manifesto de compartilhamento do arquivo de grandes dados, você pode transferir um arquivo de sugestões para fornecer informações sobre um conjunto de dados como a presença ou ausência de uma linha de cabeçalho, codificação, delimitador de campo ou finalizador de registro. A geração novamente do manifesto após transferir um arquivo de sugestões utilizará as informações fornecidas para gerar o manifesto.
Opcionalmente, você pode baixar o manifesto, editar e transferir o arquivo de manifesto editado.
Editar conjunto de dados de compartilhamento do arquivo de grandes dados
No editor de manifesto de compartilhamento do arquivo de grandes dados, você pode visualizar um compartilhamento do arquivo de grandes dados e conjuntos de dados selecionados que foram registrados dentro dele com sucesso. Ao selecionar um conjunto de dados a partir do menu suspenso do editor, os parâmetros correspondentes são preenchidos. Para detalhes sobre cada opção nesta caixa de diálogo, consulte parâmetros de edição em compartilhamentos do arquivo de grandes dados. Para editar parâmetros de conjunto de dados, faça o seguinte:
- Na caixa de diálogo Armazenamento de Dados Registrados, localize o compartilhamento do arquivo de grandes dados que deseja editar.
- Clique em Lápis de Editar para expor os detalhes e as opções do conjunto de dados correspondente.
- Clique na guia Conjuntos de Dados para mostrar os conjuntos de dados registrados e seus parâmetros correspondentes.
- Selecione um conjunto de dados a partir do menu suspenso para visualizar as informações representadas em seu manifesto. Faça as atualizações para suas propriedades do conjunto de dados como necessário.
- Ao finalizar a edição das propriedades de conjunto de dados, clique em Salvar.
Editar um manifesto de compartilhamento do arquivo de grandes dados ou arquivo de sugestões
Na guia Avançado do editor de compartilhamento do arquivo de grandes dados, você pode editar o manifesto associado ou arquivo de sugestões escolhendo sua guia respectiva. Se você transferir um manifesto, ele substituirá quaisquer alterações realizadas para seu manifesto de compartilhamento do arquivo de grandes dados no editor e substituirá o manifesto atual. Para aprender mais sobre manifestos de compartilhamento do arquivo de grandes dados, consulte Entendendo um manifesto de compartilhamento do arquivo de grandes dados.. Para aprender mais sobre arquivos de sugestões, consulte Entendendo o arquivo de sugestões. Para editar um manifesto de compartilhamento do arquivo de grandes dados ou arquivo de sugestões, faça o seguinte:
- Na caixa de diálogo Armazenamento de Dados Registrados, localize o compartilhamento do arquivo de grandes dados que deseja modificar.
- Clique em Lápis de Editar para mostrar as opções para modificar o recurso do manifesto.
- Clique na guia Avançado.
- Na guia Avançado , escolha a guia Manifesto ou Sugestões , dependendo do que você está modificando.
- Para baixar o arquivo de manifesto, clique em Manifesto > Download.
- Para baixar o arquivo de sugestões, clique em Sugestões > Download.
- Utilize um editor de textos para modificar e salvar alterações localmente para o manifeste arquivo baixado.json ou .dat arquivo de sugestões.
Dica:
O formato do arquivo padrão do arquivo de sugestões é .dat. Após ter baixado o arquivo, você pode alterar sua extensão para .txt e editar o arquivo. - Para transferir um arquivo editado, clique no Lápis de Editar do compartilhamento do arquivo de grandes dados que deseja modificar.
- Para editar o manifesto, clique em Avançado > Manifesto > Transferir e procure pelo arquivo atualizado .json.
- Para editar o arquivo de sugestões, clique em Avançado > Sugestões > Transferir e procure pelo arquivo atualizado .txt.
- Clique em Transferir.
Se você transferir um arquivo de sugestões, certifique-se de gerar novamente o manifesto. Quando você gera novamente um manifesto, somente conjuntos de dados com sugestões ou novos conjuntos de dados serão atualizados e as alterações realizadas para quaisquer outros conjuntos de dados não no arquivo de sugestões permanecerão as mesmas.
Gerar novamente o manifesto de um compartilhamento do arquivo de grandes dados
Após um compartilhamento do arquivo de grandes dados ser criado e um manifesto ter sido gerado, um botão para gerar novamente o manifesto aparece para cada entrada na caixa de diálogo Armazenamento de Dados Registrados.
Você pode gerar novamente um manifesto se você adicionou novos dados ou se você transferiu um arquivo de sugestões utilizando o recurso de edição. O arquivo de sugestões fornecem especificações que são utilizadas ao gerar novamente o manifesto.
Anotação:
Quando um manifesto é gerado novamente, ele atualizará o manifesto dos conjuntos de dados existentes que tenham um arquivo de sugestões ou novos conjuntos de dados. Quaisquer edições realizadas ao manifesto serão substituídas com as regras definidas no arquivo de sugestões.Parâmetros da edição de compartilhamento do arquivo de grandes dados
O editor de compartilhamento do arquivo de grandes dados inclui as seguintes cinco seções:
- Seletor do conjunto de dados
- Campos
- Geometria
- Tempo
- Formato do conjunto de dados
É recomendado utilizar um arquivo de sugestões antes de editar seus dados se a geração do manifesto não determinou nomes de campo, codificação, delimitadores de campo ou caracteres de citação corretamente.
Seletor do conjunto de dados
Um manifesto é composto de um ou mais conjunto de dados. O número de conjunto de dados é dependente do número de pastas em seu local de compartilhamento do arquivo de grandes dados. Quando você abre o gerenciador do manifesto, você pode visualizar o conjunto de dados que foi registrado com sucesso em seu compartilhamento do arquivo de grandes dados. Quando você selecionar um conjunto de dados a partir do menu suspenso, os parâmetros de conjunto de dados serão preenchidos com as informações do conjunto de dados.
Se você esperou localizar mais conjunto de dados em seu manifesto ou estão faltando algum, faça o seguinte:
- Verifique se você registrou corretamente a pasta de nível superior. Para mais informações, consulte Registrar um armazenamento de dados pelo ArcGIS Server Manager.
- Marque se seus dados de entrada estão em um formato permitido como uma coleção de arquivos delimitados, shapefiles, parquet ou ORC.
- Garanta que o esquema do seu conjunto de dados de entrada de interesse seja consistente para uma coleção de arquivos (todos os arquivos em um único conjunto de dados devem ter os mesmos campos).
Campos
A seção dos campos listam todos os campos em um conjunto de dados. Quando você selecionar um conjunto de dados, você poderá visualizar o seguinte para cada campo:
- O nome do campo.
- O tipo de campo.
O nome e o tipo de campo podem ser modificados para arquivos delimitados. Se você estiver modificando mais de um nome de campo, é recomendável utilizar um arquivo de sugestões.
Se o conjunto de dados de entrada for um arquivo delimitado, haverá parâmetros múltiplos que podem ser modificados no manifesto no Manager.
Geometria
A seção de geometria lista o tipo de geometria e como ela é representada. A tabela seguinte esboça as opções disponíveis, com notas para alterações que você pode fazer dependendo do tipo de conjunto de dados de entrada:
Parâmetros de geometria
| Parâmetro | Descrição | Arquivos delimitados | Shapefiles | Arquivos ORC | Arquivos Parquet |
|---|---|---|---|---|---|
Geometria | O tipo de Geometria. As opções são Ponto, Polilinha, Polígono ou Nenhum. Se não houver geometria, a entrada será uma tabela. | Editável | Não pode ser modificado | Editável | Editável |
Referência espacial (WKID/WKT) | A referência espacial do conjunto de dados. Esta opção é mostrada somente se o conjunto de dados não for uma tabela. | Isto pode ser modificado. Por padrão, isto será configurado para 4326, WGS 1984. | Não pode ser modificado | Editável | Editável |
Tipo de formatação da geometria | Como a geometria é formatada para cada feição. As opções são XYZ (campos que representam X, Y, e opcionalmente valores Z —XYZ é aplicável somente aos pontos), WKT (texto bem conhecido), GeoJson, EsriJson e formato. Esta opção está disponível somente se o conjunto de dados não for uma tabela ou um shapefile. | Editável | Não disponível | Editável | Editável |
Tempo
A seção de tempo descreve como o tempo é representado. A seguinte tabela descreve as opções disponíveis, com notas para alterações que você pode fazer dependendo do tipo de conjunto de dados de entrada. As opções de tempo são as mesmas para todos os tipos de dados, exceto onde indicado.
Parâmetros de tempo
| Parâmetro | Descrição | Exemplo |
|---|---|---|
Tipo de hora | O tipo da hora de entrada. As opções são Momento (um único momento no tempo), Intervalo (um período de tempo com uma hora inicial e final) e Nenhum. | Momento |
Fuso horário | O fuso horário da hora de entrada. Esta opção está disponível somente se Tipo de Hora não for Nenhum. | UTC |
Nome e tabela de formatação para hora | Esta tabela seleciona o campo ou campos de hora e descreve como a hora é definida. A hora pode utilizar um ou mais campos para definir o tempo, além de utilizar um ou mais formatos para um único campo. Por padrão, o primeiro campo com o nome "hora" será utilizado como o campo de hora, com uma estimativa do formato d e hora. Se existir um shapefile, o primeiro campo de tipo de "data" será utilizado. Se o tempo for do tipo Intervalo, deverá haver uma hora inicial e final especificada. A tabela de formatação de hora está disponível somente se Tipo de Hora não for Nenhum. | Exemplo com um único campo utilizado para representar a hora com dois formatos diferentes:
Exemplo com dois campos utilizados para representar a hora:
|
Formatos de hora
A seguinte tabela descreve como representar a hora quando você editar um compartilhamento do arquivo de grandes dados pelo ArcGIS Server Manager ou diretamente em um manifesto. Os exemplos mostram como representar a hora de 2 de Janeiro de 2016 às 9:45:02.05 PM.
Formatos de hora em um manifesto de compartilhamento do arquivo de grandes dados
| Símbolo | Significado | Exemplo |
|---|---|---|
yy | O ano, representado por dois dígitos. | 16 |
yyyy | O ano, representado por quatros dígitos. | 2016 |
MM | O mês, representou numericamente. | 01 ou 1 |
MMM | O mês, representado três letras. | Jan |
MMMM | O mês, representado utilizando a ortografia completa. | January |
gd | O dia. | 02 ou 2 |
HH | A hora, ao utilizar um dia de 24 horas; os valores variam de 0-23. | 21 |
hh | A hora, ao utilizar um dia de 12 horas; os valores variam de 1-12. | 9 |
mm | O minuto; os valores variam de 0-59. | 45 |
ss | O segundo; os valores variam de 0-59. | 02 |
SSS | Os milissegundos; os valores variam de 0-999. | 50 |
a | O Marcador AM/PM. | PM |
epoch_millis | A hora em milissegundos do epoch. | 1509581781000 |
epoch_seconds | A hora em segundos do epoch. | 1509747601 |
Z | O deslocamento do fuso horário expresso em horas. | -0100 ou -01:00 |
ZZZ | O deslocamento do fuso horário expresso utilizando IDs. | America/Los_Angeles |
A seguinte tabela mostra exemplos para diferentes formatos da mesma data, 2 de Janeiro de 2016 às 9: 45: 02.05 PM:
Exemplos do formato de hora
| Data de entrada | Formato da Data |
|---|---|
01/02/2016 9:45:02PM | MM/dd/yyyy hh:mm:ssa |
Jan02-16 21:45:02 | MMMdd-yy HH:mm:ss |
Janeiro 02 2016 9:45:02.050PM | MMMM dd yyyy hh:mm:ss.SSSa |
01/02/2017T9:45:14:05-0000 | MM/dd/yyyy'T'HH:mm:ssZ |
Formato do conjunto de dados
A seção de formato do conjunto de dados descreve o formato no qual estão os dados. Os dados podem estar em um dos seguintes formatos:
- Shapefile (.shp)
- Arquivo delimitado (por exemplo .csv)
- Arquivo Parquet
- Arquivo ORC
Os parâmetros disponíveis diferem dependendo do conjunto de dados. Para shapefiles, arquivos ORC e arquivos parquet, o único parâmetro é o tipo de arquivo, que não pode ser modificado. Se o conjunto de dados de entrada for um arquivo delimitado, haverá parâmetros múltiplos que podem ser modificados no manifesto no Manager. Estes são descritos na seguinte tabela:
Formatos do conjunto de dados
| Parâmetro | Descrição |
|---|---|
Extensão do arquivo | Lista a extensão de tipo do arquivo no conjunto de dados de entrada. Os formatos comuns são .csv e .txt. Estas informações podem ser incluídas no arquivo de sugestões. |
Delimitador de campo | Determina o delimitador de cada campo. Os formatos comuns são , e ;. Estas informações podem ser incluídas no arquivo de sugestões. |
Finalizador de registro | Determina o finalizador de cada linha de dados. Os formatos comuns são \n e \t. Estas informações podem ser incluídas no arquivo de sugestões. |
Caractere de aspas | Determina o caractere utilizado para aspas. Estas informações podem ser incluídas no arquivo de sugestões. |
Tem linha de cabeçalho | Um Booleano que determina se a tabela de entrada incluiu uma linha de cabeçalho. Se uma linha de cabeçalho for incluída, os cabeçalhos serão utilizados para os nomes de campo. As informações do nome de campo estão predizendo os campos de geometria e de tempo. Os cabeçalhos podem ser configurados utilizando o arquivo de sugestões. |
Codificação | O tipo de codificação utilizada no arquivo. Por padrão, este será UTF-8. Isto pode ser configurado no arquivo de sugestões. |