Los archivos compartidos de big data se registran como un data store mediante ArcGIS Server Manager en su ArcGIS GeoAnalytics Server. Los archivos compartidos de big data requieren un manifiesto en el que se describa el esquema de los datos, así como los campos y formatos que representan la geometría y el tiempo en un dataset. El manifiesto se genera automáticamente al registrar el uso compartido de un archivo de big data. Puede que necesite realizar modificaciones si se produce algún cambio en los datos o si la generación del manifiesto no pudo determinar toda la información necesaria (por ejemplo, el manifiesto generado automáticamente no seleccionó el campo correcto para la geometría o el tiempo).
Puede ver y editar la información de los datasets y manifiestos a través de ArcGIS Server Manager en su ArcGIS GeoAnalytics Server.
Editar un archivo compartido de big data
Una vez que haya registrado un archivo compartido de big data, puede ver y editar los atributos y parámetros de los datasets registrados de ese elemento abriendo el editor de manifiestos de archivos compartidos de big data.
Por ejemplo, puede que desee verificar la cantidad de datasets que hay dentro de un archivo compartido registrado. Si al hacerlo no ve en el archivo compartido registrado la cantidad de datasets que esperaba, debería comprobar si la ubicación registrada contiene datasets válidos.
Puede que también desee revisar los esquemas de dataset de un archivo compartido de big data registrado. Puede modificar el esquema de un dataset seleccionado actualizando la geometría, la definición de tiempo y los nombres de campo en el recurso de manifiesto asociado.
En la pestaña de opciones avanzadas del editor de manifiestos de archivos compartidos de big data, puede cargar un archivo de sugerencias para proporcionar información sobre un dataset, por ejemplo, la presencia o ausencia de una fila de encabezado, codificación, delimitador de campo o terminador de registro. Al volver a generar el manifiesto después de cargar un archivo de sugerencias se utilizará la información proporcionada para generar el manifiesto.
Opcionalmente, puede descargar el manifiesto, editarlo y cargar el archivo de manifiesto editado.
Editar datasets de archivos compartidos de big data
En el editor de manifiestos de archivos compartidos de big data, puede ver un archivo compartido de big data seleccionado y los datasets que se han registrado correctamente en él. Cuando selecciona un dataset en el menú desplegable del editor, se rellenan los parámetros correspondientes. Para obtener más información sobre cada una de las opciones de este cuadro de diálogo, consulte Edición de parámetros de archivos compartidos de big data. Para editar los parámetros del dataset, haga lo siguiente:
- En el cuadro de diálogo Data Stores registrados, localice el archivo compartido de big data que desea editar.
- Haga clic en el Lápiz de editar para ver los detalles y las opciones para los datasets correspondientes.
- Haga clic en la pestaña Datasets para mostrar los datasets registrados y sus parámetros correspondientes.
- Seleccione un dataset en el menú desplegable para ver la información representada en su manifiesto. Realice las actualizaciones que necesite en las propiedades del dataset.
- Cuando haya terminado de editar las propiedades del dataset, haga clic en Guardar.
Editar un archivo de manifiesto de archivos compartidos de big data o un archivo de sugerencias
En la pestaña Opciones avanzadas del editor de archivos compartidos de big data, puede editar el archivo de manifiesto o el archivo de sugerencias asociado eligiendo la pestaña correspondiente. Si carga un manifiesto, se sobrescribirán los cambios que ha realizado al manifiesto del archivo de big data compartido en el editor y el manifiesto actual se reemplazará. Para obtener más información sobre el manifiesto de archivos compartidos de big data, consulte Comprender un manifiesto de archivos compartidos de big data. Para obtener más información sobre cómo usar el archivo de sugerencias, consulte Comprender el archivo de sugerencias. Para editar un archivo de manifiesto de archivos compartidos de big data o un archivo de sugerencias, haga lo siguiente:
- En el cuadro de diálogo Data Stores registrados, localice el archivo compartido de big data que desea modificar.
- Haga clic en el Lápiz de editar para ver las opciones para modificar el recurso del manifiesto.
- Haga clic en la pestaña Opciones avanzadas.
- En la pestaña Opciones avanzadas, elija la pestaña Manifiesto o Sugerencias, dependiendo de lo que vaya a modificar.
- Para descargar el archivo de manifiesto, haga clic en Manifiesto > Descargar.
- Para descargar el archivo de sugerencias, haga clic en Sugerencias > Descargar.
- Utilice un editor de texto para modificar y guardar los cambios localmente en el.json archivo de manifiesto o .dat archivo de sugerencias descargado.
Sugerencia:
El formato de archivo predeterminado para el archivo de sugerencias es .dat. Una vez que haya descargado el archivo, puede cambiarle la extensión a .txt y editar el archivo. - Para cargar un archivo editado, haga clic en el Lápiz de editar correspondiente al archivo compartido de big data que desee modificar.
- Para editar el manifiesto, haga clic en Opciones avanzadas > Manifiesto > Cargar y examine el archivo .json actualizado.
- Para editar el archivo de sugerencias, haga clic en Opciones avanzadas > Sugerencias > Cargar y examine el archivo .txt actualizado.
- Haga clic en Cargar.
Si carga un archivo de sugerencias, asegúrese de volver a generar el manifiesto. Cuando regenere un manifiesto, solo se actualizarán los datasets con sugerencias o los nuevos datasets, y los cambios efectuados en otros datasets que no pertenecen al archivo de sugerencias se mantendrán intactos.
Volver a generar el manifiesto para un archivo compartido de big data
Después de crear un archivo compartido de big data y de haber generado un manifiesto, se muestra un botón para volver a generar el manifiesto para cada entrada en el cuadro de diálogo Data Stores registrados.
Puede volver a generar un manifiesto si ha agregado datos nuevos o si ha cargado un archivo de sugerencias utilizando el recurso de edición. El archivo de sugerencias proporciona especificaciones que se utilizan cuando se vuelve a generar el manifiesto.
Nota:
Cuando se vuelve a generar un manifiesto, se actualizan los datasets existentes que tienen un archivo de sugerencias o datasets nuevos. Todas las ediciones que haya realizado en el manifiesto se sobrescribirán con las reglas definidas en el archivo de sugerencias.Edición de parámetros de archivos compartidos de big data
El editor de archivos compartidos de big data consta de las cinco secciones siguientes:
- Selector de dataset
- Campos
- Geometría
- Time
- Formato de dataset
Se recomienda usar un archivo de sugerencias antes de editar los datos si la generación del manifiesto no ha determinado correctamente los nombres de campo, la codificación, los delimitadores de campo o los caracteres de comillas.
Selector de dataset
Un manifiesto está compuesto de uno o más datasets. La cantidad de datasets depende de la cantidad de carpetas que contenga la ubicación del archivo compartido de big data. Cuando abre el administrador de manifiestos, puede ver los datasets que se han registrado correctamente en el archivo compartido de big data. Cuando selecciona un dataset del menú desplegable, los parámetros del dataset se llenarán con la información del dataset.
Si esperaba encontrar más datasets en su manifiesto o bien falta alguno, realice lo siguiente:
- Verifique que ha registrado correctamente la carpeta de nivel superior. Para obtener más información, consulte Registrar un data store mediante ArcGIS Server Manager.
- Compruebe que el formato de los datos de entrada esté permitido como, por ejemplo, una colección de archivos delimitados, shapefiles, parquet u ORC.
- Asegúrese de que el esquema del dataset de entrada de interés sea coherente para una captura de archivos (todos los campos de un mismo dataset deben tener los mismos campos).
Campos
La ficha Campos muestra todos los campos de un dataset. Cuando seleccione un dataset, podrá ver lo siguiente para cada campo:
- El nombre del campo.
- El tipo de campo.
El nombre y el tipo del campo se pueden modificar para los archivos delimitados. Si desea modificar más de un nombre de campo, se recomienda que utilice un archivo de sugerencias.
Si el dataset de entrada es un archivo delimitado, existirán varios parámetros que se pueden modificar en el manifiesto en Manager.
Geometría
La sección de geometría enumera el tipo de geometría y cómo se representa. La tabla siguiente describe las opciones disponibles con notas para los cambios que pueda realizar dependiendo del tipo de dataset de entrada:
Parámetros de geometría
| Parámetro | Descripción | Archivos delimitados | Shapefiles | Archivos ORC | Archivos de parquet |
|---|---|---|---|---|---|
Geometría | El tipo de geometría. Las opciones son Punto, Polilínea, Polígono o Ninguno. Si no hay ninguna geometría, la entrada es una tabla. | Editable | No se puede modificar | Editable | Editable |
Referencia espacial (WKID/WKT) | La referencia espacial del dataset. Esta opción solo se muestra si el dataset no es una tabla. | Es posible modificarlo. De forma predeterminada, tendrá el valor 4326, WGS 1984. | No se puede modificar | Editable | Editable |
Tipo de formato de geometría | Cómo se formatea la geometría para cada entidad. Las opciones son XYZ (campos que representan a los valores X, Y y, opcionalmente, Z; XYZ solo se aplica a los puntos), WKT (de "well known text", texto bien conocido), GeoJson, EsriJson y shape. Esta opción solo está disponible si el dataset no es una tabla ni un shapefile. | Editable | No disponible | Editable | Editable |
Time
La sección "time" resume cómo se representa el tiempo. La tabla siguiente describe las opciones disponibles con notas para los cambios que pueda realizar dependiendo del tipo de dataset de entrada. Las opciones de tiempo son las mismas para todos los tipos de datos, mientras no se indique lo contrario.
Parámetros de tiempo
| Parámetro | Descripción | Ejemplo |
|---|---|---|
Tipo de hora | El tipo del tiempo de entrada. Las opciones son Instante (un solo momento en el tiempo), Intervalo (un intervalo de tiempo con un momento inicial y final) y Ninguno. | Instante |
Zona horaria | La zona horaria de la hora de entrada. Esta opción solo está disponible si Tipo de tiempo no es Ninguno. | UTC |
Tabla de nombre y formato del tiempo | Esta tabla selecciona el campo o campos de tiempo y describe cómo se define el tiempo. El tiempo puede usar uno o varios campos para definir el tiempo, además de usar uno o varios formatos para un mismo campo. De forma predeterminada, el primer campo que presenta el nombre predeterminado «time» se usará como campo de tiempo, con una estimación del formato del tiempo. Si hay un shapefile, se usará el primer campo del tipo "date". Si el tiempo es del tipo Intervalo, se debe especificar una hora de inicio y una hora final. La tabla de formateo de tiempo solo está disponible si Tipo de tiempo no es Ninguno. | Ejemplo con un solo campo para representar el tiempo con dos formatos diferentes:
Ejemplo con dos campos para representar el tiempo:
|
Formatos de hora
En la tabla siguiente se describe cómo se representa la hora cuando se edita un archivo compartido de big data a través de ArcGIS Server Manager o directamente en un manifiesto. Los ejemplos muestran cómo se representa la hora 9:45:02.05 PM del 2 de enero de 2016.
Formatos de tiempo en archivos compartidos de big data
| Símbolo | Significado | Ejemplo |
|---|---|---|
aa | El año, representado por dos dígitos. | 16 |
yyyy | El año, representado por cuatro dígitos. | 2016 |
Milímetro(s) | El mes, representado numéricamente. | 01 o 1 |
MMM | El mes, representado con tres letras. | Jan |
MMMM | El mes, representado con el nombre completo. | January |
dd | El día. | 02 o 2 |
HH | La hora usando un día de 24 horas; valores entre 0 y 23. | 21 |
hh | La hora usando un día de 12 horas; valores entre 1 y 12. | 9 |
mm | Los minutos; valores entre 0 y 59. | 45 |
ss | Los segundos; valores entre 0 y 59. | 02 |
SSS | Los milisegundos; valores entre 0 y 999. | 50 |
a | Marcador AM/PM. | PM |
epoch_millis | El tiempo en milésimas de segundo desde epoch. | 1509581781000 |
epoch_seconds | El tiempo en segundos desde epoch. | 1509747601 |
Z | El desplazamiento de zona horaria expresado en horas. | -0100 o -01:00 |
ZZZ | El desplazamiento de zona horaria expresado mediante Id. | America/Los_Angeles |
En la siguiente tabla se muestran ejemplos de distintos formatos de la misma fecha, 2 de enero de 2016 a las 9:45:02.05 PM:
Ejemplos de formato de tiempo
| Fecha de entrada | Formato de fecha |
|---|---|
01/02/2016 9:45:02PM | MM/dd/aaaa hh:mm:ssa |
Ene02-16 21:45:02 | MMMdd-aa HH:mm:ss |
2 de enero 2016 9:45:02.050PM | MMMM dd aaaa hh:mm:ss.SSSa |
01/02/2017T9:45:14:05-0000 | MM/dd/yyyy'T'HH:mm:ssZ |
Formato de dataset
La sección de formato de dataset resume el formato en el que se encuentran los datos. Los datos pueden estar en uno de los siguientes formatos:
- Shapefile (.shp)
- Archivo delimitado (por ejemplo, .csv)
- Archivo de parquet
- Archivo ORC
Los parámetros disponibles difieren en función del dataset. En el caso de los shapefiles, los archivos ORC y de parquet, el único parámetro es el tipo de archivo, que no puede modificarse. Si el dataset de entrada es un archivo delimitado, existirán varios parámetros que se pueden modificar en el manifiesto en Manager. Estos parámetros se describen en la siguiente tabla:
Formatos de dataset
| Parámetro | Descripción |
|---|---|
Extensión de archivo | Enumera la extensión del tipo de archivo en el dataset de entrada. Los formatos comunes son .csv y .txt. Esta información se puede incluir en el archivo de sugerencias. |
Delimitador de campo | Determina el delimitador de cada campo. Los formatos comunes son , y ;. Esta información se puede incluir en el archivo de sugerencias. |
Finalizador de registro | Determina el finalizador de cada fila de datos. Los formatos comunes son \n y \t. Esta información se puede incluir en el archivo de sugerencias. |
Carácter de comillas | Determina el carácter usado para las comillas. Esta información se puede incluir en el archivo de sugerencias. |
Tiene fila de encabezado | Valor booleano que determina si la tabla de entrada incluía una fila de encabezado. Si se incluye una fila de encabezado, los encabezados se usarán para los nombres de campo. La información del nombre de campo está prediciendo campos de geometría y de hora. Los encabezados se pueden establecer usando el archivo de sugerencias. |
Codificación | El tipo de codificación utilizado en el archivo. De forma predeterminada, será UTF-8. Esto se pueden establecer en el archivo de sugerencias. |