ArcGIS Data Store, доступное с ArcGIS Enterprise, работает с данными наблюдения через хранилище пространственно-временных больших данных. Данные наблюдений могут быть движущимися объектами, изменяющимися атрибутами стационарных сенсоров, или и тем, и другим. Хранилище пространственно-временных больших данных обеспечивает архивирование большого объема данных наблюдений, сохраняет высокую пропускную скорость записи и может запускаться на нескольких компьютерах (узлах). Добавление компьютеров увеличивает емкость, позволяя вам хранить больше данных, вводить правила более долгого хранения для ваших данных и поддерживать высокую пропускную скорость записи данных.
Требования для хранилища пространственно-временных больших данных
Хранилище пространственно-временных больших данных требует ArcGIS Enterprise. Дополнительную информацию о ArcGIS Enterprise см. в разделе Что такое ArcGIS Enterprise. Подробнее о базовых развертываниях ArcGIS Enterprise см. в разделе Базовое развертывание ArcGIS Enterprise. Подробнее о добавлении функций и мощностей посредством дополнительных серверов особенно ArcGIS GeoEvent Server, см. раздел Дополнительное развертывание сервера.
При включении хранилища пространственно-временных больших данных в ArcGIS Data Store необходимо зарегистрировать хранилище пространственно-временных больших данных на хост-сервере вашего портала. Подключение хранилища данных к вашему порталу должно быть зарегистрировано с помощью GeoEvent Server в GeoEvent Manager для того, чтобы просматривать и записывать информацию в хранилище пространственно-временных больших данных. ArcGIS Server управляет несколькими узлами хранилища больших пространственно-временных больших данных, чтобы сформировать кольцо данных.
Примечание:
При архивации в хранилище пространственно-временных больших данных потоковой информации, при больших объемах такой информации дисковое пространство может быстро закончиться. Администраторы должны отслеживать журналы хранилищ пространственно-временных больших данных, чтобы быть уверенными в достаточном объеме дискового пространства. Если объем свободного на компьютере дискового пространства превышает его емкость, новые данные в хранилище пространственно-временных больших данных архивироваться не будут. Подробнее об ArcGIS Data Store и управлении дисковым пространством см. раздел Требования к дисковому пространству в системных требованиях ArcGIS Data Store.
Отправка данных в хранилище пространственно-временных больших данных
GeoEvent Server предоставляет выходные коннекторы для записи данных наблюдений в хранилище пространственно-временных больших данных.
- Выходной коннектор Добавить объект к хранилищу пространственно-временных больших данных позволяет добавлять новые объекты.
- Выходной коннектор Обновить объект в хранилище пространственно-временных больших данных позволяет обновлять существующие объекты.
- Выходной коннектор Отправить объекты в потоковый сервис позволяет записывать (сохранять) последние наблюдения (на основе Track ID), передаваемые потоковым сервисом, если включена опция Хранить последние.
Работа с данными в хранилище пространственно-временных больших данных
Большой объем данных наблюдений, хранящийся в хранилище пространственно-временных больших данных, может быть доступен через сервис объектов и отображен с помощью картографического сервиса. Картографический сервис предоставляет динамическое отображение и представление агрегированных данных, позволяя отображать наблюдения с разным уровнем детальности, в зависимости от сеанса каждого пользователя. Агрегированные плотности картографического сервиса создаются на лету во время масштабирования, поэтому отображение ваших данных на веб-карте обновляется динамически. Это очень важно для случаев использования визуализации в режиме реального времени, поскольку наблюдения постоянно обновляются; представление данных, отображаемое на веб-карте, должно отражать самые свежие данные.
Высокообъемные данные наблюдений, хранящиеся в хранилище пространственно-временных больших данных, могут быть также доступны через сервис объектов. Запросы от сервиса объектов к хранилищу пространственно-временных больших данных возвращаются очень быстро. Вы можете запрашивать любую комбинацию идентификаторов, времени, пространства и атрибутов. Необработанные объекты в хранилище пространственно-временных больших данных могут быть отображены на стороне клиента с помощью сервиса объектов. Но, учитывая объем объектов, вы, скорее всего, захотите отображать необработанные объекты только на крупных масштабах карты.
Рекомендуемым решением будет настройка масштабно-зависимого отображения с учетом, для переключения между слоем картографического сервиса и слоем сервиса объектов для получения наилучших визуальных результатов. Картографический сервис отображает агрегированные данные на разных уровнях детальности для мелких масштабов. Сервис объектов включается при масштабировании сверх указанного масштаба, подходящего для визуализации необработанных объектов.
Данные наблюдений большого объема, к которым получают доступ картографические сервисы и сервисы объектов, хранятся в источнике данных. При наличии источника данных можно создавать новые, редактировать существующие или удалять любые картографические сервисы и сервисы объектов, которые ссылаются на источник данных. Это можно сделать, используя настройки, доступные на странице Хранилища пространственно-временных больших данных в GeoEvent Manager. Данные также могут быть полностью удалены из источника данных, тем самым удаляются необработанные объекты, возвращаемые соответствующими сервисами объектов, или агрегированное представление данных, возвращаемое соответствующими картографическими сервисами.
Хотя существует возможность удалить все данные, хранящиеся в источнике данных, или даже полностью удалить источник данных, карту и сервисы объектов, рекомендуется применять стратегию управления данными, используя параметры хранения данных, доступные в самом источнике данных.
Экспорт данных из хранилища пространственно-временных больших данных
Большие объемы данных наблюдений, хранящихся в хранилище пространственно-временных больших данных, можно экспортировать как текст с разделителями в облачное хранилище, зарегистрированное в вашем ArcGIS Server. В число поддерживаемых облачных хранилищ для экспорта данных входят Amazon Simple Storage Service (S3) и Microsoft Azure Blob Storage.
Экспорт данных из хранилища пространственно-временных больших данных выполняется на странице Источники пространственно-временных больших данных в GeoEvent Manager. Вам нужно будет указать подключение к серверу, зарегистрированное облачное хранилище данных, имя файла и опциональное условие where, чтобы выполнить выборочный экспорт данных.
Начало работы с хранилищем пространственно-временных больших данных
Для начала работы с хранилищем пространственно-временных больших данных обратитесь к справке ArcGIS Data Store и к Учебнику по работе с хранилищами пространственно-временных больших данных, который доступен среди учебников GeoEvent Server.