ArcGIS Data Store, поставляемое с ArcGIS Enterprise, было расширено возможностями работы с данными наблюдения путем введения хранилища пространственно-временных больших данных. Данные наблюдений могут быть движущимися объектами, изменяющимися атрибутами стационарных сенсоров, или и тем, и другим. Хранилище пространственно-временных больших данных обеспечивает архивирование большого объема данных наблюдений, сохраняет высокую пропускную скорость записи и может запускаться на нескольких компьютерах (узлах). Добавление компьютеров увеличивает емкость, позволяя вам хранить больше данных, вводить правила более долгого хранения для ваших данных и поддерживать высокую пропускную скорость записи данных.
Требования для хранилища пространственно-временных больших данных
Хранилище пространственно-временных больших данных требует ArcGIS Enterprise. Дополнительную информацию о ArcGIS Enterprise см. в разделе Что такое ArcGIS Enterprise. Подробнее о базовых развертываниях ArcGIS Enterprise см. в разделе Базовое развертывание ArcGIS Enterprise. Подробнее о добавлении функций и мощностей посредством дополнительных серверов особенно ArcGIS GeoEvent Server, см. раздел Дополнительное развертывание сервера.
При включении хранилища пространственно-временных больших данных в ArcGIS Data Store необходимо зарегистрировать хранилище пространственно-временных больших данных на хост-сервере вашего портала. Подключение хранилища данных к вашему порталу должно быть зарегистрировано с помощью GeoEvent Server в GeoEvent Manager для того, чтобы просматривать и записывать информацию в хранилище пространственно-временных больших данных. ArcGIS Server управляет несколькими узлами хранилища больших пространственно-временных больших данных, чтобы сформировать кольцо данных.
Примечание:
При архивации в хранилище пространственно-временных больших данных потоковой информации, при больших объемах такой информации дисковое пространство может быстро закончиться. Администраторы должны отслеживать журналы хранилищ пространственно-временных больших данных, чтобы быть уверенными в достаточном объеме дискового пространства. Если объем свободного на компьютере дискового пространства превышает его емкость, новые данные в хранилище пространственно-временных больших данных архивироваться не будут. Подробнее об ArcGIS Data Store и управлении дисковым пространством см. раздел Требования к дисковому пространству в системных требованиях ArcGIS Data Store.
Отправка данных в хранилище пространственно-временных больших данных
GeoEvent Server предоставляет выходные коннекторы для записи данных наблюдений в хранилище пространственно-временных больших данных.
- Выходной коннектор Добавить объект к хранилищу пространственно-временных больших данных позволяет добавлять новые объекты.
- Выходной коннектор Обновить объект в хранилище пространственно-временных больших данных позволяет обновлять существующие объекты.
- Выходной коннектор Отправить объекты в потоковый сервис позволяет записывать (сохранять) последние наблюдения (на основе Track ID), передаваемые потоковым сервисом, если включена опция Хранить последние.
Работа с данными в хранилище пространственно-временных больших данных
Большой объем данных наблюдений, хранящийся в хранилище пространственно-временных больших данных, может быть доступен через сервис объектов и отображен с помощью картографического сервиса. Картографический сервис предоставляет динамическое отображение и представление агрегированных данных, позволяя отображать наблюдения с разным уровнем детальности, в зависимости от сеанса каждого пользователя. Агрегированные плотности картографического сервиса создаются на лету во время масштабирования, поэтому отображение ваших данных на веб-карте обновляется динамически. Это очень важно для случаев использования визуализации в режиме реального времени, поскольку наблюдения постоянно обновляются; представление данных, отображаемое на веб-карте, должно отражать самые свежие данные.
Высокообъемные данные наблюдений, хранящиеся в хранилище пространственно-временных больших данных, могут быть также доступны через сервис объектов. Запросы от сервиса объектов к хранилищу пространственно-временных больших данных возвращаются очень быстро. Вы можете запрашивать любую комбинацию идентификаторов, времени, пространства и атрибутов. Необработанные объекты в хранилище пространственно-временных больших данных могут быть отображены на стороне клиента с помощью сервиса объектов. Но, учитывая объем объектов, вы, скорее всего, захотите отображать необработанные объекты только на крупных масштабах карты.
Рекомендуемым решением будет настройка отображения с учетом масштаба, для переключения между слоем картографического сервиса и слоем сервиса объектов для получения наилучших визуальных результатов. Картографический сервис отображает агрегированные данные на разных уровнях детальности для мелких масштабов. Сервис объектов включается при приближении к указанному масштабу карты, подходящему для отображения ваших необработанных объектов.
Экспорт данных из хранилища пространственно-временных больших данных
Большие объемы данных наблюдений, хранящихся в хранилище пространственно-временных больших данных, можно экспортировать как текст с разделителями в облачное хранилище, зарегистрированное в вашем ArcGIS Server. В числе поддерживаемых облачных хранилищ для экспорта данных Amazon Simple Storage Service (S3) и хранилище BlobMicrosoft Azure.
Экспорт данных из хранилища пространственно-временных больших данных выполняется на странице Источники пространственно-временных больших данных в GeoEvent Manager. Вам нужно будет указать подключение к серверу, зарегистрированное облачное хранилище данных, имя файла и опциональное условие where, если вы хотите выполнить выборочный экспорт данных.
Начало работы с хранилищем пространственно-временных больших данных
Для начала работы с хранилищем пространственно-временных больших данных обратитесь к справке ArcGIS Data Store и к Учебнику по работе с хранилищами пространственно-временных больших данных, который доступен среди учебников GeoEvent Server.