ArcGIS Data Pipelines — это не требующая написания кода возможность визуальной обработки данных, которая упрощает подготовку и интеграцию данных для рабочих процессов картографирования и анализа. С помощью интерфейса с функцией перетаскивания вы можете подключаться к различным источникам данных, применять общие инструменты подготовки данных и публиковать результаты в виде размещенного векторного слоя или таблицы. Data Pipelines может запускаться по требованию или по расписанию для автоматического запуска, что сокращает объем ручной работы и гарантирует актуальность и готовность данных вашей организации к использованию.
Data Pipelines поддерживает как пространственные, так и непространственные данные, что делает его универсальным инструментом для широкого спектра ГИС и бизнес-процессов. Вы можете работать с такими векторными данными, как точки, линии и полигоны, а также с непространственными данными: файлами CSV и JSON. Данные можно извлекать из облачного хранилища (например, Amazon S3 и Microsoft Azure Storage), облачных баз данных (например, Google BigQuery и Snowflake), URL-адресов, векторных слоев и т.д. После подключения вы сможете использовать инструменты для форматирования, построения и объединения наборов данных из нескольких источников в формат, подходящий для картографирования, анализа или публикации по всей платфоме ArcGIS.
Инструменты Data Pipelines организованы в структурированные наборы инструментов, такие как очистка, конструирование, интеграция и форматирование, которые помогают вам преобразовывать ваши данные. Инструменты поддерживают широкий диапазон рабочих процессов, к примеру:
- Управление схемами наборов данных, путем обновления имен или типов полей.
- Выбор поднабора полей для извлечения целевой информации.
- Фильтр по значениям атрибутов или геометрии для очистки данных.
- Объединение наборов данных с помощью функций соединения или слияния.
- Вычисление полей с использованием функций ArcGIS Arcade.
- Создание полей геометрии или времени для использования в пространственном или временном анализе.
При построении конвейера данных и настройке инструментов вы можете предварительно просматривать результаты. Это значит, что вы можете проверить и усовершенствовать данные при подготовке к записи окончательного результата. Как только вы завершите конвейер данных, вы можете запустить его, чтобы создать или обновить размещенный векторный слой или таблицу, которые будут доступны в ваших ресурсах. Вы можете настраивать свойства геометрии и времени для выходного векторного слоя с целью его подготовки к визуализации, а также пространственному или временному анализу, операционным панелям или веб-картам.