Модели сегментации выполняют попиксельную классификацию, распределяя пикселы по разным классам. Классифицированные пикселы соответствуют разным объектам или регионам на изображении. Эти модели могут по-разному использоваться в различных областях. При использовании спутниковых и аэрофотоснимков эти модели могут помочь находить такие объекты, как контуры зданий, дороги, водоемы, посевные поля и т.д.
Обычно каждая модель сегментации должна быть обучена с нуля с использованием набора данных с помеченными интересующими вас объектами. Это может оказаться очень трудоемкой задачей. Модель Segment Anything Model (SAM) от Meta AI предназначена для создания базовой модели, которую можно использовать для сегментации (как следует из названия) чего угодно с использованием обучения без ознакомления и обобщения по доменам без дополнительного обучения.
SAM обучается на наборе данных Segment Anything 1-Billion mask (SA-1B), который содержит набор из 11 миллионов изображений и более 1 миллиарда масок. Это делает модель очень надежной при определении границ объектов и различении различных объектов в разных доменах, даже если модель никогда раньше с такими объектами не сталкивалась. Используйте эту модель для извлечения масок различных объектов на любых изображениях.
Лицензионные требования
Для выполнения этого рабочего процесса необходимы следующие лицензионные требования:
- ArcGIS Desktop—ArcGIS Image Analyst дополнительный модуль для ArcGIS Pro
- ArcGIS Enterprise – ArcGIS Image Server
- ArcGIS Online – ArcGIS Image for ArcGIS Online
Описание модели
Данная модель содержит следующие характеристики:
- Входные данные — 8-битные 3-канальные изображения.
- Выходные данные — класс объектов, содержащий маски разных объектов на изображении.
- Вычислить — этот рабочий процесс требует интенсивных вычислений, поэтому рекомендуется использовать видеокарту с минимальной вычислительной мощностью CUDA 6.0. Для этой модели требуется графический процессор с объемом памяти не менее 8 ГБ.
- Подходящие географические регионы — эта модель предположительно должна эффективно работать по всему миру.
- Архитектура — эта модель основана на открытой модели Segment Anything Model (SAM)Segment Anything Model (SAM) от Meta AI.
Доступ и загрузка модели
Загрузите предварительно обученную модель Segment Anything Model (SAM) из ArcGIS Living Atlas of the World. Или получите доступ к модели непосредственно из ArcGIS Pro с помощью инструмента Выявить объекты при помощи глубокого обучения, либо работайте с ней в ArcGIS Image for ArcGIS Online.
- Перейдите к ArcGIS Living Atlas of the World.
- Войдите под своими учетными данными ArcGIS Online.
- Выполните поиск по запросу Segment Anything Model и откройте страницу элемента в результатах поиска.
- Нажмите кнопку Загрузить, чтобы загрузить модель.
Использовать загруженный файл .dlpk можно напрямую в ArcGIS Pro, либо использовать его в ArcGIS Enterprise. Кроме того, при необходимости можно настроить предварительно обученную модель.
Информация по версии
Ниже приведена информация о версии:
| Дата | Описание |
|---|---|
| Май 2023 г. |
Первая версия модели Segment Anything Model (SAM) |